首页 > 其他分享 >火山引擎 DataTester:抖音的设计团队是如何用 A/B 测试实现高效优化的?

火山引擎 DataTester:抖音的设计团队是如何用 A/B 测试实现高效优化的?

时间:2023-03-23 14:45:11浏览次数:47  
标签:产品 蒙层 引擎 实验 测试 DataTester 抖音

更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群

 对 C 端产品而言,产品的每一个细节设置都或多或少影响着用户的产品体验,本文介绍字节跳动的 A/B 实验文化的同时,也将分享抖音设计团队通过火山引擎 A/B 测试 DataTester 实现产品优化的案例。

该实验最初来源自抖音 UI 团队一位设计同学提出的想法:用户刷短视频的时候会有一定的视觉疲劳——“是否可以通过视频蒙层让文字更加清楚,让用户浏览视频不再费眼,使用体验更好?”

其实,这个设想在产品上的改动非常简单,调整两个参数就可以改善视频文案整体的突出程度,一个参数是蒙层,另一个参数是蒙层的透明度。两个不同蒙层的产品版本,成为了 DataTester 中 A/B 实验的实验组和对照组,UI 设置如下图:

 

实验结果非常惊喜,DataTester 的实验数据显示“文字更加突出”组的用户停留时间更长,抖音的人均 App 使用时长显著增加了 0.2%,这个数据对于用户量数以亿计的抖音而言,是一个较大的提升,最终该策略也决定推全上线。

在抖音里面,像这样的小改动撬动大收益的创新非常多,而这些细节全部都是通过 A/B 实验精打细磨,最终找到的最优方案。在这背后除了有完善的实验平台 DataTester 支撑之外,也有字节传承下来的实验理念和文化。

字节跳动的 A/B 实验文化提倡:“决策与改动要用置信结果来说话,产品决策从不自嗨。”基于这个理念,产品经理们即使得到了实验验证,在日常的产品更新改动上,也不会“唯数据论”,还会继续通过对用户的理解、对业务的判断、合理的数据拆解来进行解读。

当从 A/B 实验中得到结论后,再通过大量实验沉淀下来的经验反哺业务、加深对业务过程的理解和洞察,在业务实践的过程中不断积累更多的业务经验。

从企业收益的角度看,A/B 测试不仅可以激发创新,让企业在小步快跑的同时,获得收益上的提升。如果应用 DataTester 这样完善的 A/B 实验平台,还能帮助企业显著提升人效,大幅降低试错成本。此外,当每个决策都能通过 A/B 实验来量化收益时,对企业管理而言,A/B 测试也成为了一种稳定、效果可量化的赋能手段。

作为助力企业科学决策的 A/B 测试平台,DataTester 目前服务了包括美的、得到、凯叔讲故事等在内的上百家外部企业,为业务的用户增长、转化、产品迭代、运营活动等各个环节提供科学的决策依据,将成熟的“数据驱动增长”经验赋能给各行业。

 

点击跳转 火山引擎A/B测试DataTester了解更多

标签:产品,蒙层,引擎,实验,测试,DataTester,抖音
From: https://www.cnblogs.com/bytedata/p/17247387.html

相关文章

  • 阿里云微服务引擎 MSE 2023 年 2 月产品动态
    ......
  • 开源NoSQL数据库引擎 Hibari
    Hibari(在日语中意思为“云雀”)是一个专为高可靠性和大数据存储的数据库引擎,可用于云计算环境中,例如webmail、SNS和其他要求T/P级数据存储的环境中。Hibari支持Java,C/......
  • elasticsearch RESTful搜索引擎-(java jest 使用[入门])
     elasticsearch简称ESjest好吧下面我介绍下jest(第三方工具)它是ES的java客户端,基于httprestful...jest是开源的 首先看看项目的目录结构我一般习惯了用maven去管理我的......
  • 云原生引擎单元测试实践
    作者:京东零售王雷单元测试概念单元测试是用来对一个模块、一个函数或者一个类来进行正确性检验的测试工作。单元测试是一种白盒测试技术,一般都是由开发人员在编码阶段......
  • 跟着字节AB工具DataTester,5步开启一个实验
    更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 火山引擎A/B测试平台DataTester孵化于字节跳动业务内部,在字节跳动,“万事皆A/B,一切可......
  • 跟着字节AB工具DataTester,5步开启一个实验
    更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群 火山引擎A/B测试平台DataTester孵化于字节跳动业务内部,在字节跳动,“万事皆A/B,......
  • 分析document文档中script标签获取抖音无水印视频
    思路分析使用playwright模拟浏览器打开分享链接获取播放页面html信息解析播放页面的video标签,video标签的src属性就是视频的地址这种模式会触发抖音的风控机......
  • 实验一 密码引擎-1-OpenEuler-OpenSSL编译
    实验一密码引擎-1-OpenEuler-OpenSSL编译0.安装Ubuntu和OpenEuler虚拟机1.下载最新的OpenSSL源码(1.1版本)2.用自己的8位学号建立一个文件夹,cd你的学号,用pwd获得绝......
  • 实验一 密码引擎-1-OpenEuler-OpenSSL编译
    0.安装Ubuntu和OpenEuler虚拟机安装openEuler-20.09安装登入openEuler系统1.下载最新的OpenSSL源码(1.1版本)Ubuntu22.04OpenSSL1.1.1tUbuntu最新版本下载参见......
  • 实验一 密码引擎-1-OpenEuler-OpenSSL编译
    任务详情0.安装Ubuntu和OpenEuler虚拟机下载最新的OpenSSL源码(1.1版本)用自己的8位学号建立一个文件夹,cd你的学号,用pwd获得绝对路径参考https://www.cnblogs.......