首页 > 其他分享 >智能电视APP鲜时光,如何应用AB测试打造极致的用户观看体验?

智能电视APP鲜时光,如何应用AB测试打造极致的用户观看体验?

时间:2023-07-07 10:47:43浏览次数:60  
标签:频道 AB 实验组 时光 APP 用户 极致

 更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群
  数字技术的发展让智能电视普及率大幅提升,2023年智能电视的市场渗透率已超90%,与智能电视相匹配的各类应用APP功能也愈加丰富。本文介绍面向智能电视及机顶盒的互联网电视应用——鲜时光APP的改版案例。鲜时光引入智能化内容推荐技术,并应用火山引擎AB测试DataTester优化APP频道方案,为用户打造极致的家庭电视观看体验。 旧版鲜时光界面 在旧版鲜时光界面中,设有“看大片”、“纪录片”、“动画片”3个长视频频道,产品从梳理的用户调研内容中发现,APP中没有直接的频道能够对至“电影”、“电视剧”、“综艺”类节目,观众查找内容路径复杂;此外,目前“看大片”频道以人工运营形式为主,内容分发效率较低,观众不容易发现想看的视频。 鲜时光团队希望引入智能化推荐技术、设计全新的频道方案,并通过火山引擎AB测试进行策略验证。他们推出了3组新频道策略,新增了“电影”、“电视剧”等5个长视频频道,并设置了“人工配置”、“智能推荐”两种方式;究竟哪组策略线上的观众使用体验更好,鲜时光要通过AB实验的数据来进行判断。  
AB实验频道方案 对照组:与当前线上一致,不改变频道策略 AB实验组1: 保留当前线上频道,并新增3个长视频频道,展现内容以运营人工配置为主 AB实验组2:去掉当前线上频道,但保留“看大片”频道,使用6个长视频、展现内容以推荐为主的频道 AB实验组3:去掉当前线上频道,且不保留“看大片”频道,使用5个长视频、展现内容以推荐为主的频道
  在实验上线后,他们在火山引擎DataTester中实时观测各实验组的数据,了解产品的各项核心指标是否趋于优化。   在AB实验方案实施时,鲜时光团队还对新用户、老用户进行了隔离实验。因为对于老用户来讲,已经熟悉了“看大片”频道,在原有的影响因素上去测试新的策略,可能影响老用户的使用习惯,从而影响AB测试的核心指标。对新用户而言,本身没有原有使用习惯在,实验数据表现上可能和老用户有所区别。因此鲜时光团队设计的4组实验,针对“新用户”、“老用户”两类人群区分开展。   从AB实验报告中,产品团队解读到如下结论:大盘消费数据方面,相比“运营为主”的频道内容展现方式,“推荐为主”的展现方式在频道消费方面有明显收益,“实验组2”、“实验组3”的长视频消费时长均显著增长;人均消费时长上涨主要来源于长视频消费;新增频道消费收益总体大于“看大片”频道下线的置换损失。   他们发现以推荐为主的电影电视剧频道上线带动了产品整体大盘数据的显著提升,同时非长视频消费指标均无负向影响;其中,推荐为主的频道视频分发还带来了LT(用户生命周期)上的增加,特别是新用户组多日留存均呈显著正向,且收益持续扩大未收敛。   在这次AB实验结果的基础上,鲜时光团队继续针对“实验组2”和“实验组3”进行了二期实验,主要为了判断新增“电影”、“电视剧”推荐频道后,“看大片”频道是否仍需保留。二期AB实验数据显示,“实验组3”的大盘数据明显优于“实验组2”的大盘数据,即“看大片”频道下线后,产品大盘数据无负向波动。   基于上述结论,鲜时光APP确定了频道改版的方案:引入5个以推荐策略主导的新频道,并下线“看大片”频道。在新策略上线后,数据显示用户在鲜时光APP中的使用时长及使用体验均有显著提升。整体改版过程中,DataTester帮助产品团队高效、科学地完成了决策。   火山引擎DataTester源自字节跳动长期沉淀,截至2023年6月,字节已通过DataTester累计做过240万余次AB实验,日新增实验 4000余个,同时运行实验5万余个。DataTester目前服务了包括美的、得到、凯叔讲故事等在内的上百家企业,为业务的用户增长、转化、产品迭代、运营活动等各个环节提供科学的决策依据,将成熟的“数据驱动增长”经验赋能给各行业。   点击跳转火山引擎A/B测试了解更多

标签:频道,AB,实验组,时光,APP,用户,极致
From: https://www.cnblogs.com/bytedata/p/17534178.html

相关文章

  • centos 中,unable to download updates: could not do untrusted question as no klass
    这个问题可能是由于您的系统缺少Klass支持导致的。您可以尝试以下方法解决: 1.更新软件包列表:```sudoyumupdate``` 2.如果更新软件包列表后问题仍然存在,您可以尝试安装Klass支持:```sudoyuminstallklass-utils``` 3.安装完成后,再次尝试更新系统:```sudoyum......
  • UniApp与微信小程序的异同点分析
    UniApp和微信小程序都是流行的移动应用开发框架,它们有一些相似之处,但也存在一些明显的异同点。在本篇博客中,我将对UniApp和微信小程序进行详细的异同点分析,并提供相关的示例代码。开发语言:微信小程序:使用WXML(类似于HTML)、WXSS(类似于CSS)和JavaScript进行开发。UniApp:支持使用Vue.js......
  • UniApp组件库推荐:提升开发效率的利器
    在移动应用开发中,组件库是开发者们的利器之一。它们提供了一系列预先构建好的UI组件和功能模块,可以显著加快应用程序的开发速度。而UniApp作为一个跨平台的开发框架,也有着丰富的组件库可供选择。在本篇博客中,我将向大家推荐几个高效实用的UniApp组件库,帮助开发者们提升开发效率。uV......
  • 2023-07-06:RabbitMQ中的AMQP是什么?
    2023-07-06:RabbitMQ中的AMQP是什么?答案2023-07-06:AMQPAMQP(AdvancedMessageQueuingProtocol)是一个应用层协议的开放标准,旨在设计面向消息的中间件。基于AMQP协议的客户端和消息中间件可以自由地传递消息,不受客户端、中间件产品或开发语言的限制。其目标是实现一种被广泛应用......
  • uniapp实现这该死的自定义弹窗
    最近自己学习和写这个uniapp,刚开始规划的时候就觉得自己到时候会需要一个这个弹框,弹框里面药房input这样的东西什么的,然后就在想uniapp里面会不会没有这个modal呢?转念一想应该是会有的吧,毕竟是一个框架嘛.然后我就找找找,找了好久都没找到合适的.可能是人家有我没找到吧,最......
  • 小程序助力企业打造超级APP
    在互联网时代,不可否认移动应用程序(App)是最具代表性的产品之一,自2010年以来,整体发展呈现出快速增长和发展的趋势,并对消费者的生活和各个行业的发展产生了深远的影响。各个行业和领域都涌现出大量的产品,有的成为行业巨头,有的则被市场淘汰。而有两个产品我们不可忽视,那便是两个国民......
  • 2023-07-06 Matlab中符号和句柄之间的转换.md
    2023-07-06Matlab中符号和句柄之间的转换Matlab符号函数函数句柄在Matlab中我们通常使用diff函数求导,其中如果f是符号函数,diff也返回符号函数,那么符号函数和句柄之间如何转换呢?下面给出一些例子:f1=@(x)sin(x);%函数句柄 symsx f2=sin(x);%符号 f3(x)=sin(x);%符......
  • No bean named 'transactionManager' available: No matching PlatformTransactionMan
    报错内容:找不到transactionManager原因:xml配置平台事务管理器的时候给了id。配置@Transaction注解时没有配置transactionManager 解决方案:将xml中配置的id="tranManager"改为id="transactionManager"。原因是因为@Transaction中transactionManager的默认名称是”transactionM......
  • 标签平滑-Label Smoothing
    ********************2023年07月06日17:13:20**********************参考我的notability中的笔记学习更快***********************************分割线****************************************************************LableSmoothing是分类问题中错误标注的一种解决方法。......
  • uniapp如何给空包进行签名操作
    这里给大家分享我在网上总结出来的一些知识,希望对大家有所帮助首先安装sdkhttps://www.oracle.com/java/technologies/downloads/正常下一步即可~安装完毕后,进入在sdk根目录执行cmdC:\ProgramFiles\Java\jdk-18.0.1.1\bin 生成keystore例:keytool-genkey-aliast......