抖音是如何使用火山引擎DataTester快速试错的?
A/B测试产品可以说是企业科学决策的基础“设施”,能够帮助企业快速迭代产品。
在字节跳动,每一个产品功能上线前,都会先在火山引擎A/B测试产品DataTester上进行小流量验证,结合业务逻辑对结果的分析理解策略生效过程,而后再对方案进行修正、尝试创新,推动整个产品和业务的持续迭代。
(资料图片)
抖音上,早期有一个功能“弹幕”功能设想,目的是强化熟人社交的互动性,产品团队希望围绕熟人社交进行功能拓展,以激励用户多看视频、多发作品。
产品团队借鉴长视频的弹幕功能提出了一个想法——在抖音短视频中增加弹幕互动的功能,当用户观看熟人(好友)的短视频作品时,该视频的相关评论通过弹幕的形式展示,让用户有更多的互动机会并感受互动的快乐。
这个功能设计初衷是很好的,但它对于产品所带来的影响是正向还是负向,需要通过A/B实验进行评估验证。DataTester就帮助团队快速试错,避免了不合适的功能上线后为产品带来的负向影响。
如图所示,该团队在DataTester中设计了这样一个实验:
● 图一是对照组,产品界面维持抖音原样,没有弹幕功能。
● 图二是实验组1,由于弹幕功能对抖音而言是大型改动,会直接影响产品主界面布局,所以产品团队在实验组1中做了一个激进的尝试,他们将视频的文字描述区域全部去掉,替换为弹幕互动功能;与此同时,为了界面的美观简洁,将抖音右侧原本的互动区收入了“更多”的按钮中。
● 图三是实验组2,为了减少产品改动过大对用户带来的不确定影响,这个版本的产品设计保留了产品原有的互动等其他功能。
从DataTester的实验结果数据看,两个实验组的互动率确实有着显著提升,达到了功能设计时“提升互动率”的初衷。但观察新方案对抖音大盘核心指标影响时发现,这个功能对抖音整体视频的浏览量、用户投稿率、用户整体留存率均有负向影响,上述指标均出现了不同程度的下降。A/B实验清晰地表明,这个功能虽然能提升抖音的互动率,但却不利于用户的整体使用与留存。因此这个看上去很好的改动并未在抖音全量上线。
之后,抖音围绕弹幕类的产品优化探索并未停止,通过更多次的假设与A/B实验验证,这个功能后来加入了抖音的个人页位置中。当它被放在了恰当的位置,也能为产品的指标带来正向的提升。从这个案例中也可以看到,DataTester起到了帮助业务实现科学决策的能力,业务能够大胆创新的同时,也能科学验证每次创新是否真正有效。
像这样的A/B实验,在字节跳动已经开启了150多万次,每天都有2000多个新的实验上线,在DataTester上同时运行的实验有3万多个。
作为字节跳动内部使用多年的 A/B 测试平台,DataTester有支持多种复杂A/B实验的能力和科学的分流能力。它能够深度耦合推荐、广告、搜索、UI、产品功能等多种业务场景需求,为业务增长、转化、产品迭代,策略优化,运营提效等各个环节提供科学的决策依据。目前,火山引擎DataTester已经对外服务了美的、得到、凯叔讲故事等在内的上百家标杆客户,将成熟的 " 数据驱动增长 " 经验赋能给各行业。(作者:吕紫)
标签:
相关推荐:
最新新闻:
- win10笔记本找不到无线网络怎么解决?笔记本电脑连不上wifi是什么原因?
- 抖音是如何使用火山引擎DataTester快速试错的?
- 卡普空宣布《生化4RE》销量破400万!佣兵模式今日上线:全球聚焦
- 全球速递!知名网红怒喷游戏作弊行为:挂哥都该进监狱!
- 【时快讯】上汽集团3月整车销售35.2万辆环比增长16.7% 海外市场增超92%
- 世界观察:杭州阿里巴巴由122亿减资至1亿:内部人士辟谣消息不实
- 曝特斯拉员工私下分享车主隐私画面:尴尬瞬间被传阅:全球快讯
- 全球首款裸眼3D平板!nubia Pad 3D 4月12日国内亮相_世界快资讯
- 快报:后壳设计绝了!华硕ROG Phone 7游戏手机渲染图曝光
- 配色好评!摩托罗拉Edge 40高清渲染图再曝光:简讯
- 卡牌游戏《浮生游歌》Steam页面上线 发售日期待定
- iphone13电池可以用多久?iphone13电池如何保养?
- 联想笔记本自带一键恢复按钮在哪里?自带一键恢复按钮怎么使用?
- bugreport.dll是什么?丢失bugreport.dll怎么办?
- 压缩文件格式是什么?常见压缩文件格式有哪些?
- 如何激活XP系统?xp sp3 序列号汇总分享
- 电脑闪屏是什么原因造成的?电脑闪屏的原因分析及解决方法
- 国内编程语言有哪些比较常用的?国内编程语言前十排行榜
- 笔记本没有摄像头怎么回事?笔记本摄像头驱动的安装方法
- 电脑cpu主频是不是越高越好?主频和睿频有什么区别?
- 中远海控再创历史最佳业绩 2022年度净利润同比增长26.4%至1313.38亿元:微资讯
- 数据包究竟是什么?数据包的含义位置及运用方法
- pdg是什么格式?pdg格式怎么转换为pdf?
- 全球热资讯!曝《三位一体5》即将公布 游戏玩法一同公开
- 0x000000f4蓝屏是什么意思?0x000000f4蓝屏解决方法
- 如何使用小马激活工具激活win7?小马win7激活安装使用教程
- win7虚拟机怎么安装?win7虚拟机怎么联网?
- CAJViewer怎么使用?CAJViewer使用方法
- VST电音效果插件是什么?VST电音效果插件介绍
- 电脑UAC功能有什么作用?电脑UAC功能是开着好还是关闭好?
- 法国改编《猫眼三姐妹》真人剧共8集 每集52分钟
- Msvcr100.dll是什么?计算机丢失MSVCR100.dll解决方法
- chkdsk工具是什么?chkdsk命令修复磁盘方法?
- kingsoft是什么文件夹?删除kingsoft影响wps使用吗?
- 2023百想入围名单公布 宋慧乔提名艺术大赏视后 通讯
- 外媒统计史上收入最高十大运动员:乔丹33亿美元居首 C罗第五 当前消息
- 全球最新:华为光猫路由一体机_华为光猫
- iPhone 15想要高刷?标准版再等2年!
- 聚焦业务数据安全全流程,新华三夯实数字金融安全底座 全球播报
- 今日热门!6月停止支持!微软催Win10 21H2用户升级Win11
- 外观偷跑!小米13 Ultra手机壳上架淘宝第三方店铺-看点
- iOS 17两大目标:性能+稳定
- 《TLOUP1》多平台画面对比 SteamDeck720p难稳30帧|环球速看
- 世界观速讯丨《Dark and Darker》开发者:游戏或将不再免费 将尽快分享下次测试消息
- 天天消息!赛博风动作RPG新作《Neo Berlin 2087》公开 虚幻5打造 2024年发售
- 《SD 新 KAMEN RIDER 乱舞》公开DLC及特典情报!
- 用益-信托产品快报(2023.04.07):本期业绩比较基准为5%-7.6%
- ListView怎么优化?ListView的四种优化方式及使用方法
- 【新视野】通信网中常见的普通光缆有哪些?GYTA型光缆的结构及结构
- 为什么JDK要自带JRE?JRE和JDK的区别是什么?
- 【时快讯】【Seata解析】TC处理全局事务和分支事务原理详解
- 网上订票抢票攻略 360极速抢票浏览器使用教程_世界快讯
- Chrome缓存文件路径在哪?Chrome浏览器缓存文件路径查看方法
- Insert Into select与Select Into哪个更快?数据库中SELECTINTO和SELECTO的区别 环球新动态
- 全球热文:hadoop3.2镜像挂载文件(附下载)
- 天天消息!汇编中DOSBox怎么使用?新建文件夹MyASM_Code(PSP)的使用方法
- AllocateHWnd函数是如何传入消息的?AllocateHWnd函数的类型:视焦点讯
- 【新视野】通信网中常见的普通光缆有哪些?GYTA型光缆的结构及结构
- 全球微动态丨如何看K线图?史上最全K线经典组合形态解析
- 高频开关电源原理是什么?开瑞高频开关电源原理及增长趋势分析-世界今头条
- 天天日报丨mysql怎么批量添加卡号?mysql数据库卡号卡密批量生成写入验证
- Apex启动器最新版怎么下载?酷派7295A青春版刷机包
- 【软件设计】软件易维护性的因素有哪些?-当前关注
- 全球球精选!火狐浏览器如何安装flash_player?安装步骤
- 天天速递!IE8以上的localstorage存储内容有哪些?sessionstorage存储内容介绍
- ListView怎么优化?ListView的四种优化方式及使用方法
- 天天动态:序列号(Serial):SourceInsight的实用技巧
- 全球观点:国产FPS《边境》玩法公开!多地图无重力太空战斗
- 全球观速讯丨育碧免费FPS《不羁联盟》4月14日开启封闭测试
- 毫无诚意 《魔咒之地》免费推出美甲DLC|环球新消息
- FPS+策略游戏《Silica》公布 Steam页面已上线-全球新要闻
- 克苏鲁FPS《原谅我父亲2》Steam页面上线 暂不支持中文
- 1加6t是什么牌子的手机?一加手机品牌介绍_全球简讯
- 苹果8怎么查看手机常去位置?详细操作步骤:今日快讯
- oppo手机上面HD如何取消?oppo手机上面HD取消方法 天天资讯
- 【世界快播报】餐厅吊灯高度怎么调?餐厅吊灯的正确安装高度
- 安卓手机下载不了软件是怎么回事?怎么解决?
- 如何用PS制作属于自己的个性签名档?用PS制作属于自己的个性签名档教程
- QQ怎样绑定密保手机?QQ绑定密保手机的方法
- 三星tabs怎么样?三星GALAXYTabT805C(4G版)平板电脑评测
- 角位移传感器怎么安装?角位移传感器安装方法详解:全球热议
- 天天快看:歪歪如何申请短位ID?歪歪语音使用文字聊天的方法
- 4月6日伦敦金属交易所(LME)铅库存26375吨 每日快看
- 焦点信息:excel如何制作简版出库表?excel制作简版出库表
- 环球动态:如何实现双显示器拼接?实现双显示器拼接方法