火山引擎DataTester:如何用A/B测试做产品增长? 当前热点
随着如今越来越高的获客成本,用户拉新变得不再容易;而且由于获客成本的增高,让用户留存也变得更加重要。同时,一个产品的使用体验好坏、是否给予对应的用户价值,通常“用户留存”就被作为重要的衡量指标之一。
那么,如何将有限的流量发挥出最大的价值,尽可能的提升用户留存呢?本文将跟随字节的一款内容App的增长实践来一探究竟。
该款App为用户提供短篇、中篇、长篇内容阅读服务,但在App推出一段时间后,该产品团队通过核心指标分析,发现App新用户流失率非常高。其中新用户LT(Life Time / 用户生命周期)、LTV(Life Time Value/用户生命周期价值)等指标均大幅低于预期,有较大的提升空间。
(资料图)
如何降低新用户的流失率、提高用户留存,成为了这款产品亟待解决的问题。
由于字节的产品在迭代、推广过程中都会不断经历A/B测试的打磨,因此该产品团队首先查看了历史策略,希望汲取一些经验。他们在字节跳动自研的A/B测试产品——DataTester 中,查看了该App以往的A/B实验历史,并通过 DataTester 特设的「经验库」能力,找到了往期能够提升用户留存的产品策略。
他们从「经验库」往期A/B测试的历史中看到:
· 往期“7天签到礼包”玩法中,新用户LT显著上升,用户留存率显著上升;
· 往年春节期间曾发起过众多活动,“签到日历”的玩法对比其他活动,留存最佳;
.....
总结发现,往期的“签到玩法”对比其他策略,对于这款App的用户留存提升通常更为显著。下图可看到“签到玩法”带来的拉新占比,及用户留存趋势。
因此该团队判断,此次产品策略优化,通过优化“签到玩法”获取提升该App新用户留存指标收益的可能性较高。那么在优化方向上具体策略如何制定呢?该团队通过数据分析后决定从用户体验痛点入手。
原产品“签到玩法”如下:
· 玩法设置在产品二级页面“福利页”,用户必须打开App后再进入“福利页”,才可以完成玩法任务
· 产品同时设置有两种“签到玩法”——「7天见面礼」与「日常签到」,两种玩法会同时弹出,用户打开产品后会遇到多重弹窗的情况
这样的产品策略会带来“用户操作路径过长,领取奖励难度相对较大”以及“多重弹窗对用户造成操作打扰”的痛点。产品团队因此确定了签到策略的优化思路:降低奖励领取难度,去除多重弹窗对用户的打扰。
当优化方向确定后,接下来就需要设计完整的A/B实验方案了;在A/B实验方案设计的过程中,最重要的一点是要计算出取得显著性结论所需要的流量是多少。 此时,字节的A/B测试产品 DataTester 的优势就体现出来了。当业务把想提升的指标、数值、提升方向输入进来后,DataTester 可以直接自动计算所需要的样本数量,然后经过A/B测试的实验数据来进行效果验证,帮助业务确认最优解的策略。
最后通过优化新用户的「7天见面礼」签到活动,从 DataTester 的实验结果上来看,优化后的实验组的大盘新用户LT(用户生命周期)、留存率等均有明显的正向提升;不仅如此,在App活跃时长、ARPU(平均每用户收入)等核心指标的数据也均有不同幅度的正向提升;同时新用户的签到问题反馈也有所下降。
因此,该App将新的策略全量上线,从线上数据表现来看,该App的「7日签到」策略次日领取率提升了近20%,用户多日留存稳定提升了3%~5%,获取了超预期的收益。
对于企业而言,更明智、更长期的战略意味着需要同时专注于自身产品的健康发展以及增长,而这其中最重要的驱动因素是用户满意度和用户留存。注重用户留存就可以推进增加营收及提高盈利能力,也节省了获客成本,达到了降本增效的目的。
那么如何提升核心指标?如何选择最优的产品策略?如何科学的评估指标提升与策略的关系?如何选准正确的迭代方向并继续向下探索收益?这些都需要A/B测试来进行评估并得到“理性且科学”的数据结果,帮助业务在每一个决策的岔路口上,都做出了更正确的选择。
DataTester 依靠其先进的底层算法,提供科学的分流能力和智能的统计引擎,支持多种复杂的A/B实验类型。在字节内部帮助今日头条、抖音等多个产品“摆脱猜测,用科学的实验衡量决策收益”。 不仅如此,DataTester 也已经由火山引擎对外开放服务,目前已服务了美的、得到、凯叔讲故事等在内的上百家外部企业,支持了多种业务场景需求,为业务的用户增长、转化、产品迭代、运营活动等各个环节提供了科学的决策依据,将成熟的“数据驱动增长”经验赋能给各行业。(作者:宋楠)
标签: 新闻资讯
相关推荐:
最新新闻:
- 【爆料】iPhone 15 高清外观图曝光:圆角设计,iPod touch 7 直呼内行
- 更规范、更高效、更专业,集成灶十大品牌帅丰电器持续赋能终端
- 火山引擎DataTester:如何用A/B测试做产品增长? 当前热点
- 《牧场模拟器》Steam发售近两年 人气提升在线创新高
- 速递!通策医疗的运气用完了么?
- YC前掌门人:观察成千上万创业者后,关于如何获得非凡成就的13条思考_天天日报
- 《莱莎的炼金工房3》角色设定图和3D建模 大肉腿吸睛
- 《巫师4》叙事总监谈新系列:希望故事发生在哪-当前资讯
- 当前通讯!喝酒壮胆?《木卫四协议》合作推出主题罐装啤酒
- 当前时讯:《死亡空间:重制版》预购奖励 免费送《死亡空间2》
- 天天微速讯:狂揽7亿票房 《灌篮高手》大电影首日票房出炉
- 《巫师3:狂猎》完整版中配尝鲜:口型适配 诚意拉满!
- 今日热门!不再封单元!这些城市有小区已按“楼层”实施封控
- 谋杀悬疑片《利刃出鞘2》角色海报公布 12月23日上线|世界要闻
- 《巫师3》次世代版要来了 但NS版不会同一天上线
- 多款EA游戏Steam Deck上无法运行 修复即将推出
- 持续高品质如何炼成?闪迪USB闪存盘的不断提升
- XGP12月新增游戏部分上线:《乐高星战:天行者传奇》《你好邻居2》 世界新资讯
- 贪玩蓝月运营商递表港交所,多重隐忧下能否再续「爆款」神话?
- 魅族20跑分曝光:搭载骁龙8 Gen 2处理器、初期跑分不高
- 添可芙万空间站告别手动补水倒污 解放双手如你所愿-天天播报
- 白色视觉系 AX电竞叛客RTX 4080 X3W OC显卡现货9999元
- 正宗笔画输入法如何用?正宗笔画输入法使用教程
- AAC是什么格式?什么是AAC格式?
- 什么是ips屏幕?ips显示器的优点有哪些?
- 码率是什么意思?码率的原则有哪些?
- ipad已停用怎么办?ipad已停用解决方法
- bmp是什么格式?bmp格式组成介绍
- 什么是HTPC?HTPC全称是什么?HTPC介绍
- 什么是子网掩码?如何划分子网?
- Linux系统开机黑屏提示kernel panic该怎么办?开机黑屏提示kernel panic解决方法
- 如何关闭开机自检?开机自检关闭步骤
- 金山wps加载的视频不能播放怎么办?wps加载的视频不能播放解决办法
- 无线AP、WiFi、WLAN是什么关系?无线AP、WiFi、WLAN详情分析
- 如何查找并修改hosts文件?hosts文件查找步骤
- QQ怎么删除自定义表情?QQ删除自定义表情方法
- Win10系统安装Photoshop CC失败怎么办?安装Photoshop CC失败的解决方法
- Windows下统计行数的命令? Windows统计行数的命令用法
- word遇到问题需要关闭怎么办?word遇到问题需要关闭的解决办法
- premiere视频怎么加闪光灯转场效果?premiere视频加闪光灯转场效果步骤
- 哪个wifi共享的软件最好? wifi共享软件介绍
- 为什么台湾的Yahoo!叫奇摩 ?
- 什么是Windows Installer?Win安装和卸载失败出现2502/2503错误解决办法
- 怎么给录音降噪处理?录音降噪处理方法
- 怎么配对荣耀耳机flypods3 配对荣耀耳机flypods3方法【详解】
- word2006怎么使用请告诉我功能?word2006请告诉我功能使用方法
- win7电脑经常掉线怎么办?电脑经常掉线解决方法
- Word文档中首页不显示页眉页脚如何设置?首页不显示页眉页脚解决方法
- 怎么给两台电脑共享文件?电脑共享文件操作步骤
- Windows PE是什么?Windows PE介绍
- 怎么加快win10开机速度?加快win10开机速度方法
- mac系统怎么卸载应用程序?mac系统卸载应用程序方法
- Windows Vista和Windows 7有什么区别?区别介绍
- wiseie是什么?wiseie智慧浏览器创新功能
- 涨价已成趋势!Xbox计划将第一方游戏涨至70美元_世界微动态
- u盘缓存写入失败如何解决?u盘缓存写入失败解决方法
- 通胀之后是衰退?欧洲人开始“节衣缩食”度寒冬
- CDPR解释为什么《赛博朋克2077》的多人模式被取消
- 《冲就完事模拟器》Switch和PS版发售日期明年公布:环球时讯
- 下赛季开始 《堡垒之夜》将停止支持Win7和Win8系统
- 世嘉游戏《托杰与厄尔》将影视化 NBA球星库里参与制作
- 环球快消息!《巫师4》叙事主管透露他希望新作故事在哪儿发生
- 小米首款桌面主机形似Mac mini 配锐龙7 6800H 2999元起售_环球速读
- 视点!微软再次督促win10用户升级win11 第一次开机就提醒
- 基于永久授权X86架构 国产CPU厂商再发力 微头条
- 微软:已向索尼10年合同 COD同步两大主机_观速讯
- 焦点热讯:AMD Zen4 12核新CPU仅需400刀出头 1月初上市
- 环球速看:ChatGPT一发笑,人类怎么办?
- 警惕!大量《守望先锋:归来》玩家亚服账号被封|每日热门
- 大涨:3分钟搞懂为啥是离岸人民币?
- 天天亮点!育碧正在开发一款新的3A级开放世界游戏 有全新体验
- 《星球大战绝地:幸存者》TGA将首曝实机 新截图公开
- 人气爆棚 小米13系列预售人数突破50万 即时
- 【环球速看料】iPhone 14 Pro Max渠道价大降 仍高于官网价
- RX7900系列非公版曝光 价格与公版一致