泛互联网行业A/B测试全解析:产品优化的创新之道
更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群
近期,火山引擎数智平台举办了“超话数据:企业产品优化分享”的活动。火山引擎产品解决方案专家从企业应用的视角,分享了A/B实验在产品全用户生命周期的体验优化和案例。
在用户拉新环节,企业可以通过广告素材实验、落地页实验、投放受众实验及智能调优等实验实现产品的推广优化。在后续的用户激活、用户留存活跃环节,企业可以通过A/B测试帮助产品优化,开启产品体验优化实验、搜索排序实验等,实现用户体验、产品功能的优化,提升用户提留并实现沉寂用户激活。
在变现环节,企业一方面可以应用A/B测试针对交易链路、会员转化链路等开启链路优化实验实现引导用户进行商业化转化;另一方面,在优惠券发放前也可以开启A/B实验,选择出收到优惠券后变现转化率最高的人群类型后再进行优惠券发放。在用户裂变环节,企业能够通过A/B测试实现分享传播链路优化、裂变着陆页优化等,实现用户价值最大化。
以火山引擎推出的A/B测试平台DataTester应用为例,其作为A/B测试平台能够贯穿服务于从拉新到后续变现及用户裂变的产品用户全生命周期,而应用A/B测试进行产品优化,一般可以分为业务洞察和实验验证两步。一方面,企业需要通过数据确定产品优化核心指标;另一方面,企业需要通过A/B实验验证策略是否达到预期,再考虑后续全量推行。
这场分享讲述了贯穿全用户生命周期的多个案例,包括新用户体验优化、搜索内容展示优化、提升会员转化率等,下方将选取分享中企业APP产品优化的高频场景并展开介绍。
新用户体验优化
新用户体验优化指的是对用户初次使用产品时的体验感进行优化。对用户来说,一款APP的首次体验感,是决定是否继续使用产品的关键。因此提升产品的新用户体验感是实现用户留存的关键。
火山引擎的专家分享中,现场提到这样一个例子,某学习工具软件希望提升新用户留存,通过数据分析发现在新用户进入软件后试听音频对用户留存有正向影响。因此企业希望通过引导新用户进入软件听音频,并通过音频内容提升用户次留。
为了达成上述目标,该学习软件设计了新用户登录后通过沉浸式蒙层自动播放音频或者视频的新功能。并开启A/B实验对沉浸式蒙层是否会对用户留存产生正向影响进行了验证。
通过对有无增加蒙层的两组落地页设计的用户学习率、完播率数据进行对比,可知通过蒙层实现最短路径让用户直接看到内容,对新用户学习率有正向影响。在此实验获得的数据基础上,后续团队再根据大盘指标考虑此更新内容是否推全。
内容优化
除了新用户的体验,产品提供的内容也是后续留住用户的关键。产品不断为用户提供感兴趣的内容,能够提升用户粘性实现用户留存。目前,进行的内容优化可以分为搜素内容展示优化和推荐内容优化两点。下面将分享针对这两点内容优化的具体实践。
搜索是用户了解运营活动、热门时事的关键入口,用户希望通过搜索找到感兴趣的内容,但大多数情况下用户通过搜索找到的结果不能符合预期。火山引擎的专家在现场分享时,讲述了一个算法已达标的前提下,某企业通过UI实验,对搜索页面的结果进行了搜索内容展示优化。
他们设计了缩小字体、将搜索关键词做高量显示等产品方案,再通过卡片形式,将每一个搜索结果聚焦做显示。尽量做到在一个页面上展示更多搜索结果的内容,同时让内容更加清晰,将搜索内容关键点呈现出来。
优化前用户搜索多,但是点击少,搜索没有被很好的利用起来,通过UI优化,搜索结果页面的点击率实现了很大的提升。
此外,企业还可以进行推荐内容优化。以某视频平台的应用为例,用户在该平台中搜索视频内容,但推荐的结果点击效果不如预期。通过后台数据分析可以发现,用户对推荐结果的点击率并不理想,因此该平台可以选择对推荐内容UI进行优化。
比如将主播放窗口缩小,推荐内容上移。针对优化后UI和原UI开启A/B实验,发现优化后UI推荐节目点击率高于原UI,且播放窗口点击不低于原UI,达到了该实验的效果。
通过对内容的优化实现用户的进一步留存是实现后续变现和用户裂变的前提,在实现了用户留存后企业才能引导用户进行变现动作。
提升商业变现能力
用户核心价值转化有两种:一种形式是引导用户开通会员,从免费用户转化成付费用户;另一种形式是让用户购买更高价值的商品或者内容。针对这两种场景企业又该如何进行优化呢?
首先是应用A/B测试提升会员转化率。通过页面优化让不花钱的用户付费吸引用户开会员,是比较经典的UI实验。一般情况下需要将付费开通的按钮做得尽量明显,同时叠加一个buff,让用户能直观感受到开通会员带来的优惠,给用户直观的冲击。
这里有一个案例是,某阅读软件希望引导更多用户开通软件会员,希望通过优化会员开通页面UI提升会员开通率。比如,把“首月6元开通”直接显示出来,突出按钮样式。另外在文案上,清晰显示优惠力度能够让用户感观上获得收益,感受到收益明显大于付出成本,引导用户开通会员。
针对上述,实验设置了对照组以及两组实验组,实验组1将文案优化为“开通会员”,同时突出了按钮样式;实验组2的文案在对照组的基础上添加了副标题“现在开通,首月仅需6元”,将按钮改为“立即开通”并突出按钮样式。
通过实验结果对比发现,实验组1综合数据表现最佳,付费转化率提升超过100%,模块点击率提升超过20%。通过实验,可知购买引导区域的UI和文案对购买转化率影响非常大,文案简单、重点清晰、在CTA按钮上突出优惠价格,这三种设计对购买转化的提升效果最好。
另一种变现方式是引导用户进行购买动作,提升购买转化率。以某学习软件为例,对课程详情页分析发现用户对课程表的点击率比较高,因此可以假设缩短用户路径,露出核心内容,对用户的购买转化有正向影响。
基于相关分析和场景的假设开启实验,设置课程表默认收起的对照组和课程表默认展开的实验组。通过对购买转化率的对比,发现比较对照组,实验组购买转化率提升超过3%。在实验基础上,能够对产品进行优化。
据了解,火山引擎DataTester源自字节跳动长期沉淀,2023年中数据显示,字节已通过DataTester累计做过240万余次A/B实验,日新增实验 4000余个,同时运行实验5万余个。本次活动分享的优秀实践案例,为泛互行业通过数据驱动实现产品优化提供了支撑,也为线上线下的听众提供了新的产品优化思路。相信未来,会有更多的企业将A/B测试实践应用到产品优化中来。
点击跳转ByteHouse了解更多
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
到店商详架构变迁
一、项目背景 到店商详是平台为京东到店业务提供的专属商详页面,将传统电商购物路径打造成以LBS+门店属性的本地生活服务交易链路。 二、架构变迁 1、 主站商详扩展点 优点:到店侧仅关注业务,无需过度关注服务部署、性能优化等。 缺点:涉及方较多,需求开发周期长,上线依赖方多;到店侧无法了解到全流程,不利于长期迭代。 2、 主站商详扩展点 + 独立服务 鉴于V1架构开发周期长,依赖方多等原因,到店侧决定将新迭代的某些独立楼层如:附近推荐、附近门店等新建一个服务,由主站商详下发空楼层,具体的楼层数据处理完全交由到店侧。 优点:相对V1在一定程度上缩短了开发周期,能够独立上线。 缺点:由于楼层配置由主站侧控制,独立服务要是未返回有效数据时,前端页面会显示出楼层空隙;到店侧无法了解到全流程,不利于长期迭代。 3、 去除扩展点,完全独立服务 鉴于V1、V2架构等问题,到店侧决定随着新需求更改的同时,将主站到店侧能力copy到独立服务中,完全独立开发上线。 3.1 由到店侧提供完全独立服务 网关接口的提供方由主站侧转向到店侧,前端直接调用到店侧提供的网关接口。 ...
- 下一篇
PostgreSQL 中的 JSON:彻底改变数据库中的数据灵活性
在这篇文章中,我们将介绍 PostgreSQL 对 JSON 对象的实现和处理方法。拥有一些 Linux、Postgres 和 JSON 方面的经验是必要的,因为我们不仅要介绍这些新功能,还要介绍如何实现它们。 本文使用在 Ubuntu 23.04 上运行的 PostgreSQL 16(开发版)编写。首先,我将简要回顾一下 JSON 的背景知识,然后继续介绍我们如何在 Postgres 中使用 JSON,最后介绍我们可以使用哪些有用的函数来与 JSON 对象进行交互。 #1 背景 JavaScript 对象表示法(JSON)是一种开放的标准文件格式,用于将信息存储在键值对中。它拥有一种轻量级且独立于语言的格式,既易于大家阅读,又易于机器生成和解析。它的主要优势以及为什么它在数据存储中变得如此普遍,是因为它在应用程序之间的无缝互操作性。这很适合 Web 应用程序,因为我们通常需要两个程序进行通信,并且每个程序可能使用不同的语言来实现。只要每个程序都有解析JSON文件的方法,无论另一个程序使用什么软件或硬件,它们都应该能够有效地进行通信。现在我们看到了 JSON 在数据存储方面有多棒,让...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- 设置Eclipse缩进为4个空格,增强代码规范
- CentOS7,8上快速安装Gitea,搭建Git服务器
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- Red5直播服务器,属于Java语言的直播服务器
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- CentOS7,CentOS8安装Elasticsearch6.8.6
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- Eclipse初始化配置,告别卡顿、闪退、编译时间过长
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- CentOS7安装Docker,走上虚拟化容器引擎之路