cqz333.docx
一、实验背景
二、实验假设
增加学习规划师流程,可显著提升用户的课程转化率
三、实验指标
类别
说明
指标
核心指标
• 决定实验成败的关键指标
课程转化率
辅助指标
• 可能影响到相关的重要指标,全面了解实验结果
留存率
反向指标
• 提示实验可能的负面影响
• 没有负面影响或者负面影响可以接受,才能宣告实验成功;如果负面影响太高,可以否决实验结果
入群率、听课率
四、实验受众
注册后 至今 未购买过商品的用户
五、实验设计
组别
版本描述
流量分配
实验组1
有学习规划师流程
随机分配25%
实验组2
有学习规划师流程
随机分配25%
对照组1
没有学习规划师流程
随机分配25%
对照组2
没有学习规划师流程
随机分配25%
产品原型文档:墨刀
UI:https://share.lanhuapp.com/#/invite?sid=qx0bpBee(密码: 3phv)
六、实验结果
实验时长 = 29天(2022.12.16~2023.1.14)
1、 核心指标
• 课程转化率
• 对照组_无学习规划师 平均课程转化率:14.09%
• 实验组_有学习规划师 平均课程转化率:32.83%(提升133%)
2、 辅助指标
• 留存率
• 对照组_无学习规划师 平均次留率:36.45%
• 实验组_有学习规划师 平均次留率:38.37%(提升5.27%)
• 对照组_无学习规划师 平均3日留存率:27.52%
• 实验组_有学习规划师 平均3日留存率:30.04%(提升9.16%)
• 对照组_无学习规划师 平均7日留存率:22.87%
• 实验组_有学习规划师 平均7日留存率:26.98%(提升17.97%)
3、 反向指标
• 入群率
• 对照组_无学习规划师 平均入群率:8.28%
• 实验组_有学习规划师 平均入群率:14.76%(提升78.26%)
• 听课率
• 对照组_无学习规划师 平均听课率:9.64%
• 实验组_有学习规划师 平均听课率:11.7%(提升21.37%)
4、 其他指标
• 漏斗转化率
• 整体 转化率:31.9%
备注:
¡ 第1步:规划起始页
¡ 第2步:立即定制备考方案Button
¡ 第3步~第9步:对话答题页
¡ 第10步:规划结果页
¡ 第11步:立即0元领取Button
¡ 第12步:领取课程成功
• 订单转化
�� 累计 当日转化人数 提升158.79%(927→2399)
�� 累计 转化人数 提升93.49%(1398→2705)
�� 累计 转化GMV 提升19.76%(749689.5→897844.86)
七、实验洞察
• 正常情况,用户刚下载APP 本身就是一个意向度极高的场景,在这个时候 快速了解用户需求&提供解决方案,就会产生 “事半功倍”的效果,且不太会引起用户的不满
¡ 在关键时刻,针对用户的关键行为,执行关键动作,取得关键成果 (二八法则)
八、后续计划
• 将该设置 产品化,全量 上线
• 继续优化 学习规划师流程,提升漏斗转化率