站外内容的变量很多:开头、时长、配乐、文案。一次测一个,才找得到原因。
一、测什么
第一轮测开头:三个不同的前三秒。
第二轮测时长:15 秒和 30 秒。
第三轮测行动提示:有无优惠码。
二、怎么控制变量
同一条素材,只改一个元素。
同时投放,时段一致。
样本量要够,至少各跑 1000 次播放。
三、看什么指标
开头测试看「三秒留存率」。
时长测试看「完播率」和「点击率」。
行动测试看「转化率」,不是播放量。
四、多久出结论
通常三到七天。
数据差异超过 20% 才算显著。
差异小于 10%,说明两组差不多,不用纠结。
五、常见错误
错误一,一次改三个变量。
错误二,样本量太小就下结论。
错误三,只看播放量不看转化。
六、小结
A/B 测试的核心是「单一变量、足够样本、显著差异」。
测三轮,就有自己的内容方法论。
七、检查清单
- 测试目标是否明确
- 是否只改一个变量
- 是否同时投放
- 样本量是否够
- 看什么指标
- 测试周期多长
- 差异是否显著
- 是否记录了结论
- 是否复用到下一条
- 是否影响转化
- 是否有人负责
- 是否每月复盘
八、三个判断
第一,判断哪个更好:看核心指标差异。
第二,判断是否显著:差异是否超过 20%。
第三,判断是否继续测:结构定了就停。
九、执行建议
先测开头,因为影响最大。
每次测试只花一条素材的成本,剪两个版本即可。
把有效的结构写成模板,后续内容直接套。
每季度重新测一次,用户偏好会变。