素材 A/B 测试差异可信度
小红书素材 A/B 测试差异可信度计算器:输入两组素材的曝光与转化(点击或成交),用双比例 Z 检验判断差异是否统计显著,并给出转化率差异、相对提升与置信区间。
公式
差异 95% 置信区间 = 差异 ± Z临界 × SE;显著 ⇔ P 值 < (1 − 置信水平)关于 A/B 可信度
什么是 A/B 可信度?
小红书素材 A/B 测试差异可信度计算器:输入两组素材的曝光与转化(点击或成交),用双比例 Z 检验判断差异是否统计显著,并给出转化率差异、相对提升与置信区间。
A/B 可信度 怎么算?
差异 95% 置信区间 = 差异 ± Z临界 × SE;显著 ⇔ P 值 < (1 − 置信水平)
使用时要注意什么?
请结合自身历史数据与相同投放方式做对比,避免跨行业直接比较。
常见问题
P 值很小就一定能换素材吗?
P 值小只说明差异"不太可能是随机波动",并不代表业务上一定值得换。还要看差异幅度(相对提升)与样本量是否足够大;极小但稳定的差异也可能不划算。
为什么样本量很重要?
样本太小,即使真实有差异也常常检不出(不显著);样本极大时,微小差异也可能"显著"。所以判读时要同时看 P 值、差异幅度和置信区间。
转化数可以用点击数吗?
可以。只要 A、B 两组用同一口径(都用点击、或都用成交)即可;核心是比较"同一目标行为的转化率",不同口径不能混比。