a-b-test-design 是把产品改动安排成可比较实验的 Skill。它先写假设，确定对照与新方案、主要指标及护栏，再按基线和想检测的变化规划样本与周期。
点击提高却让任务完成率下降，不算单纯成功。效果大小、显著性与检验功效也不是一回事，常见95%或80%只是参数选择，不能理解成改动有这些概率必然获胜。
提供流量、基线和候选变化，可以形成实验计划。提前定分配、停止和分析方法；每天看到正数就停会改变结论可信度。低流量未必适合 AB，复杂改版也要核互相影响，结束后仍应报告不确定性与无改善结果。