6.2.2.1 A/B 测试与多变量测试

文档摘要

6.2.2.1 A/B 测试与多变量测试 6.2.2.1 A/B 测试与多变量测试：当“显著性”在凌晨三点背叛你——一个被低估的样本分配偏移故障与它的外科手术式修复凌晨2:47，监控告警第三次弹出。 A/B测试平台仪表盘上，实验组转化率曲线像被无形之手拽住脚踝，持续下坠；对照组却稳如磐石，甚至微微上扬。p值从0.03滑向0.08，再跌至0.15——统计显著性正在溃散。而此时，距离产品团队在晨会宣布“实验成功、全量上线”的倒计时，只剩5小时。这不是玄学，不是运气，也不是“数据还没跑够”。