如果改动和促销在同一时间窗口上线,你只能把观察到的着陆页转化率变化当作“改动加促销的合计效果”,不能拆成改动的单独贡献。要得到可用的归因结论,前提是存在一个未受促销影响的对照版本,并且你能证明两组访客在促销暴露上基本一致;否则结论应降级为假设,下一步是补做分离验证,而不是继续放大投放。
可归因的最低条件是:改动版本与旧版本同时存在,且促销对两组的作用方式相同。常见做法是保留一小部分流量继续看旧版着陆页,同时让这部分流量也进入同一促销。此时两组的差别只剩页面改动,合计效果才可能被拆开。
如果促销只投给新版页面,或者促销素材、落地渠道、投放时段与旧版不同,改动和促销就绑定在一起。此时即使着陆页转化率明显上升,也无法判断上升来自页面结构、促销力度,还是两者互相放大。一个可核查的证据链应包含:改动上线时间、促销开始与结束时间、两组各自获得的流量来源、促销展示位置是否一致。缺少其中任何一项,归因结论都应标注为“不可分离”。
第一种是转化率跳升后回落。促销期的高转化可能来自价格刺激,促销结束后回落到接近原水平,并不证明改动无效,只说明改动没有独立于促销被测量。第二种是站内统计与搜索引擎报告口径不同:站内统计可能把促销弹窗后的再次提交算作一次转化,而搜索报告只记录到达页面后的会话,两者不能直接相减得出改动收益。第三种是抓取量或请求量在促销期归零或激增,这可能是促销页替换、跳转规则变化或监测脚本触发条件改变所致,不能单独用来判断页面改动是否被正确处理。
这些信号只能说明“有变化”,不能说明“变化由改动造成”。把它们当作归因证据,会高估改动的贡献,并让后续优化方向偏离。
假设某着陆页在促销周把主按钮从“了解详情”改为“立即领取”,同时全场折扣从九折变为七折。促销周转化率从 3% 升至 5%。如果只记录这两个数字,不能写成“按钮改动带来两个百分点提升”。合理的限制写法是:在促销力度同时变化的前提下,该观察只能支持“按钮改动与折扣加深的合计效果为正”,不能拆分。若下一周折扣恢复九折、按钮保留新版,转化率回到 3.2%,也只能说明新版按钮在无折扣加深时没有明显优势,不能反推促销周里按钮贡献为零。
这个例子的用途是说明比较方法:先固定一个变量,再观察另一个变量的变化方向。数字仅用于演示比较逻辑,不代表真实项目结果。
当叠加已经发生且无法回到过去时,实际动作是:停止基于这次叠加数据做放量决策,改为安排一次分离验证。具体做法是保留旧版着陆页的一小部分流量,让这部分流量与新版接受相同的促销条件,运行一个完整促销周期后再比较。这个动作的结果会决定下一步:如果两组差异稳定,改动贡献可以被单独讨论;如果两组差异随促销力度变化而摆动,说明改动效果依赖促销环境,后续只能在同类促销条件下复用,不能外推到日常流量。
在分离验证完成前,对外汇报应使用“合计效果”措辞,并附上促销时间、流量来源和口径说明。这样即使个别样本看起来成立,也不会被直接照搬到规模化投放中。