先查分母是否发生了“成员替换”,而不是先怀疑分组结论错了。总体结论和分组结论相反,最常见的原因是:总体汇总时,各组的权重由当前分组下的分母决定;一旦你把同一批词按另一种方式重新分组,某些组的词量、展示量或点击量占比会大幅变化,加权后的方向就可能翻转。此时要做的不是重算比率,而是把每个分组的分子、分母和汇总口径逐项对齐。
第一种解释是真实的辛普森反转:分组变量与另一个隐藏变量高度相关,比如品牌词和非品牌词在移动端和桌面端的分布不同。总体看移动端点击率更高,但每个设备分组内非品牌词的点击率都更低,只是非品牌词在移动端占比更大,拉高了总体。第二种解释更常见也更隐蔽:你比较的“总体”和“分组”根本不是同一批查询。总体可能来自搜索字词报告,分组来自站内落地页统计;总体按展示量加权,分组按点击数加权。这不是反转,是分母换了对象。
区分这两者,关键证据是看分组前后各组的展示量或点击量之和是否等于总体。如果不等,先别解释方向,先解释缺口来自哪里:是过滤了零点击词、剔除了品牌词、还是时间范围不一致。缺口一旦定位,分母就能重建。
把数据整理成四列:分组、分子、分母、分母来源。分子和分母必须来自同一份报告、同一时间范围、同一过滤条件。然后做两步核对:
假设一个短例子:总体有100个词,展示1000次,点击50次,点击率5%。按意图分组后,信息型60个词展示800次点击20次,点击率2.5%;交易型40个词展示200次点击30次,点击率15%。两组加权平均仍是5%,方向没有矛盾。但如果信息型实际有200个词,其中140个零展示被过滤掉,分母就从1000变成200,信息型点击率变成10%,反而高于交易型。这时“反转”是过滤造成的,不是意图本身的作用。
能支持真实反转的证据有三类:分组变量与隐藏变量存在稳定的交叉分布;在每个分组内部,隐藏变量的层级方向一致;改变时间窗口后反转仍然出现。只能支持口径问题的证据则是:各组分母之和与总体分母不等;某组在换报告后词量骤变;或者总体和分组使用了不同的归因口径,例如一个按最后一次点击,一个按展示。
实际动作上,先固定一份报告作为唯一分母来源,再按分组重算。若重算后反转消失,说明原结论受分母口径影响,下一步应统一报告来源,而不是调整分组维度。若重算后反转仍在,再检查隐藏变量,把交叉分布画出来,确认哪一层的权重变化导致了方向翻转。这个动作的结果会直接决定你下一步是修数据管道,还是修分组逻辑。
写结论时同时给出总体和分组的分母口径。若两者不可比,就分开陈述,不要用“整体更高”这类跨口径判断。若反转成立,说明权重来自哪一层,并注明这是加权结果,不是每个分组内部都成立。这样读者才能判断该看总体还是看分组,以及是否需要进一步拆分隐藏变量。