先查分母是否被分组条件重新定义了。总体转化率的分母通常是全部进入统计口径的会话或用户,而分组后的分母往往只保留满足某一条件的那部分,一旦这个条件与结果变量相关,分组结论就可能与总体相反。此时不要急着改页面或改流程,先把每个分组的分子、分母和排除量还原成一张可核对的表。
假设某段时间内,总体转化率从 4% 降到 3.5%,但按新老访客分组后,两组转化率都比上期高。这个现象本身不矛盾,它提示总体分母的构成变了:新访客占比大幅上升,而新访客的转化率天然低于老访客。加权平均被结构变化拉低,分组内部的提升反而被掩盖。这里的数字只用于说明比较方法,不代表任何真实项目结果。
要验证这个解释,动作是把总体拆成“分组转化率 × 分组占比”,看占比变化贡献了多少落差。如果某一组的占比变化足以解释总体方向,那么下一步就不该继续在页面层面找原因,而应回到流量来源和进入条件。
分组变量常常同时充当过滤条件。例如按“是否点击过主按钮”分组时,未点击的人根本不会进入“已点击”组的分母;按“是否看到推荐模块”分组时,未曝光的人被排除在外。这类分母收缩会让分组转化率看起来更高,但与总体不可直接比较。
如果排除比例变化明显,分组对比就失去了可比性。此时应改用同一进入条件下的队列,或把被排除部分单独列为一个组。
分母收缩时,分子往往也被改写。例如只统计“完成注册”的转化,分子是注册成功数,但分母若只含已提交表单的人,就变成提交到注册的转化,而不是访问到注册的转化。两个口径混用时,分组结论与总体结论必然分叉。
可区分原因的证据是:把分子和分母分别按同一条件重算,若两者都随条件移动,说明口径整体变了;若只有分母移动,说明筛选只作用于进入端。前者需要重建统一口径,后者需要把被筛掉的人补回对照。
把总体和分组放在同一张表里,至少包含四列:分组、分子、分母、排除量。逐行检查三项:分母是否等于分子加未转化加排除;分组分母之和是否等于总体分母;排除量是否在可接受范围内。
完成核对后,若发现是分母口径问题,下一步动作是统一口径重算,而不是继续优化页面;若分母一致而结论仍相反,才进入页面或流程层面的排查。
分组结论比总体更可信的前提是:分组条件在结果发生前就已确定,且各组分母之和等于总体分母,排除量小且稳定。满足这些条件时,分组结论可以覆盖总体结论,因为总体只是各组的加权平均。
不满足时,总体结论反而更稳,因为它没有引入额外的筛选偏差。判断标准不是哪个数字更好看,而是哪个口径的排除量更少、更稳定、更接近完整进入量。把这一条写进分析记录,下次遇到方向相反时就能直接定位到分母,而不是重新争论页面改没改。