在百度推广ROI分析中,避免把相关当成因果的核心做法是:先列出可能同时影响花费与转化的第三因素,再用同期对照、时间顺序和分群拆分去排除它。只有当你改变一个变量、其他条件基本不变,且转化变化出现在改变之后,才能把这段变化较有把握地归因于该变量。否则,两个指标一起涨跌,只能说明它们相关。
第一类是共同原因造成的相关。比如行业旺季到来,搜索需求上升,同时你的预算和转化都在涨。此时预算与转化相关,但推高转化的可能是旺季需求,而不是预算本身。第二类是反向因果。转化变好之后,你更愿意加预算,看起来像“加预算带来转化”,实际顺序可能相反。第三类是选择偏差。你只对历史表现好的计划加价,这些计划本来转化率就高,加价后的表现好并不全由加价造成。
判断时问三个问题:这个变化和结果谁先发生?有没有第三个变量同时影响两者?如果把样本按这个第三变量分组,关系还成立吗?三个问题里有一个答不上来,结论就先别写成因果。
整体ROI曲线同时混入了预算、出价、时段、地域、落地页和竞争环境的变化,直接读趋势很容易把相关当因果。更稳妥的做法是做同期对照:把被改动的计划或时段作为实验组,把未改动、条件相近的计划或时段作为对照组,比较两组转化率或转化成本的变化幅度之差,而不是只看实验组前后差。
如果实验组和对照组变化幅度接近,说明改动很可能不是主因;如果只有实验组明显变化,且变化出现在改动之后,因果证据才更强。
百度推广后台的消费、点击、转化数据,与站内统计、第三方估算流量的口径往往不同。转化数可能来自不同的归因窗口和统计方式,直接跨口径比较会制造假相关。做ROI分析时,至少核对以下项目:
这些检查不能还原搜索算法,但能帮你判断“转化变化”是否真实存在,以及是否与你的改动同步。
假设你调整了某计划的出价,想判断它是否提升了ROI。可以按下面顺序做:
适用条件是两组在改动前表现趋势相近、外部环境没有剧烈变化。判断结果是:净变化大且方向一致,可以支持因果关系;净变化小或方向混乱,只能说明相关,需要继续找其他解释。
避免把相关当因果,还要在结论里写清楚适用条件和反例。例如不要写“提高出价提升了ROI”,而写“在X时段、Y地域、其他条件不变的情况下,提高出价后实验组转化成本下降,对照组基本不变,因此该改动可能是原因之一”。这样写,后续数据一旦推翻,你能快速修正,而不是被一个错误因果结论带着继续加预算。
下一步,选一个你最近做过的推广改动,按上面的对照步骤补一组未改动样本,重新计算净变化,再决定是否保留这个改动。