选择小范围试验的核心原则是:只改动一个变量、只覆盖一小部分流量或关键词、只跑够能看出方向的时间,然后把结果与未改动的对照组比较。谷歌推广涉及搜索广告、购物广告、效果最大化等多种形态,如果不做小范围试验就直接全量调整出价、素材或落地页,很容易把原本有效的部分一起改坏,最后也说不清是哪个改动起了作用。下面按准备、实施、验证、维护四个阶段说明具体做法。
小范围试验最容易失败的地方不是执行,而是目标太散。开始前先写下一句话假设,格式是“如果我把某处改成某样,那么某个指标会朝某个方向变化”。例如:如果把某条搜索广告的标题从强调价格改为强调交付速度,那么该广告组的点击率会上升。假设里只能有一个自变量,指标也只能选一个主指标。
选择试验范围时,按以下依据判断:
准备阶段最关键的一步是建立对照组。可以保留一部分关键词、广告组或地区完全不动,只对试验组做改动。没有对照组,就只能和改动前的历史数据比,而历史数据本身受季节、竞争和预算变化影响,结论并不可靠。
实施时把改动限制在一个维度内。常见可单独测试的维度包括:广告标题或描述文案、出价策略、落地页首屏内容、关键词匹配方式、受众定向条件。不要在同一天既换文案又换落地页,否则即使指标变化,也无法归因。
具体操作可以按这个顺序执行:
如果必须中途干预,比如试验组消耗速度远超预期,应记录干预时间和原因,验证时把这段数据单独看待,而不是混在一起计算。
验证时比较的是试验组与对照组在同一时间段内的差异,而不是试验组自身有没有增长。判断结果可以看三类情况:
这里要注意指标口径不能混用。搜索广告的点击率、转化次数属于广告侧指标;落地页停留、表单提交属于页面侧指标;最终成交金额属于销售侧指标。用点击率上升去推断收入增长,中间缺少转化率和客单价两个环节,结论不成立。样本量很小时,几天的波动可能只是偶然,应延长观察或缩小结论范围,只说明“在这个小范围内观察到某方向”,不下全局判断。
试验得出可用的结论后,把它应用到更大范围,同时保留一份记录:假设内容、试验范围、起止时间、对照设置、结果和最终决定。这份记录的价值在于,当几个月后有人问“为什么这条广告这样写”时,你能给出依据,而不是凭印象。
扩大应用时建议分批推进,先扩到两到三倍于原试验范围,再观察一个完整周期。如果扩大后效果消失,可能的原因是原试验范围太小、受众特殊,或者扩大后触发了更激烈的竞争。此时应回到小范围重新验证,而不是继续加预算。
维护还包括定期复查已经固化的设置。竞争对手、搜索需求和落地页内容都会变化,一次验证通过的结论并不永久有效。可以设定每隔一个固定周期,对关键广告组做一次小范围复测。
打开你的谷歌推广账户,选一个流量相对集中、当前表现平稳的广告组,写下一句单一变量假设,指定一个不动的对照组,记录基线数据,然后只改动试验组的一个元素并开始计时。跑满预定周期后,用试验组与对照组的同期数据做比较,再决定扩大、回退还是换假设重测。