先给结论:试做阶段表现好、批量交付变差,通常不是“服务突然失效”,而是试做样本被特殊照顾、或批量阶段的输入质量下滑。抽查的目标不是再测一遍效果,而是找出这两者中哪一个在起作用,再决定是继续放量、缩小批量,还是暂停并返工。
第一种解释是样本挑选。试做时往往由最有经验的人挑页面、挑词、挑时间窗口,甚至临时调整了内链和模板。这种表现不能直接外推到批量。
第二种解释是输入稀释。批量阶段新增的页面、栏目或关键词本身基础更差:可索引内容少、主题分散、与已有页面重复,处理动作一样,结果自然不同。
两者的区别不在“效果数字”,而在处理动作是否一致。如果试做和批量的动作清单不同,先怀疑样本挑选;如果动作一致但输入特征差异大,先怀疑输入稀释。
批量交付变差时,直接看排名波动很难归因,因为排名本身受多种因素影响。更有效的抽查对象是每个交付单元的处理痕迹:
抽查时按“批次”分层,而不是随机抓几个页面。先抽表现最好的几个单元,再抽表现最差的几个,对比它们的处理记录和输入特征。这样比均匀抽样更容易暴露差异来源。
下面是一组假设例子,用于说明比较方法,不代表真实项目结果。假设某批交付 40 个页面,试做阶段 5 个页面表现明显更好。抽查时可以这样看:
这个比较的关键动作是把“处理动作”和“输入特征”分开记录。只有分开记录,才能判断变差是执行问题还是对象问题。记录之后,下一步决策才有依据:动作不一致就统一动作后小批量复测;输入太差就先补输入再放量。
如果证据指向样本挑选,正确的动作不是继续加大批量,而是把试做阶段的动作固化成可复制的规则,再用一个小批量验证规则是否可复制。验证通过前,不宜按原节奏放量。
如果证据指向输入稀释,动作应转为先筛选输入:把明显不满足基础条件的页面或词先排除,或先补齐内容再进入处理队列。此时继续按原批量交付,只会让差表现的比例继续上升。
如果两类证据同时存在,优先处理输入问题,因为输入不合格时,再统一的动作也难以产生稳定结果。抽查的最终产出不是一份效果报告,而是一个明确的下一步:统一动作、缩小批量,或先补输入。
每次抽查至少留下三类信息:抽查了哪些单元、这些单元的处理动作是否一致、输入特征是否有明显差异。这样下一次批量交付前,就能用同样的口径判断是否具备放量条件,而不是等表现变差后再回头找原因。