先给结论:小样本有效、批量无效,通常不是“方法本身错了”,而是样本阶段隐含了手工筛选、字段对齐或逐条确认,批量阶段把这些前提省掉了。要复现,先把小样本里真正起作用的动作拆出来,再决定保留手工、改写流程还是退出批量。
同一套百度指数添加方法,在少量词上成立,在成批词上失败,先别急着改方法。更常见的原因是两组词并不等价:小样本往往只挑了需求明确、词面干净、归属清楚的词;批量里混入了同义变体、品牌词、长尾歧义词和跨类目词。此时批量无效并不证明方法失效,只证明样本被挑过。
可以用一个假设例子说明比较方法:先取20个词手工添加,记录每个词被保留或删除的理由;再从待批量清单里随机抽20个,不按任何偏好筛选,用同样规则处理。如果随机组的失败集中在“词义不唯一”和“归属不清”,那问题在入口筛选,不在添加动作本身。这一步的产出是下一步的分流依据,而不是最终结论。
如果小样本有效的关键,是每次添加前都确认了词义、归属和展示位置,那么批量前必须把这三项变成可核对的字段,而不是靠记忆。保留手工的适用前提是:词量不大,且错误添加的代价高于人工时间。此时更稳妥的做法是只批量准备候选,不批量提交。
这样做的结果是:批量清单会先缩小,再进入添加环节。代价是速度慢,但能保住小样本阶段的有效性。
如果小样本有效主要靠“逐条看”,而批量规模已经无法逐条看,就需要改写流程,而不是直接复制操作。改写的核心是把判断标准写成规则,并允许规则被复核。规则可以包括词长范围、是否含品牌名、是否与已有词重复、是否属于同一需求簇。
改写后要验证规则是否真的复现了小样本结果:用同一批小样本词跑一遍规则,看保留和删除是否与手工一致。若不一致,先修正规则,不要急着扩大批量。这个动作的结果决定下一步是继续扩量,还是回到手工阶段补样本。
如果随机抽样显示失败原因分散、无法归入少数几类,或者批量添加后需要大量回退,退出批量是合理选择。退出的前提不是“批量一定不行”,而是当前数据不足以支撑稳定规则。此时继续扩量只会放大错误,并让后续核对成本更高。
退出后可以保留小样本作为基线,等需求或词表结构变化后再重新评估。要注意,一次改动前后比较不能只看添加数量变化,还要考虑季节、搜索需求波动和数据采集差异;请求量或抓取量归零也不能单独证明处理正确,它可能来自采集延迟、权限变化或词本身热度下降。
多个角色对同一批词有不同理解时,不要争论“方法对不对”,而是把分歧拆成可核对项:词义、归属、展示位置、保留理由、删除理由。每一项都对应一个可复查的记录。这样,小样本有效而批量无效就不再是感觉问题,而是可以定位到具体字段的差异。先核对差异,再决定保留、改写或退出,比直接重跑批量更接近可复现的结果。