结论是:在额度受限时,不要按“数量”取样,而要按“分歧”取样——优先查那些结果最可能不一致、且不一致会直接改变你下一步动作的对象。如果所有候选样本的预期结论都一样,那么查谁都不增加信息量,此时减少样本量比均匀铺开更划算。
挑选样本的第一个标准不是代表性,而是“可推翻性”。假设你默认站内大部分旧页面的收录状态正常,那么真正有价值的样本是那些你怀疑已经失效、被替换或长期无人维护的页面。查一个你确定正常的页面,得到“正常”只是重复已知信息;查一个你怀疑异常的页面,无论结果如何都能更新判断。
可执行的最小动作:先列出三类候选对象——近期改动过的、长期未动的、结构上与其他页面明显不同的。给每一类各挑少量样本,而不是在同一类里平均分配额度。如果某一类查完后结论高度一致,就可以停止在该类继续投入额度,把剩余额度转向分歧最大的那一类。
很多人按流量或重要程度排序,这在额度充足时合理,在额度有限时反而低效。高流量对象通常已经被反复关注,你对它的判断往往已经接近真实;而边缘页面、模板生成的页面、批量迁移后遗留的页面,才是你判断最不确定的地方。
可以用一个简单假设来比较两种取样方式。假设你有100个待查对象,额度只够查10个。方式A是查流量最高的10个,你很可能得到10个“符合预期”的结果,信息增量接近零。方式B是先按页面类型分成5组,每组各查2个,你更可能发现某一组整体异常,从而把问题定位到模板或规则层面。后者即使样本更小,指向的行动也更明确。
需要注意,这里的“分歧度”是你主观预期的不确定程度,不是统计意义上的方差。它不需要精确计算,只需要你诚实回答:这个对象的结果会不会让我改变原计划。
反例是:当你需要的是整体比例,而不是异常定位时。比如你要判断“全站大约多少比例的页面未被收录”,那么按分歧度取样会系统性高估异常比例,因为你故意多查了可疑对象。此时小样本只能告诉你“存在这类问题”,不能推出“问题占比是多少”。
同样,如果所有候选对象属于同一模板、同一批次、同一规则生成,那么查一个和查十个得到的信息几乎相同,此时应把额度留给不同批次之间的对比,而不是批次内部。
每查完一个样本,记录三件事:对象属于哪一类、结果是否符合预期、这个结果会让你改什么。如果连续几个样本都指向“不需要改”,就切换到下一类;如果某个样本暴露出规则层面的问题,就优先在同一类里再补一两个样本确认是否普遍,而不是立刻扩大范围。
这样做的结果是:额度消耗速度变慢,但每一步都有明确的下一步。当某一类的结论稳定后,剩余额度可以集中用于验证修复动作是否生效,而不是继续做无方向的抽样。
最后要明确边界:小样本能帮你定位方向,不能帮你确认覆盖率、总量或趋势。若这些数字本身就是决策依据,就需要更完整的权限或数据来源,而不是靠扩大样本量去逼近。