额度有限时,优先选“能证伪你当前假设”的样本,而不是能证明假设的样本。具体说:若你的假设是“这批页面都有同类问题”,就抽最可能没问题的头部页面;若假设是“问题只出在少数页面”,就抽表现最差和最好的两端。这样一次查询就能缩小判断范围,而不是收集一堆互相印证的例子。
挑选样本前,先写下你打算用查询结果支持的那句话。不同句子对应完全不同的抽样方向。
两种条件下的共同原则是:样本要能改变你的下一步动作。查完没有任何判断变化的样本,即使数据完整,也是低信息量的。
额度有限时,横向铺量不如纵向对照。让每个样本至少能区分两种可能原因。
假设某目录下十个页面查询结果都不理想。若这十条来自同一模板、同一发布时间段,你无法判断是模板导致还是时段导致。此时应把其中几条换成不同模板或不同时段的页面再查一次。这个动作的结果如果显示差异明显,下一步就锁定变化的那一维继续查;如果差异不明显,说明需要换一个维度重新设计样本。
小样本能说明“存在这种情况”,但不能说明“这种情况占多大比例”。这是额度有限时最容易越界的地方。
一条页面查询结果异常,可以支持“这个问题确实存在”,不能支持“全站三成页面都有这个问题”。要判断比例,至少需要按分层抽样查够每个层的样本,而分层本身会消耗额度。因此额度紧张时,更稳妥的用法是:用样本确定问题类型和排查方向,把比例判断留到有更多数据时再做。
另一个边界是时间。同一批样本今天查和过一段时间再查,结果可能因数据更新节奏不同而变化。如果两次结果不一致,先确认查询对象的采集时间是否同步,再决定是否推翻之前的结论。请求量下降或某项指标归零,也可能来自采集口径变化、页面改版或统计延迟,不能单独作为处理正确的证据。
假设你手上有约两百个页面,额度只够查二十条,目标是判断“标题写法是否需要统一调整”。
查完后按结果分三路:问题跨栏目普遍存在,就先改公共模板再复查;问题集中在个别栏目,就先改栏目模板;样本之间没有一致模式,就说明当前假设不成立,应换一个维度重新抽样,而不是继续加查同类页面。
每查完一批,做一次简短记录:这批样本代表什么范围、能排除什么、还不能排除什么。如果下一批样本无法回答上一批留下的疑问,就调整抽样维度而不是增加数量。具体工具当前提供哪些查询项、额度规则和数据更新节奏,需要以你实际使用的版本为准,使用前先核对,不要凭记忆照搬旧教程的步骤。