把工具评分当成唯一门槛,最容易误杀那些分数低但仍有保留价值的词。防止自动评分替代人工判断,关键是先明确哪些项目必须由人定去留,再让评分只承担筛掉明显无关项的角色。下面的做法不是要否定评分,而是给它划出边界。
不是所有项目都值得投入人工。可以按“判断依据是否在数据之外”分成两类。
区分的动作很简单:给每个候选词加一列“判断依据”,填“数据可判”或“需外部信息”。结果是人工清单不再由分数决定,而由依据来源决定。下一步只需对“需外部信息”的项目逐一处理,评分只用于另一类。
自动评分适合排除明显无关的项目,不适合证明某个项目值得保留。原因在于评分通常只反映可量化信号,无法判断一个词是否对应已有页面、是否与旧合作关系绑定、是否涉及必须保留的合规表述。
因此可以把评分用途限定为“低于某个阈值时触发复核”,而不是“高于阈值就直接采用”。触发复核后,人工需要回答三个问题:这个词是否对应现有资产?退出它会不会影响已有承诺?保留它是否只需极少维护成本?三个问题中只要有一个答案是肯定的,就不应仅凭评分删除。
假设示例:某批旧内容对应的词评分普遍偏低,但其中一部分页面仍有外部链接或合同约定的展示位置。此时若按评分统一清理,可能先损失的是外部关系而非内容本身。这个例子只说明比较方法,不代表任何真实项目结果。
旧内容、旧系统或旧合作关系需要退出时,直接删除往往不可逆。更稳妥的动作是生成一份退出清单,把“保留仍然有价值的部分”拆成可执行项。
这个动作的结果是:人工判断有了缓冲,评分不再直接触发不可逆操作。下一步的决策依据从“分数多少”变成“退出后是否产生实际影响”。
有两种情况可以放宽人工介入。一是项目处于纯测试阶段,没有对外承诺、没有既有页面、没有合作关系;二是项目数量远超人工处理能力,且单个项目的影响可以忽略。这两种情况下,评分直接筛选是合理的,但仍应保留一份被筛掉项目的记录,以便日后复查。
反过来,只要项目涉及对外承诺、既有资产或合作关系,就不应把评分当作最终决定。这不是否定工具,而是承认评分无法覆盖这些信息。
人工判断容易被替代,往往是因为标准只存在于个别人的经验中。把“需外部信息”的判定条件、退出清单的字段、观察期的长度写成固定流程,后来者才能重复执行。流程不必复杂,但必须明确谁在什么条件下可以推翻评分。
当评分结果与人工结论不一致时,记录分歧原因比记录结论更重要。分歧原因会告诉你评分缺了哪类信息,也会告诉你人工判断是否过于依赖个案。下一次调整阈值或补充字段时,这些记录就是依据。