阈值怎么科学设定?

科学设定阈值的步骤:

  1. 定义业务目标:明确可接受错误率(如投诉误标率≤1%)。
  2. 测试不同阈值:用同一组数据测试0.5/0.7/0.9,记录对应的准确率与人工复核量。
  3. 计算成本权衡
    • 高阈值(0.9)→准确率98%,但40%需人工复核。
    • 低阈值(0.5)→准确率80%,但人工复核仅10%。
  4. 选择平衡点:如业务要求95%准确率,且人工资源充足,选0.8阈值。
  5. 动态调整:每季度根据数据分布变化,重新测试并微调阈值。

示例

  • 测试表:
    阈值 准确率 人工复核占比
    0.6 85% 15%
    0.8 92% 30%
    0.9 97% 50%
  • 选择:选0.8,准确率达标且人工负担可控。