用黑盒预测降低评测成本
BlackHC · x · 2026-07-10
这条帖子介绍了主动测试(active testing)在模型评测中的新思路:用更少的标注来估计模型风险,同时利用强黑盒模型的廉价预测作为额外资源。 作者称,他们提出了 PPAT 方法,用来缓解传统评测中标注成本过高的问题。
BlackHC · x · 2026-07-10
这条帖子介绍了主动测试(active testing)在模型评测中的新思路:用更少的标注来估计模型风险,同时利用强黑盒模型的廉价预测作为额外资源。 作者称,他们提出了 PPAT 方法,用来缓解传统评测中标注成本过高的问题。