arXiv 新论文:置信度更高未必让知识图谱审计更有效
arXiv 新论文《When Does Better Confidence Improve a Knowledge-Graph Audit?》讨论了一个容易被忽视的问题:在 LLM 构建的知识图谱中,置信度估计本应帮助人工复核,但更好的错误预测并不必然带来更好的审计效果。作者从可修复性、选择余量和标签有效性三个角度解释这一落差,将非自适应审计建模为预算受限的覆盖问题,并给出标量保持一阶规划的遗憾上界。研究在 Re-DocRED 上模拟五种抽取配置和两张跨文档图;结果显示,在留出跨文档图上,按“错误率×扇出”排序的队列比同等动作的联合模型多留下约 3.98 至 4.74 个百分点的错误。对知识图谱质检团队而言,这意味着排序指标要贴合审计预算与修复成本,而不只是追求更准的错误分类器。