Amazon Science 介绍的研究利用 Ising 模型校正 LLM 评审输出之间的相关性,减少共同错误对聚合判断的影响。论文《Dependence-aware label aggregation for LLM-as-a-judge via Ising models》发表于今年的 ICML,方法无需人工参考标签参与训练,可从评审输出中学习模型可靠性与成对依赖关系。
阅读原文