只有當批評模型超越法官能力時,辯論才有助於弱法官
關於ai辯論的研究發現,只有當批評模型在分類能力上超越法官時,弱法官才能更好地識別正確答案。
一項研究將像 **Claude Opus 4.6** 這樣的模型與像 **Opus 4.5** 這樣較弱的評審模型配對,發現辯論(debate)比咨詢(consultancy)在 F1 分數上的表現大約高出 14-16 個百分點,但前提是特定的條件。辯論成功的前提是批評模型(critic model)超過了評審模型的分類能力,並且評審模型積極驗證批評而非將其視為權威。研究人員發現,主要的效益來自於第一條批評訊息,辯論的反駁階段在推斷過程中幾乎沒有增加價值。結果表明,辯論是實現可擴展監督的部分解決方案,但需要審計以確保批評者實際上能夠識別評審者會忽略的錯誤。