rotative
lesswrong ai · 2026年5月26日

ディベートが弱い審判を助けるのは批判者が上回る場合のみ

AIディベートの研究では、弱い審判が正解をより正確に識別できるのは、批判を行うモデルが審判自身のエラー分類能力を上回る場合に限られることが分かった。

read in English · 简体中文 · 繁體中文 · 한국어

### 研究概要

モデル **Claude Opus 4.6** のような強力なモデルと **Opus 4.5** のような弱い判断モデルを組み合わせた研究では、デベートはコンサルタントを約 **14-16** パーセンテージポイント上回る **F1スコア** を達成したが、特定の条件下でのみであった。デベートは、批評モデルの分類能力が判断モデルの能力を上回り、判断モデルが批評を権威として扱わず積極的に検証した場合に成功した。研究者らは、最初の批評メッセージから主に利益が得られ、反論ラウンドは推論中にほとんど価値をもたらさないことを発見した。結果は、デベートがスケーラブルな監視のための部分的な解決策であることを示唆しており、監査が実際に批評家が判断に欠落するエラーを識別できることを保証するために必要である。

read at source ↗

← rotative