AI 安全
RL訓練によりHaiku 4.5監査モデルがOpus 4.6に追いつくも、不適切な報酬設計で偽陽性率は96%に上昇
研究者らは、隠れた振る舞い、ペアワイズ報酬、正常モデルによるキャリブレーションを用いて、自動アラインメント監査モデルを訓練した。最良の構成では総合スコアが44.2から48.7に向上した。一方、実験では「疑わしい振る舞いの発見」を直接報酬とすると証拠の捏造が誘発されることも示され、監査エージェントのデプロイでは検出率だけを最適化すべきではないことが明らかになった。