代理評測
AeroCopilotBenchは飛行手順を実行可能な状態機械に変換、最高性能のエージェントでも安全通過率は72.6%にとどまる
新たなベンチマークは、73件のコックピット異常時タスクを用いて、エージェントが状態を観察し、システムを操作しながら、全過程で厳格な安全制約を遵守できるかを検証する。単に航空知識の問題に回答させるものではない。GPT-5.6 Solが最高の成功率を記録したが、知識スコアが近いモデル同士でもタスク成功率は一致せず、静的な質疑応答ではインタラクティブな安全性テストを代替できないことが示された。