代理評測
OmegaUse-OfficeVal、オフィスエージェント評価にタスク別コストラベルを導入 最高性能モデルも品質では人間に3分の1超及ばず
百度(Baidu)の研究チームは、文書、スプレッドシート、プレゼンテーションに関する100件の長工程タスクを、人間の作業時間、価格の代理指標、実行可能な検証ツールとともに公開した。最高性能モデルの平均スコアは17.91で、人間のベースラインである27.79を下回った。推論が安価かつ高速でも、成果物をそのまま利用できるとは限らないことを示している。