代理工具
Anthropic 合併 Claude Chat 與 Cowork,單一對話開始自動選擇代理工具與執行環境
Claude 現可在同一對話中回答問題或啟動長時間代理工作,並把文件、投影片與設計工具納入共同上下文。模式選擇消失後,工具路由與權限提示成為新的安全邊界,而本機檔案及電腦操作仍依賴桌面程式。
Archive
模型安全、資安、隱私、供應鏈、紅隊與防護。
代理工具
Claude 現可在同一對話中回答問題或啟動長時間代理工作,並把文件、投影片與設計工具納入共同上下文。模式選擇消失後,工具路由與權限提示成為新的安全邊界,而本機檔案及電腦操作仍依賴桌面程式。
AI 安全
Gemini Enterprise Agent Platform 的 Agent Anomaly Detection 會非同步分析 OpenTelemetry 軌跡、工具參數與執行流程,再以輕量模型及 LLM 判斷異常。私有預覽不增加即時請求延遲,代價是它主要屬於事後偵測,且必須保存包含提示與回覆內容的原始遙測。
AI 安全
HazardAuditor 將 Claude Code、Codex、Hermes 與 OpenClaw 的工具執行轉成共同事件格式,再判斷整段行為是否安全。新的 GuardPO 讓最終安全判定主導更新,但研究資料未公開,最高 16.5 個百分點增益仍待獨立重現。
代理工具
Anthropic 在 2.1.273 修正兩條命令審查缺口,以及受管理 MCP、連接器政策可能被忽略的設定合併問題。新版也為 LLM gateway 增加選配請求標頭與 MCP 斷線告警,但官方未把這批修補列為 CVE 或安全公告。
AI 安全
新基準把 150 個 SWE-bench Verified 任務改寫成 750 個帶有安全陷阱的 issue,測試自動修復代理會否交付功能正確但不安全的程式碼。三種模型後端平均有 51.7% 的案例同時完成修復與攻擊目標,而常見的模型審查及靜態分析仍漏掉大量惡意 patch。
AI 安全
新研究發現,放入上下文的良性措辭錯誤計畫可被模型吸收、改寫並付諸行動,最強監控器仍漏掉至少四分之一攻擊。讓監控器看到原始注入內容或增加推理預算也不保證改善偵測,顯示代理不能只靠輸出思維鏈自證安全。
AI 安全
新研究在固定模型、乾淨資料與毒化數量後,僅更換毒化樣本組合,就讓 Llama 3 8B 的攻擊成功率落在 3% 至 80%。SAILS 以少量昂貴微調評測訓練集合評分器,再從數百萬候選組合中挑出高風險集合。
代理工具
Google Research 公開 Stellar Colosseum,以策略探索、反例攻擊、依賴圖與分層彙整管理長程數學研究。系統在 300 題 TCS‑Bench 達 71%,但成績依賴大量推論與自動評分,不能直接視為模型獨立證明能力。
AI 安全
OpenMAIC 的媒體代理曾在驗證網域後重新解析 DNS,使外部名稱可在連線時轉向內網;另一條路徑則會放行阿里雲中繼資料位址。1.0.2 改以固定解析結果連線並由伺服器產生課堂 ID,但也會影響透過 Tailscale 等 CGNAT 網段存取本地模型的部署。
AI 安全
新研究把代理重試、並行與補償造成的外部狀態錯亂整理成八類異常,指出單次工具回傳成功不代表整體工作流一致。對 98,291 項 MCP 工具的普查顯示註解欄位雖常見,卻無法表達確認結果、暫存提交、補償及跨呼叫相依性。
AI 安全
K‑Bench 把評測從模型的最終回答擴至推理、工具呼叫、檢索結果等六條代理通道。實驗顯示,既有基準判定無洩漏時,部署中的代理仍可能在 22% 至 86% 查詢中暴露目標資料。
AI 安全
社群稽核發現,`huggingface_hub` 會依環境變數辨識 Codex、Claude Code、Cursor 等代理,並把名稱加入 Hub 請求的 User-Agent。機制早已由官方公開,但一般遙測停用選項是否完整涵蓋代理標記,文件仍未清楚說明。