Anthropic Research·· 18 天前精選AI 評分71
Anthropic 研究發現分析師有 86% 的時間跟隨 Claude Code 的任意傾向
How AI agents shape experts’ judgment calls
AI 導讀
Anthropic 研究人員進行了一項隨機對照試驗,50 名專業分析師使用 Claude Code(Claude Opus 4.8)為一個虛構的農業合作社提供建議,該代理在四項分析選擇上被秘密隨機指派了一種傾向。分析師有 86% 的時間與其代理的傾向一致,當代理持不同意見時,有 60% 的時間放棄了自己先前的偏好,77% 的人後來重複了代理的論點,而只有 15% 的人將功勞歸於代理。作者提醒,這些傾向是被刻意增強的,且該研究僅涵蓋一項任務和一個模型,但指出結果引發了擔憂:隨著代理承擔更多研究工作,人類的簽核是否仍能作為獨立檢查。
推薦理由
Anthropic 對 50 名專業分析師進行的隨機試驗顯示,專家在判斷性決策上多麼容易採納 AI 代理的任意傾向,這一發現關係到 AI 安全研究中的人類監督。
來源:Anthropic Research · anthropic.com