跳至正文
Epoch AI · Gradient Updates· Kelly Hong·· 18 天前AI 評分58

Epoch AI 以自身研究任務測試 AI,頂尖模型得分 65% 且全數未通過

We tried to automate Epoch

AI 導讀

Epoch AI 將其早先自動化資深研究員工作的嘗試擴展為 Epoch Automation Reports,以與人類員工相同的標準,在圖形設計和研究規劃等真實 Epoch 任務上評估 AI。1 和 GPT-6 Astra 在評分標準上平均得分 65%,但 65% 的分數仍算作任務失敗,因為若由人類提交,每份提交都會被拒絕或修改。

來源:Epoch AI · Gradient Updates · epochai.substack.com