跳到正文
Epoch AI · Gradient Updates· Kelly Hong·· 18 天前AI 评分58

Epoch AI 用自家研究任务测试 AI,顶尖模型得分 65% 却全部未通过

We tried to automate Epoch

AI 导读

Epoch AI 将其早先自动化一名高级研究员工作的尝试扩展为 Epoch Automation Reports,用与人类员工相同的标准,在平面设计和研究规划等真实 Epoch 任务上评估 AI。1 和 GPT-6 Astra 在评分表上平均得分 65%,但 65% 的得分仍算任务失败,因为如果由人类提交,每一份都会被拒绝或退回修改。

来源:Epoch AI · Gradient Updates · epochai.substack.com