Hacker News · AI·· 18 小时前AI 评分38
Terminal-Bench 4.1 发布,强化验证器以抵御奖励黑客攻击
Terminal-Bench 4.1
AI 导读
Terminal-Bench 4.1 已发布,其改进后的验证器旨在抵御奖励黑客攻击;使用新验证器对 TB 4.0 重新评分未产生额外推理成本($0)。在 11,550 次试验中,仅约 1.16% 的分数发生变化,且全部 35 个智能体的更新后分数仍处于其原始 TB 4.0 的 95% 置信区间内。
来源:Hacker News · AI · tbench.ai