Hacker News · AI·· 16 giờ trướcĐiểm AI38
Terminal-Bench 4.1 ra mắt với bộ xác minh được gia cố chống reward hacking
Terminal-Bench 4.1
Tóm tắt bằng AI
Terminal-Bench 4.1 được phát hành với các bộ xác minh cải tiến được thiết kế để chống lại reward hacking, và việc chấm lại TB 4.0 bằng các bộ xác minh mới không tốn thêm $0 chi phí suy luận. Chỉ khoảng 1,16% trong số 11.550 lượt thử nghiệm thay đổi điểm số, và điểm số cập nhật của cả 35 tác nhân vẫn nằm trong khoảng tin cậy 95% ban đầu của TB 4.0.
Nguồn:Hacker News · AI · tbench.ai