EnvOpt tự động cắt giảm 48% chi phí môi trường của agent
Bắt đầu từ đây
Các nhà nghiên cứu tại University of Chicago, UC Berkeley Sky Computing Lab và Bespoke Labs đã công bố EnvOpt, một phương pháp tự động tái cấu trúc môi trường tĩnh của agent để giảm chi phí. Trên năm benchmark, EnvOpt cắt giảm chi phí của agent mục tiêu trên các tập kiểm thử chưa từng thấy trung bình 48% trong khi tỷ lệ vượt qua giữ nguyên hoặc cải thiện. Trên AutomationBench, nó vượt Meta-Harness 9,67% về tỷ lệ vượt qua với chỉ 15% chi phí, và các môi trường được tối ưu hóa chuyển giao được sang các harness và mô hình khác, bao gồm mức giảm chi phí trung bình 75,7% trên AutomationBench. Phần lớn khoản tiết kiệm đến từ token đầu vào, chủ yếu là kết quả thực thi công cụ. Một lần chạy tối ưu hóa ngoại tuyến trên AutomationBench tốn khoảng 150 USD, và các tác giả báo cáo nó tiết kiệm 77,5% chi phí chạy Claude Opus 4.8.
Tạo từ các bài viết · cập nhật 33 phút trước
Dòng thời gian bài viết
Theo các bài viết để thấy sự việc từ nhiều phía.
- Hacker News · AIEnvOpt: Tối ưu hóa tự động cho môi trường của agent
EnvOpt, một phương pháp từ University of Chicago, UC Berkeley Sky Computing Lab và Bespoke Labs, tự động tái cấu trúc môi trường tĩnh của agent để cắt giảm chi phí, giảm chi phí của agent mục tiêu trên các tập kiểm thử chưa từng thấy trung bình 48% trên năm benchmark với tỷ lệ vượt qua cao hơn hoặc tương đương. Trên AutomationBench, phương pháp này vượt Meta-Harness 9,67% tỷ lệ vượt qua chỉ với 15% chi phí của nó, và các môi trường được tối ưu hóa chuyển giao được sang các harness và mô hình khác, bao gồm mức giảm chi phí trung bình 75,7% trên AutomationBench. Phần lớn khoản tiết kiệm đến từ token đầu vào, chủ yếu là kết quả thực thi công cụ, và một lần tối ưu hóa ngoại tuyến trên AutomationBench tốn khoảng 150 USD trong khi tiết kiệm 77,5% chi phí chạy Claude Opus 4.8.
Độ nóng của sự việc này
Chưa đủ quan sát liên tục để vẽ xu hướng.