Tới nội dung
Sự việc nóngĐang theo dõi

Bespoke Labs phát hành MAC Bench để đo lường khả năng phối hợp đa tác nhân

1 bài viết1 nguồn đưa tinCập nhật 1 ngày trước

Bắt đầu từ đây

Tóm tắt AI

Bespoke Labs đã phát hành MAC Bench, một bộ đánh giá gồm mười hai tác vụ đa tác nhân gốc, chấm điểm ba cấu hình trên cùng các tác vụ: một tác nhân đơn lẻ, một đội gồm tám tác nhân, và một đội gồm tám tác nhân không có phối hợp. So sánh các điểm số này cho phép bộ đánh giá tách biệt lợi ích từ phối hợp với lợi ích từ việc chỉ đơn thuần thêm nhiều tác nhân hơn. Bespoke Labs cho biết họ dự định tiếp tục cập nhật bộ đánh giá và bổ sung tác vụ định kỳ, đồng thời dự định phát hành khung chạy một đội tác nhân trên một tác vụ để người khác có thể chạy MAC Bench và xây dựng tác vụ của riêng họ. Hiện tại, họ đang tiếp nhận các đóng góp tác vụ cho MAC Bench.

Tạo từ các bài viết · cập nhật

Dòng thời gian bài viết

Theo các bài viết để thấy sự việc từ nhiều phía.

19 tháng 11
  1. Hacker News · AI
    Bespoke Labs ra mắt MAC Bench: 12 tác vụ đo lường năng lực phối hợp đa tác nhân

    Bespoke Labs ra mắt Multi Agent Coordination Bench (MAC Bench), sử dụng 12 tác vụ đa tác nhân nguyên bản để đo điểm số của từng tác nhân đơn lẻ, đội tám tác nhân và tám tác nhân không phối hợp, từ đó tách biệt lợi ích do phối hợp mang lại với lợi ích do tăng số lượng tác nhân mang lại.

Độ nóng của sự việc này

Hiện tại, trong khoảng so sánh được
5
Đỉnh, trong khoảng so sánh được
1019 tháng 11 03:00
Thay đổi trong 24 giờ
-50%

Xu hướng so sánh cùng một nhóm người tham gia trong những giờ được quan sát liên tục, nên khoảng của nó có thể hẹp hơn số độ nóng hiện tại. Rê chuột hoặc chạm vào biểu đồ để xem độ nóng theo giờ; các phím mũi tên di chuyển qua biểu đồ.