Tới nội dung
Hacker News · AI·· 15 giờ trướcĐiểm AI58

Attest 1.1.0 ra mắt dưới dạng framework kiểm thử Python và TypeScript cho hành vi của AI agent

Show HN: Attest – Test what AI agents do, not just what they say

Tóm tắt bằng AI

Attest 1.1.0 là một framework kiểm thử dành cho AI agent bằng Python và TypeScript, kiểm tra các câu trả lời, chuỗi gọi công cụ và thay đổi trạng thái bên ngoài thông qua pytest hoặc Vitest. Nó tuân theo quy trình ghi lại, phát lại nghiêm ngặt và cổng kiểm soát, trong đó phát lại chạy mã thực của agent dựa trên các phản hồi mô hình đã ghi lại mà không gọi mô hình trực tiếp cho các yêu cầu khớp. Các kiểm tra được chia thành sáu lớp, từ kiểm tra lược đồ, ràng buộc, dấu vết và nội dung miễn phí đến độ tương đồng embedding và LLM-as-judge, vốn phụ thuộc vào nhà cung cấp trả phí hoặc cục bộ.

Nguồn:Hacker News · AI · attest-framework.github.io