ข้ามไปที่เนื้อหา
เหตุการณ์ร้อนแรงกำลังพัฒนา

agentest โอเพนซอร์สให้คะแนน AI agent จาก trace ของ OpenTelemetry แบบออฟไลน์

1 รายงาน1 แหล่งข่าวที่รายงานอัปเดต 5 ชม. ที่แล้ว

เริ่มตรงนี้

ไดเจสต์ AI

AiEnsured CTO Srinivas Padmanabhuni เปิดตัว agentest เครื่องมือโอเพนซอร์สที่ประเมิน AI agent โดยอ่าน trace ของ OpenTelemetry GenAI ที่มีอยู่แล้ว แทนการรันใหม่ โดยใช้การทดสอบ 165 รายการกับสิ่งที่ agent ทำจริง และตั้งธงพฤติกรรมต่างๆ เช่น การอ้างความสำเร็จที่ไม่ได้มา การลงมือก่อนตรวจสอบ การทำตามคำสั่งที่ซ่อนอยู่ การเรียกใช้เครื่องมือที่ไม่อนุญาต หรือการรั่วไหลข้อมูลส่วนบุคคล เครื่องมือนี้ทำงานแบบออฟไลน์โดยไม่ต้องใช้ API key เครือข่าย หรือ LLM judge ดังนั้น trace เดียวกันจะให้ผลตัดสินผ่าน ไม่ผ่าน หรือ n/a เหมือนเดิมเสมอ ตามประกาศของรีลีส โดยรองรับเฟรมเวิร์กใดก็ตามที่บันทึก trace ของ OpenTelemetry GenAI และมีตัวนำเข้าบันทึกเนทีฟสำหรับ LangGraph, OpenAI Agents SDK, AutoGen, smolagents และ n8n ติดตั้งได้ผ่าน pip install agentest-ai (เวอร์ชัน 3.5.0) และมี CI gate แบบ --strict พร้อมเอาต์พุตเป็น JUnit, SARIF, JSON, HTML, Markdown และ CSV มีรายงานในเบราว์เซอร์และเดโม Colab ให้ใช้ได้โดยไม่ต้องติดตั้ง

สร้างจากรายงาน · อัปเดต 5 ชม. ที่แล้ว

ไทม์ไลน์รายงาน

ไล่ตามรายงานเพื่อดูเหตุการณ์นี้จากหลายด้าน

19 พฤศจิกายน
  1. Hacker News · AI
    Agentest เปิดตัวในฐานะชุดทดสอบออฟไลน์ที่ให้คะแนน AI agent จาก OpenTelemetry trace

    Srinivas Padmanabhuni CTO ของ AiEnsured เปิดตัว agentest เครื่องมือโอเพนซอร์สที่อ่าน OpenTelemetry GenAI trace ที่มีอยู่ของ agent แล้วรันการทดสอบ 165 รายการกับสิ่งที่ agent ทำจริง เช่น อ้างความสำเร็จที่ไม่ได้มา ลงมือก่อนตรวจสอบ ทำตามคำสั่งที่ซ่อนอยู่ เรียกใช้เครื่องมือที่ไม่อนุญาต หรือรั่วข้อมูลส่วนบุคคล ทำงานออฟไลน์โดยไม่ต้องใช้ API key เครือข่าย หรือ LLM judge ดังนั้น trace เดียวกันจึงให้ผลตัดสินผ่าน ไม่ผ่าน หรือ n/a เหมือนเดิมเสมอ และมีตัวนำเข้าบันทึกแบบเนทีฟสำหรับ LangGraph, OpenAI Agents SDK, AutoGen, smolagents และ n8n ติดตั้งได้ผ่าน pip install agentest-ai (เวอร์ชัน 3.5.0) มี CI gate แบบ --strict พร้อมเอาต์พุต JUnit, SARIF, JSON, HTML, Markdown และ CSV รวมถึงรายงานในเบราว์เซอร์แบบไม่ต้องติดตั้งและเดโม Colab

ความร้อนแรงของเหตุการณ์นี้

ช่วงปัจจุบันที่เทียบได้
9
จุดสูงสุดในช่วงที่เทียบได้
1019 พฤศจิกายน 23:00
การเปลี่ยนแปลงใน 24 ชั่วโมง
–

แนวโน้มนี้เปรียบเทียบผู้ร่วมพูดถึงชุดเดียวกันในช่วงเวลาที่เฝ้าดูต่อเนื่อง ช่วงจึงอาจแคบกว่าคะแนนความร้อนปัจจุบัน วางเมาส์หรือแตะกราฟเพื่อดูความร้อนรายชั่วโมง กดลูกศรเพื่อเลื่อนดู