Hacker News · AI·· 1 ชม. ที่แล้วคะแนน AI71
Kiln-AI เปิดตัว Harness Tuner ลูปปรับแต่งที่ขับเคลื่อนด้วย eval สำหรับเครื่องมือ พรอมต์ และโมเดลของเอเจนต์
Show HN: Harness Tuner – eval-driven tuning loop for agent tools, prompts, model
สรุปโดย AI
Kiln-AI เปิดตัว Harness Tuner ซึ่งเป็น CLI โอเพนซอร์สที่ปรับแต่งเครื่องมือ พรอมต์ สกิล โมเดล และการตั้งค่าของเอเจนต์โดยอิงกับ eval ที่มีอยู่แล้ว สำหรับเอเจนต์แบบหลายรอบในสภาพแวดล้อมจริงหนึ่งตัวที่มีเครื่องมือกว่า 200 รายการ ทีมรายงานว่าบนข้อมูล held-out ด้วยโมเดลที่เล็กกว่า พบความล้มเหลวลลดลง 2.5 เท่า ต้นทุนต่ำลง 6 เท่า และความหน่วงต่ำลง 2 เท่า ใช้งานได้กับการสมัครสมาชิก Claude Code, Codex หรือ OpenCode บังคับใช้การแบ่ง train, val และ test ในโค้ด และทำงานร่วมกับแอป Kiln ฟรีสำหรับการติดตามการทดลอง
แหล่งข่าว:Hacker News · AI · github.com