Hacker News · AI·· 11 ชม. ที่แล้วคะแนน AI58
Sovereign: เราเตอร์ที่เรียนรู้ว่าจะเชื่อถือโมเดลใดโดยไม่ต้องมีป้ายกำกับ
Adaptive Routing: Learning which model to trust
สรุปโดย AI
Solibra สร้าง Sovereign เราเตอร์ที่อยู่ระหว่างแอปพลิเคชันและผู้ให้บริการโมเดล และเรียนรู้การเลือกโมเดลแบบรายคำขอจากเกรดของงานที่เสร็จแล้วของตัวเอง โดยไม่มีเฉลยและไม่มีความรู้เดิมเกี่ยวกับโมเดล จากการทดสอบบนเกณฑ์มาตรฐานสาธารณะแปดชุดกับ Claude Opus 5.5 และ Claude Haiku 5.5 Sovereign ใช้จ่ายน้อยกว่า Opus 43% ถึง 81% ในทุกเกณฑ์มาตรฐาน มีความแม่นยำเท่ากับหรือเหนือกว่า Opus บน USACO, LiveCodeBench และ SATBench และแม่นยำกว่า Haiku ในทุกที่ โดยมากถึง 55 คะแนนบน USACO บน USACO ความแม่นยำเพิ่มจาก 88% ใน 25 งานแรกเป็น 97.7% เมื่อสิ้นสุด แซง Opus ราวงานที่ 150 และตัวให้เกรดของมันตรงกับเฉลยที่ซ่อนอยู่ 95% ของเวลา
แหล่งข่าว:Hacker News · AI · sov.solibra.ai