ข้ามไปที่เนื้อหา
เหตุการณ์ร้อนแรงกำลังพัฒนา

Solibra's Sovereign router learns model choice without labels

เนื้อหานี้ยังไม่มีในภาษาของคุณ จึงแสดงเป็นEnglish

1 รายงาน1 แหล่งข่าวที่รายงานอัปเดต 12 ชม. ที่แล้ว

เริ่มตรงนี้

ไดเจสต์ AI

Solibra built Sovereign, a router that sits between an application and model providers and learns, per request, which model to use by grading its own finished work — with no answer key and no prior knowledge of the models. It speaks the same APIs as the providers, so adopting it is a configuration change rather than a rewrite, though each request adds a routing decision of about half a second. Across eight public benchmarks against Claude Opus 5.5 and Claude Haiku 5.5, Solibra reports Sovereign spent 43% to 81% less than Opus on every benchmark, matched or beat Opus accuracy on USACO, LiveCodeBench and SATBench, and was more accurate than Haiku everywhere, by up to 55 points on USACO. On USACO its accuracy rose from 88% over the first 25 tasks to 97.7% by the end, passing Opus around task 150, and its grader agreed with the hidden answer key 95% of the time. These figures come from single runs, with cost measured as model spend at list prices, Solibra says.

สร้างจากรายงาน · อัปเดต 11 ชม. ที่แล้ว

ไทม์ไลน์รายงาน

ไล่ตามรายงานเพื่อดูเหตุการณ์นี้จากหลายด้าน

13 พฤศจิกายน
  1. Hacker News · AI
    Sovereign: เราเตอร์ที่เรียนรู้ว่าจะเชื่อถือโมเดลใดโดยไม่ต้องมีป้ายกำกับ

    Solibra สร้าง Sovereign เราเตอร์ที่อยู่ระหว่างแอปพลิเคชันและผู้ให้บริการโมเดล และเรียนรู้การเลือกโมเดลแบบรายคำขอจากเกรดของงานที่เสร็จแล้วของตัวเอง โดยไม่มีเฉลยและไม่มีความรู้เดิมเกี่ยวกับโมเดล จากการทดสอบบนเกณฑ์มาตรฐานสาธารณะแปดชุดกับ Claude Opus 5.5 และ Claude Haiku 5.5 Sovereign ใช้จ่ายน้อยกว่า Opus 43% ถึง 81% ในทุกเกณฑ์มาตรฐาน มีความแม่นยำเท่ากับหรือเหนือกว่า Opus บน USACO, LiveCodeBench และ SATBench และแม่นยำกว่า Haiku ในทุกที่ โดยมากถึง 55 คะแนนบน USACO บน USACO ความแม่นยำเพิ่มจาก 88% ใน 25 งานแรกเป็น 97.7% เมื่อสิ้นสุด แซง Opus ราวงานที่ 150 และตัวให้เกรดของมันตรงกับเฉลยที่ซ่อนอยู่ 95% ของเวลา

ความร้อนแรงของเหตุการณ์นี้

ยังมีการเฝ้าดูต่อเนื่องไม่พอจะวาดแนวโน้ม