OpenAI เสนอตัวชี้วัดแบบ pair-matched และ post-control เพื่อขยายความสามารถในการตรวจสอบของ g-mean²

บล็อก Alignment ของ OpenAI เพิ่มตัวชี้วัดสองตัวใน g-mean² ซึ่งเป็นตัววัดระดับชุดข้อมูลของความสามารถในการแยกแยะของมอนิเตอร์ ตัวชี้วัดแบบ pair-matched เปรียบเทียบโมเดลเฉพาะบนอินสแตนซ์งานที่รองรับการเปรียบเทียบเชิงบวก เชิงลบ หรือการเปรียบเทียบที่ใช้การแทรกแซงได้อย่างถูกต้อง ส่วนตัวชี้วัดการผสานรวมหลังการควบคุมจำลองการปฏิเสธที่ควบคุมด้วยมอนิเตอร์ และประเมินความน่าจะเป็นที่ระบบที่นำไปใช้งานยังคงส่งออกผลลัพธ์ที่ไม่ดี บทความยังได้อนุมานขอบเขตล่างแบบ pessimistic สำหรับการประเมินการแทรกแซง