ข้ามไปที่เนื้อหา
เฉพาะ งานวิจัย#ระบบนิเวศโอเพนซอร์ส
  1. Goodfire Research62

    Goodfire ศึกษาเซลล์ประสาทของ Qwen3.6-35B-A3B ในฐานะพื้นฐานที่ตีความได้

    Goodfire Research เผยแพร่งานศึกษาที่โต้แย้งว่าเซลล์ประสาท MLP แต่ละตัวใน Qwen3.6-35B-A3B สามารถตีความได้มากกว่าที่เคยคิด โดยอิงจากการทำให้เบาบาง เครื่องมือระบุที่มา และเอเจนต์วิจัย การตัดการทำงานของแอกทิเวชันเซลล์ประสาท MoE ที่อ่อนที่สุด 92.2% ต่อการส่งผ่านไปข้างหน้าหนึ่งครั้ง ทำให้ loss ของโมเดลภาษาสูงขึ้นเพียง 2.9% และ 69% ของขั้วเซลล์ประสาทมีโหมดเดียวที่รับผิดชอบต่อผลเชิงสาเหตุอย่างน้อย 90% คำอธิบายเซลล์ประสาทด้วยภาษาธรรมชาติทำให้โมเดลผู้ตัดสินสามารถทำนายการทำงานได้ด้วยความแม่นยำ 95% เทียบกับข้อความสุ่ม และฟื้นคืนความเสียหายจากการตัดการทำงานได้ 73% ผ่านการจำลอง

    ทำไมเรื่องนี้สำคัญ: งานศึกษาของ Goodfire เกี่ยวกับเซลล์ประสาทของ Qwen3.6-35B-A3B โต้แย้งว่าแอกทิเวชันที่แข็งแกร่งเพียงลำพังแบกการคำนวณส่วนใหญ่ของโมเดลไว้ พร้อมเสนอทางเลือกที่เป็นรูปธรรมต่อการตีความแบบ feature-dictionary

  1. Epoch AI · Gradient Updates82

    Epoch AI พบว่า GLM 5.3 สามารถเปลี่ยนแพตช์ Firefox ที่เผยแพร่แล้วให้กลายเป็น exploit ที่ใช้งานได้ก่อนผู้ใช้จะอัปเดต

    Epoch AI รายงานว่า GLM 5.3 โมเดลน้ำหนักเปิดที่ Z.ai เปิดตัวในเดือนสิงหาคม สามารถสร้าง exploit ที่ใช้งานได้โดยอัตโนมัติจากแพตช์ความปลอดภัยของ Mozilla ที่เผยแพร่แล้วแต่ยังไม่ได้ส่งถึงผู้ใช้ โดยเจาะระบบ Firefox ทั้งหกเวอร์ชันที่ออกระหว่างวันที่ 17 กันยายนถึง 26 ตุลาคม หลังใช้ต้นทุนการตั้งค่าและ API ประมาณ 100,000 ดอลลาร์ การโจมตีที่สำเร็จแต่ละครั้งมีต้นทุนการประมวลผลประมาณ 1,000 ดอลลาร์ และความพยายามที่เร็วที่สุดใช้เวลา 12 ชั่วโมงภายในงบประมาณ 48 ชั่วโมง การโจมตีลักษณะเดียวกันต่อ Chrome ไม่สำเร็จ และนักวิจัยระบุว่าไม่มีมาตรการป้องกันหรือการปฏิเสธจากผู้ให้บริการใดถูกกระตุ้น ช่องโหว่แยกอีกช่องที่พวกเขาค้นพบและยังไม่ได้เผยแพร่ได้รับการแพตช์ใน Firefox 159.0 ที่ออกเมื่อวันที่ 27 ตุลาคม

    ทำไมเรื่องนี้สำคัญ: การทดลองของ Epoch AI แสดงให้เห็นว่าโมเดลน้ำหนักเปิดสามารถนำแพตช์ Firefox ที่เผยแพร่แล้วแต่ยังไม่ถูกส่งมอบไปใช้เป็นอาวุธได้โดยอัตโนมัติ ซึ่งทำให้เห็นต้นทุนและเวลาที่เป็นรูปธรรมของช่องว่างการแพตช์

  1. Goodfire Research71

    Goodfire ฝึกและติดตั้งตัวตรวจสอบการใช้งานไซเบอร์ในทางที่ผิดแบบอิงโพรบบน Kimi K3 และ GLM 5.3

    3 และติดตั้งบนสแตกการอนุมานสำหรับใช้งานจริง โดยโพรบราคาถูกกรองเทิร์น และเฉพาะบทสนทนาที่น่าสงสัยเท่านั้นที่ส่งถึงผู้ตัดสิน LLM อัตราการขัดจังหวะเซสชันปกติ 5% ต้นทุน 65 ดอลลาร์ต่อล้านเทิร์นโดยไม่มีการให้เหตุผลของผู้ตัดสิน และ 185 ดอลลาร์เมื่อรวมการให้เหตุผล และไม่มีการสูญเสียทรูพุตที่วัดได้ภายใน SGLang

    ทำไมเรื่องนี้สำคัญ: Goodfire แสดงให้เห็นว่าลำดับชั้นโพรบบวกผู้ตัดสินสามารถตรวจสอบการใช้งานไซเบอร์ในทางที่ผิดของเอเจนต์ได้ในต้นทุนต่ำลงราว 50 เท่า โดยไม่มีการสูญเสียทรูพุตที่วัดได้ ซึ่งเป็นสูตรสำเร็จที่เป็นรูปธรรมสำหรับการให้บริการโมเดลเปิดอย่างปลอดภัย

อ่านครบทั้งหมดแล้ว