The Decoder· Tomislav Bezmalinović·· 4 ชม. ที่แล้วคะแนน AI71
Runway เปิดตัวโมเดลควบคุมหุ่นยนต์ Praxis-1 แบบโอเพนซอร์ส
Runway's open-source Praxis-1 turns video AI into a robot controller
สรุปโดย AI
Runway ได้เปิดตัว Praxis-1 โมเดลควบคุมหุ่นยนต์ที่สร้างขึ้นจากการพรีเทรนวิดีโอ โดยเปิดเผยน้ำหนักโมเดลและซอร์สโค้ดภายใต้สัญญาอนุญาต Apache 2.0 โมเดลนี้รับภาพจากกล้อง คำสั่งข้อความ และข้อมูลตำแหน่งของหุ่นยนต์ คาดการณ์ว่าฉากจะเปลี่ยนแปลงอย่างไรและคำนวณการเคลื่อนไหวของหุ่นยนต์ที่สอดคล้องกัน และทำคะแนนอัตราความสำเร็จได้ 46.2 เปอร์เซ็นต์บนลีดเดอร์บอร์ด RoboLab-120 ของ Nvidia ซึ่งนำหน้า FLUX 3 Action ที่ 42.9 เปอร์เซ็นต์ Runway ทำการทดสอบทั้งหมดด้วยตนเองและผลลัพธ์ยังไม่ได้รับการตรวจสอบอย่างอิสระ โมเดลฐานต้องใช้ GPU ขนาด 80 GB และต้องฝึกเพิ่มเติมก่อนจะใช้งานกับระบบหุ่นยนต์ใหม่ได้
แหล่งข่าว:The Decoder · the-decoder.com