跳至正文
Import AI· Jack Clark·· 11 天前AI 評分42

Import AI 479:Spacewar、低延遲任務對比 LLM、Genie 4

Import AI 479: Spacewar; low-latency tasks versus LLMs; Genie 4

AI 導讀

Import AI 479 涵蓋 Realtime-Bench,這是一套包含 50 項任務的基準測試,由 UT Austin、Ohio State、UIUC、NVIDIA、Northwestern 與 Steadyworks 的研究人員打造,包含 30 項網頁任務與 20 項遊戲任務,用來測試前沿模型能否在即時壓力下行動。GPT-6 Astra(high)取得最高的實際耗時通過率 36%,而在暫停計時的執行中,高推理模型可達到約 70% 至 80%。本期亦涵蓋國防情報局的「Challenges to Security in Space」報告與 Genie 4。

來源:Import AI · importai.substack.com