跳至正文
Latent Space· Gabriele Beltramo·· 3 天前AI 評分69

NaiveAI 的 Naive-N0.5-Flash 宣稱每秒 2,100 個 token:它的程式碼能力如何?

NaiveAI Promises 2,100 Tokens per Second. How Well Does It Code?

AI 導讀

Latent Space 測試了 NaiveAI 的開放權重模型 Naive-N0.5-Flash,這是一個源自小米 MiMo-V2.5 的程式碼模型,搭配 NaiveRT 推論引擎,並與 DeepSeek V4.1 Flash 1017 及 GLM 5.3 Flash 對比。在作者的執行中,它峰值接近每秒 2,000 個 token,在思考密集的任務中維持約每秒 1,000 個 token,中位回應時間為 3.1 秒,而兩個對比模型分別為 5.3 秒和 10.1 秒。在困難的 HLE 問題上,開啟思考時它平均產生約 108,500 個完成 token,約為 GLM 5.3 Flash 的九倍、DeepSeek V4.1 Flash 1017 的 11 倍;作者指出樣本為每個難度級別 10 題,且未進行準確度評分。

來源:Latent Space · latent.space