ข้ามไปที่เนื้อหา
Latent Space· Gabriele Beltramo·· 3 วันที่แล้วคะแนน AI69

NaiveAI 的 Naive-N0.5-Flash 声称每秒 2,100 个 token:它的编码能力如何?

NaiveAI Promises 2,100 Tokens per Second. How Well Does It Code?

สรุปโดย AI

Latent Space 测试了 NaiveAI 的开源权重模型 Naive-N0.5-Flash,这是一个源自小米 MiMo-V2.5 的编码模型,搭配 NaiveRT 推理引擎,并与 DeepSeek V4.1 Flash 1017 和 GLM 5.3 Flash 进行了对比。在作者的运行中,其峰值接近每秒 2,000 个 token,在思考密集型任务中持续约每秒 1,000 个 token,中位响应时间为 3.1 秒,而两个对比模型分别为 5.3 秒和 10.1 秒。在困难的 HLE 问题上,开启思考时平均完成约 108,500 个 token,约为 GLM 5.3 Flash 的九倍和 DeepSeek V4.1 Flash 1017 的 11 倍,作者指出每个难度级别的样本为 10 个问题,且未进行准确性评分。

แหล่งข่าว:Latent Space · latent.space