跳至正文
Hacker News · AI·· 3 小時前AI 評分58

Bitdepth 測試五項例行代理工作:Claude Sonnet 5.5 花費 $258.53,開源模型 $11.04

Five agent chores: $258 on a top model, $11 on open models

AI 導讀

Bitdepth 在 Claude Sonnet 5.5、gpt-oss-120b 與 DeepSeek V4 Pro 上跑了五項例行代理工作,發現同樣一個月的工作量在 Claude Sonnet 5.5 上要價 $258.53,而用能讓每個答案都正確的最便宜配置只需 $11.04,降幅 95.7%。五項工作中有四項換用開源模型後沒有出現錯誤答案,而收件匣摘要則在兩個開源模型上都失敗,因此保留在 Claude Sonnet 5.5 上。該測試採用虛構的單次呼叫工作,答案由程式碼評分,作者也指出樣本量小,且真實代理會串接多次呼叫、歷史更長。

來源:Hacker News · AI · bitdepth.dev