SemiAnalysis· Max Kan·· 12 天前AI 评分58
SemiAnalysis 发布 GDPx 基准,用于评估高价值领域的前沿智能体能力
GDPx: Measuring Frontier Model Capabilities Across the Most Valuable Domains
AI 导读
SemiAnalysis 发布了 GDPx,这是一个覆盖芯片设计、网络安全、生物学、金融、法律、量化交易、RSI、硬件设计、材料科学、对齐和软件工程的基准,由 14 个专业 RL 环境合作伙伴共同构建。即便是最好的模型也仅得分 12%,其中 Opus 5.5 在量化交易、硬件和芯片设计上胜出,Gemini 4 Carbon 在生物学和软件工程上领先,GPT-6 Astra 在 RSI 和材料科学上居首。每项任务都在逼真的模拟环境中运行,例如约 4,000 个文件的私募股权交易室或实时多服务网络靶场,这与 OpenAI 的 GDPval 不同——SemiAnalysis 认为后者把上下文喂到嘴边且缺乏环境。
来源:SemiAnalysis · newsletter.semianalysis.com