Hacker News · AI·· 1 小时前AI 评分71
Kiln-AI 发布 Harness Tuner,一个面向 agent 工具、提示词和模型的评估驱动调优循环
Show HN: Harness Tuner – eval-driven tuning loop for agent tools, prompts, model
AI 导读
Kiln-AI 发布了 Harness Tuner,这是一个开源 CLI,可基于你已有的评估对 agent 的工具、提示词、技能、模型和设置进行调优。在一个拥有 200 多个工具的生产级多轮 agent 上,团队报告称,在留出数据上使用更小的模型,失败率降低 2.5 倍、成本降低 6 倍、延迟降低 2 倍。它可运行在 Claude Code、Codex 或 OpenCode 订阅上,在代码中强制保持训练、验证和测试划分,并与免费的 Kiln 应用配合进行实验跟踪。
来源:Hacker News · AI · github.com