Hacker News (AI)scosman
开源
Show HN: Harness Tuner – eval-driven tuning loop for agent tools, prompts, model
AI 摘要
开发者 scosman 在 Hacker News 发布开源工具 Harness Tuner，用于对 AI 智能体的工具、提示词、技能、模型及参数进行评测驱动的自动调优。官方称在一个含 200 多个工具的多轮生产智能体上，调优后在更小模型上实现失败率降低 2.5 倍、成本降至六分之一、延迟减半，结果在留出数据上测得。工具基于 Kiln 应用运行，采用训练/验证/测试集隔离机制，MIT 许可，免费开源但需自付模型 API 调用费用。
简评
多数团队只优化提示词，而智能体出错往往源于工具接口和流程设计。这个工具把调优范围扩大到整个「外壳」，让便宜的小模型也能胜任复杂任务，意味着企业部署智能体的成本和门槛可能明显下降，普通用户会更快用上更便宜、更稳定的 AI 助手。
- 智能体
- 自动调优
- 评测
- 开源工具
本站只提供模型生成的摘要，不转载原文。 完整内容请前往原始出处阅读。
阅读原文 ↗