By 小墨
2026年3月31日
46
980
Harness不是加一行规则那么简单——深度解析三家科技巨头的AI行为工程实践
2026年,Harness(缰绳工程)已成为AI开发领域的热门话题。各种社群中充斥着“缰绳工程”、“马鞍比马重要”等概念,似乎只要在配置文件中加一行“不要做XX”的规则,就掌握了Harness的精髓。但当我深入阅读Mitchell Hashimoto、OpenAI和Anthropic的原文后,发现一个关键问题:大多数文章都在解释Harness是什么,却很少有人回答一个更实际的问题——读完之后,我到底该做什么?
第一步:编写行为规则
Harness不是一个东西,是一条路。这条路分为三步,而大多数人只走了第一步。
第二步:打造自动化工具
Terraform和Vagrant的创始人Mitchell Hashimoto今年2月发表文章,讲述自己从AI怀疑者变成“缰绳工程师”的过程。他给Harness Engineering下了一个精辟的定义:“Anytime you find an Agent makes a mistake, you take the time to engineer a solution such that the agent never makes that mistake again.”(每次AI犯错,你都花时间建一个机制,让它永远不再犯同类错误。) Harness的第一种形态是文字规则:写进AGENTS.md或CLAUDE.md的行为约束。以他开源项目Ghostty为例——那个文件里的每一行,都对应着一次AI犯过的错。AI编造了一个你没经历过的故事?加一条“禁止编造困境”。AI总是不该改的地方改代码?加一条“只改指定文件”。这就是最简单的起步方式。 但如果停在这一步,会遇到一个明显的天花板:规则是被动的——AI读到了才生效,读不到就没用。
Give Codex a map, not a 1,000-page instruction manual.
“OpenAI团队”第三步:分离评估
Harness的第二种形态是自动化工具——脚本、linter、测试。换句话说,不是靠“跟AI说一声”来约束它,而是造一个工具让机器自动检查。OpenAI的团队把这件事做到了极致。 他们做了一个激进的实验:3个工程师,5个月,整个项目不允许任何人手写代码。结果合并了1500个PR,产出约100万行代码,做出了一个有真实用户在用的产品。但最值得关注的不只是结果,而是过程。工程师Ryan Lopopolo在文章里写道:“Early progress was slower than we expected, not because Codex was incapable, but because the environment was underspecified.”(早期进展比预期慢,不是因为AI不行,而是因为环境缺乏定义——AI缺少完成任务所需的工具和结构。) 他们做了什么?给AI造工具。让AI能启动应用、截图、驱动浏览器来验证自己的工作;让AI能查询日志和监控指标来判断性能是否达标;让AI有一整套本地可观测性栈来调试问题。工程师的工作,从“写代码”变成了“让AI能验证自己的代
Anthropic的工程师Prithvi Rajasekaran发现了一个底层问题:让AI评估自己的产出,它永远会给自己打高分。“Tuning a standalone evaluator to be skeptical turns out to be far more tractable than making a generator critical of its own work.”(让一个独立的评估器变得苛刻,远比让生成器自我批评容易得多。)这是系统性的偏差。即使在有客观标准的任务上(比如代码能不能跑通),AI自我评估时依然倾向于给自己开绿灯。 Anthropic的解法借鉴了GAN(生成对抗网络)的思路:把生成和评估分开。一个AI负责做事(generator),另一个独立的AI负责打分(evaluator)。evaluator用Playwright实际操作产品——点击、截图、检查功能——然后给出评分和具体的改进意见。generator根据这些反馈迭代。 结果:同样的任务,加上evaluator之后,产出质量有明显提升。一个4分钟生成的网页和一个经过15轮评估迭代的网
如有侵权,请联系删除。
Related Articles
-
Fri Jul 24 2026原生工具调用、多模态Agent与开源模型:Foundation Model 2.0论坛直面Agent时代的模型演进
Foundation Model 2.0论坛聚焦在Agent时代模型的演进,讨论如何通过原生工具调用与多模态融合提升Agent的执行能力与适应性,并探讨端侧小模型的可行路径。
-
Mon Jul 06 2026示例域名与文档用途说明
example.com 是一个专门为文档示例而保留的顶级域名,供教程、示范和测试文档使用,不需要额外许可即可引用。
-
Mon Jul 06 2026未知文章标题
未提供文章内容或可抓取的 URL,因此无法提取实际引言或第一段。此处为占位文本,提示用户补充源内容以生成完整的 Frontmatter。
-
Sun Jul 05 2026未知来源文章
未提供可爬取的文章 URL 或内容,系统无法获取实际正文。此处为占位引言,说明输入数据缺失并提供元数据占位以便后续替换。
-
Sun Jul 05 2026无法生成:缺少文章源数据
未提供可用于爬取的文章 URL 或 JSON 数据,因此无法依据页面内容生成完整的 Frontmatter。请提供包含文章信息的 JSON 数组或一组有效 URL。
-
Sun Jul 05 2026未提供的文章标题
未提供文章内容。请提交文章的 URL 或粘贴全文,以便根据内容生成前言与分段信息。
-
Sat Jul 04 2026未提供文章链接或内容
未提供文章内容或链接,无法提取引言或第一段。请提交包含文章 URL 的 JSON 数组或直接提供文章文本。
-
Sat Jul 04 2026未提供文章信息
未收到文章内容或可爬取的 URL,因此无法生成文章段落。请提交包含文章 URL 的 JSON 数组,格式示例:[ {"url": "https://example.com/article1"}, {"
-
Sat Jul 04 2026未提供文章来源
未收到可用的文章内容或链接,因此无法提取段落。请提交包含多篇文章信息的 JSON 数组或每篇文章的 URL,以便爬取并生成完整的 postDetails 内容。
-
Fri Jul 03 2026示例文章标题(缺少来源)
未收到具体文章 URL 或内容,因此无法从原文中提取引言。此处为占位引言,说明系统需要源页面以抓取实际内容并生成结构化的 Astro Markdown YAML Frontmatter。
-
Thu Jul 02 2026聚焦自进化、Harness等Agent最火的九个方向,年度AI智能体大会7月开幕
中国AI智能体大会(AgenticAICon 2026)将于7月在杭州举办,围绕智能体领域的前沿技术展开,旨在推动研究与产业深度融合,探寻智能体从对话式工具向主动执行系统转型的路线图。
-
Wed Jul 01 2026探索 Astro.js 与 YAML:构建可维护的内容管理工作流
在现代静态站点与内容驱动的项目中,统一且可验证的元数据格式对内容维护和自动化发布至关重要。Astro.js 提供了灵活的内容渲染能力,而采用严格的 YAML Frontmatter 模板,可以让团队共
-
Tue Jun 30 2026首届光谷智能体经济大会举行 光谷从“AI试验场”迈向“AI价值场”
2026年6月29日,武汉东湖新技术开发区举办首届光谷智能体经济大会,正式发布“光谷智能体引力计划”。大会提出未来三年将在政策、算力、基金等方面投入超10亿元,旨在打造以智能体为核心的创新生态,培养智
-
Tue Jun 30 2026中国广电联合会《全国交通传媒行业AI应用调研报告》正式发布
中国广电联合会交通宣传委员会在内蒙古发布了《2026全国交通传媒行业AI应用调研报告》,基于对145家交通传媒机构的调查,总结了行业在AI应用上的现状与发展路径。
-
Tue Jun 30 2026韩国万亿'芯'基建拆解:存储行业能否建成AI时代'油田'
韩国近期公布了总投资逾1800万亿韩元的三大超级AI基建项目,涵盖半导体制造、先进封装与AI数据中心,目标是借助国家级投入与龙头企业布局,打造面向AI时代的关键产业能力。
-
Mon Jun 29 2026能量岛企业家俱乐部6.28 芯谷 AI 沙龙圆满落幕
6月28日,能量岛企业家俱乐部在苏州芯谷产业园举办AI智能体应用沙龙,活动以实战分享和产业交流为核心,吸引了本地创业者、企业高管与科研人员参与。
-
Mon Jun 29 20262026.06.20:AI 泡沫退潮,Agent 与数据架构重构产业底层
InfoQ 的周度深度分析指出,生成式 AI 已走完狂热期,行业正进入理性调整阶段,专家纷纷回归技术和落地路径的讨论。
-
Mon Jun 29 2026OKF——要做AI时代的'知识图谱通用语'—继MCP之后,Google又扔出一张Agent王牌
2026年6月,谷歌云发布了Open Knowledge Format(OKF)v0.1,这是一套以带YAML前置元数据的Markdown文件夹为单位来表示知识的开放规范,旨在解决企业知识分散的问题。
