By 小墨
2026年3月31日
46
980
Harness不是加一行规则那么简单——深度解析三家科技巨头的AI行为工程实践
2026年,Harness(缰绳工程)已成为AI开发领域的热门话题。各种社群中充斥着“缰绳工程”、“马鞍比马重要”等概念,似乎只要在配置文件中加一行“不要做XX”的规则,就掌握了Harness的精髓。但当我深入阅读Mitchell Hashimoto、OpenAI和Anthropic的原文后,发现一个关键问题:大多数文章都在解释Harness是什么,却很少有人回答一个更实际的问题——读完之后,我到底该做什么?
第一步:编写行为规则
Harness不是一个东西,是一条路。这条路分为三步,而大多数人只走了第一步。
第二步:打造自动化工具
Terraform和Vagrant的创始人Mitchell Hashimoto今年2月发表文章,讲述自己从AI怀疑者变成“缰绳工程师”的过程。他给Harness Engineering下了一个精辟的定义:“Anytime you find an Agent makes a mistake, you take the time to engineer a solution such that the agent never makes that mistake again.”(每次AI犯错,你都花时间建一个机制,让它永远不再犯同类错误。) Harness的第一种形态是文字规则:写进AGENTS.md或CLAUDE.md的行为约束。以他开源项目Ghostty为例——那个文件里的每一行,都对应着一次AI犯过的错。AI编造了一个你没经历过的故事?加一条“禁止编造困境”。AI总是不该改的地方改代码?加一条“只改指定文件”。这就是最简单的起步方式。 但如果停在这一步,会遇到一个明显的天花板:规则是被动的——AI读到了才生效,读不到就没用。
Give Codex a map, not a 1,000-page instruction manual.
“OpenAI团队”第三步:分离评估
Harness的第二种形态是自动化工具——脚本、linter、测试。换句话说,不是靠“跟AI说一声”来约束它,而是造一个工具让机器自动检查。OpenAI的团队把这件事做到了极致。 他们做了一个激进的实验:3个工程师,5个月,整个项目不允许任何人手写代码。结果合并了1500个PR,产出约100万行代码,做出了一个有真实用户在用的产品。但最值得关注的不只是结果,而是过程。工程师Ryan Lopopolo在文章里写道:“Early progress was slower than we expected, not because Codex was incapable, but because the environment was underspecified.”(早期进展比预期慢,不是因为AI不行,而是因为环境缺乏定义——AI缺少完成任务所需的工具和结构。) 他们做了什么?给AI造工具。让AI能启动应用、截图、驱动浏览器来验证自己的工作;让AI能查询日志和监控指标来判断性能是否达标;让AI有一整套本地可观测性栈来调试问题。工程师的工作,从“写代码”变成了“让AI能验证自己的代
Anthropic的工程师Prithvi Rajasekaran发现了一个底层问题:让AI评估自己的产出,它永远会给自己打高分。“Tuning a standalone evaluator to be skeptical turns out to be far more tractable than making a generator critical of its own work.”(让一个独立的评估器变得苛刻,远比让生成器自我批评容易得多。)这是系统性的偏差。即使在有客观标准的任务上(比如代码能不能跑通),AI自我评估时依然倾向于给自己开绿灯。 Anthropic的解法借鉴了GAN(生成对抗网络)的思路:把生成和评估分开。一个AI负责做事(generator),另一个独立的AI负责打分(evaluator)。evaluator用Playwright实际操作产品——点击、截图、检查功能——然后给出评分和具体的改进意见。generator根据这些反馈迭代。 结果:同样的任务,加上evaluator之后,产出质量有明显提升。一个4分钟生成的网页和一个经过15轮评估迭代的网
如有侵权,请联系删除。
Related Articles
-
Sat May 30 2026【AI】Agent落地、千亿募资与算力军备:AI正在经历一场'去泡沫化'战争
进入 2026 年,AI 行业开始从能力竞赛转向商业化与可持续盈利的考量。技术厂商、资本方与政策制定者在算力、资金与合规上展开新一轮角力,推动市场加速整合与优胜劣汰。
-
Sat May 30 2026AI+介入机器人:'智能协同'定义介入诊疗新趋势
在重要学术会议与产业赛事中,国内首次介入机器人智能体研究项目启动,标志着介入诊疗领域向智能化、标准化方向迈进。基于真实世界临床数据的系统能够在感知、分析与决策上提供有力支持,显著提升手术效率与安全性。
-
Sat May 30 2026反超OpenAI!Anthropic登顶全球最贵AI公司
2026 年 5 月底,Anthropic 完成新一轮巨额融资并将投后估值推至行业前列,迅速改变了 AI 赛道的竞争格局。本轮融资后其估值数倍于数月前,收入与市场份额出现爆发式增长,吸引了大量企业级合
-
Sat May 30 2026从代码生成到智能体协同:源启双引擎重构企业AI落地新范式
在 2026 年智博会上,源启系列产品提出了将代码生成与智能体协同结合的双引擎战略,旨在解决企业在软件研发與 AI 应用落地过程中的工程化与安全可控问题,推动企业实现自动化与智能化转型。
-
Sat May 30 2026智王AI量化智能体,五月封神 :AGI在资本市场的初代力量
智王 AI 的量化 AGI 智能体在五月的实盘测试中展现出强劲的盈利能力和风险控制能力,引发资本市场对智能体在资产管理中可行性的高度关注。这一案例展示了 AI 在金融场景中从策略生成到执行闭环的能力。
-
Fri May 29 2026博泰车联:与英伟达举行战略合作签约仪式,双方围绕车载AI、自动驾驶、下一代计算平台及光通信等进行探讨
2026年5月29日,博泰车联在对外公告中披露,公司与英伟达在美方举行战略合作签约仪式并开展一系列技术交流。此次会谈围绕车载人工智能、自动驾驶、下一代计算平台以及车用光通信等前沿技术方向展开,双方就未
-
Fri May 29 20262026新政解读:智能体与AI终端的'双向奔赴',AIoT产业迎来三大价值重构
2026年5月,国家发布两份重要文件,分别从智能体规范应用与人工智能终端智能化分级两方面,为AI与终端协同发展提供顶层设计。文章从文件要点出发,解析智能体的定义、终端分级与AIoT在国家基础设施中的定
-
Fri May 29 2026芮勇主讲:AI智能体的最新进展、挑战和机会
在中山大学的一场学术与产业交汇的讲座中,芮勇系统回顾了AI智能体的技术演进、当前研究热点与产业化路径,强调了从模型到系统再到产品的协同发展。
-
Fri May 29 20262026全球AI算力报告及算力产业十大趋势重磅发布
在天津的世界智能产业博览会上,多家机构联合发布了《2026全球AI算力发展研究报告》,系统分析了全球算力供给、产业链变化及未来发展方向,为政策制定与产业部署提供数据支撑。
-
Fri May 29 2026AI Open Day兰州龙虾大会圆满举办,共绘西北数字经济新蓝图
由Aiker World 与兰州大学国家大学科技园等机构联合发起的AI Open Day在兰州成功举办,聚焦OpenClaw龙虾智能体的本地化部署、安全落地与零基础上手路径,吸引了政企、高校与开发者参
-
Fri May 29 2026谷歌AI垂直整合战略,全世界都在静静观察
谷歌在I/O 2026上展示了其更为激进的垂直整合路线:从自研芯片、基础模型到面向开发者与企业的智能体编排平台,形成一套闭环的AI能力交付体系。此次发布的Antigravity 2.0被强调为能够在短
-
Fri May 29 20262026全球AI与Agent的演进与落地
在一次聚焦人工智能的科创私董会上,行业专家回顾了AI与Agent的最新进展,探讨了从预测文本到预测世界状态的技术跃迁及其对产业的深远影响。
-
Fri May 29 2026Agent爆发周期,思格新能源画出了'AI+光储'时代的新坐标
在AI与能源深度融合的背景下,思格新能源于AI in All全球战略发布会上推出了行业首个全域AI智能体SigenAgent,覆盖从家庭到电网的多场景应用,标志着'AI+光储'时代的到来。
-
Fri May 29 2026AI编程Cognition融资超10亿美元,估值260亿美元,ARR 4.92亿美元
Cognition AI在最新融资中筹集超过10亿美元,估值达到260亿美元,彰显AI编程工具在提高工程效率与代码自动化方面的巨大市场潜力。
-
Fri May 29 2026AI推理服务商Fireworks AI拟定新一轮融资,估值150亿美元
Fireworks AI正推进新一轮融资,预计估值将达到150亿美元,公司专注于为企业提供高效的AI推理服务,协助客户运行训练好的模型以实现生产化应用。
-
Fri May 29 2026软银主导国产AI联盟又吸引15家公司投资
由软银牵头的日本国产人工智能基础模型开发计划迎来更多企业加入,旭化成、富士通、安川电机等表示出资意向,旨在提升日本在大模型与物理AI领域的自主能力。
-
Thu May 28 2026别在CVPR独自社恐了!来丹佛AI Talent Meetup,只聊你听得懂的技术与理想
CVPR 2026期间举办的AI Talent Meetup旨在为与会者提供更轻松高效的交流场景,通过主题演讲、圆桌讨论与社交晚宴,促进学术成果与产业需求的对接。
-
Thu May 28 2026临床试验革命!神经AI平台横空出世,FDA实时审查新政迎来首个落地者
Kordata Dynamics推出针对神经数据的AI驱动平台,通过实时采集与深度解析,提高临床试验的数据质量与响应速度,助力精准医学研究。
