By 积墨AI
2026年6月2日
47
389
从思考到行动:智能体时代的可信 AI
清华大学发起的专题报告深入探讨智能体时代的可信AI问题,研究者从模型能力演进路径出发,审视在模型具备推理与行动能力后如何保证其行为的可靠性与可验证性。
可信性的核心挑战
报告指出,智能体从单纯回复到能够推理并执行工具链任务,带来了新的风险——包括错误传播、不可解释决策以及自动化执行的连锁效应。评估方法需要覆盖上下文理解、推理过程透明性与结果验证。
研究方法与实验设计
演讲者介绍了基于推理轨迹和可证伪性测试的评估框架,强调通过构造高风险任务与工具交互场景来检验模型的可靠性,并提出结合形式验证与审计日志的治理手段。
当模型连接工具与现实操作环境时,评估其上下文理解与决策验证能力比以往任何时候都重要。
“小墨”从研究到产业实践
将可信性研究成果转化为可部署的实践,需要学术与产业的协作。报告建议建立行业测试基线、共享评估数据集并推动标准制定,以降低智能体在关键领域应用的系统性风险。
未来方向
面向未来,可信智能体研究将更多关注模型在连续决策、长期目标与人机协同场景下的安全性与可解释性,同时探索法律与伦理层面的约束机制,以保障技术落地的可控性。
如有侵权,请联系删除。
Related Articles
-
Sat Jun 13 2026AI驱动企业创新,用友HERO AI训练营(雅加达站)圆满落幕
2026年6月11日,用友在雅加达举办的HERO AI训练营成功吸引了来自制造、零售与服务业的印尼企业管理者,聚焦企业AI落地实践与智能体应用场景探索。
-
Sat Jun 13 2026给AI装上'仪表盘'、国家数据局连出重拳:今天数据与科技政策密集发布
2026年6月13日,监管与数据主管部门密集发布多项政策文件,包括人工智能计量体系和行业高质量数据集建设方案,旨在夯实AI发展所需的数据与测评基础。
-
Sat Jun 13 2026给AI装上“仪表盘”、国家数据局连出重拳:今天数据与科技政策密集发布
2026年6月13日,市场监管总局、国家发改委与国家数据局等多部门密集发布关于AI计量与数据集建设的政策文件,旨在为AI发展建立制度化支撑。
-
Sat Jun 13 2026200+AI专家集结北京,共议世界模型、智能体、具身智能等话题
智源大会在北京中关村国际创新中心召开,吸引200余位国内外顶尖学者、产业领袖和青年科研人才,围绕世界模型、智能体与具身智能等主题展开深入交流。
-
Sat Jun 13 20262026产业园区未来大会暨AI园区智能体发布会成功举办!
2026年6月13日,在上海举办的产业园区未来大会暨AI园区智能体发布会,围绕产业园区高质量发展与AI生态服务资源共建展开,吸引了来自政府、产业投资开发商和园区运营商等多方代表参与。
-
Sat Jun 13 2026给AI装上'仪表盘'、国家数据局连出重拳:今天数据与科技政策密集发布
2026年6月13日,多个监管与政策部门发布关于人工智能计量与行业数据集建设的关键文件,标志着国家层面在AI能力测量、数据质量与治理方面进入快速部署阶段。
-
Sat Jun 13 2026200+AI专家集结北京,共议世界模型、智能体、具身智能等话题,这届智源大会释放什么信号?
2026年6月12-13日,智源大会在北京中关村举办,吸引了200余位国内外顶尖学者、产业领袖与青年科研人才。会议围绕人工智能前沿议题展开,讨论从理论模型到系统化落地的路径。
-
Fri Jun 12 2026ConnectNow重磅发布「超级智能体」Supra AI Agent:企业AI正式迈入'目标驱动'时代
ConnectNow在香港正式发布其新一代企业级智能体产品Supra AI Agent,强调从指令响应向目标驱动和自动交付的能力跃迁,面向复杂业务场景提供端到端解决方案。
-
Fri Jun 12 2026融资813亿,估值3000亿,这家AI公司创办仅一年
Prometheus在短短一年内完成巨额融资,宣称将用AI重塑复杂工业产品的设计与开发流程,目标是在飞行器、医疗设备等领域实现显著的效率提升与成本下降。
-
Fri Jun 12 2026红杉领投种子轮融资,AI企业法务初创Sandstone又完成3000万美元A轮融资
AI法务初创Sandstone在短时间内完成新一轮融资,显示出资本对法务领域AI化的浓厚兴趣。公司通过模型与流程结合,为中小企业提供日常法务自动化解决方案。
-
Fri Jun 12 2026中国信通院发布2026年上半年可信AI智能体评估结果,新一批评估正式启动!
在6月9日的智能体高质量发展研讨会上,中国信息通信研究院发布了2026年上半年可信AI智能体评估结果,并介绍了评估体系的升级方向,强调从能力评估向全过程治理与业务价值的延展。
-
Fri Jun 12 2026中国信通院发布2026年上半年可信AI智能体评估结果,新一批评估正式启动!
中国信息通信研究院公布2026年上半年可信AI智能体评估结果,评估体系升级为2.0,评估范围从单点能力扩展至智能体构建、运行和运营的全流程能力。
-
Fri Jun 12 2026融资813亿,估值3000亿,这家AI公司创办仅一年
近日,一家由科技界重要人物秘密创立的AI公司完成了规模巨大的B轮融资,成为2026年迄今为止最引人注目的融资事件之一。公司专注将AI能力工程化,赋能复杂工业产品的设计与开发。
-
Fri Jun 12 2026AI生态之战打响:微信做入口,腾讯来托底
本文从微信的用户规模与生态能力切入,分析其作为AI入口的天然优势,及腾讯如何通过开放接入和生态联动,打造面向服务商与开发者的智能体接入体系。
-
Fri Jun 12 2026谷歌 847 亿融资释放信号,AI 进入回本大考
本文围绕Alphabet筹资847.5亿美元事件展开,分析该轮融资对AI产业资本逻辑与估值体系的深远影响,强调大规模投入对行业分化与资源配置的推动作用。
-
Fri Jun 12 20262026智源大会:一场技术硬核的AI年度盛会
第八届北京智源大会于6月12日召开,成为本年度人工智能领域的重要技术盛会,吸引了国内外顶尖学者和企业高管参会。大会围绕世界模型、通用智能体和具身智能三大方向展开讨论,展示了多项前沿研究与工程示范。
-
Fri Jun 12 2026ConnectNow重磅发布「超级智能体」Supra AI Agent:企业AI正式迈入“目标驱动”时代
2026年6月9日,ConnectNow在香港发布了新一代企业级智能体Supra AI Agent,强调从被动响应到主动目标驱动的能力跃迁。
-
Fri Jun 12 2026明天见!AI焕新·智能相伴——PKPM Agent 2.0暨工程智能体"十五五"发展研讨会(北京站)
PKPM Agent 2.0在北京站研讨会亮相,会议围绕工程智能体在复杂结构分析、智能审查与城市更新中的实践展开讨论,强调智能体在工程设计与建造中的助力作用。
