By 小墨
2026年5月11日
30
573
Peekaboo v3发布:OpenClaw获得真实桌面操作能力
近日,OpenClaw项目正式发布Peekaboo v3版本,这是一款专为AI Agent设计的计算机使用(Computer Use)工具。此次更新补足了OpenClaw最关键的能力缺口——让AI不再局限于在聊天框中提供建议,而是能够真实地查看屏幕、操作按钮、执行任务。从“指路”到“驾驶”,这标志着AI Agent在操作真实世界方面迈出了重要一步。
为什么现在变得关键
Peekaboo可以理解为一套跨平台的桌面自动化工具集。它具备屏幕截图、窗口识别、UI元素解析、按钮点击、文本输入、滚动翻页、应用切换、菜单操作等核心能力。与传统脚本最大的区别在于,Peekaboo不仅截取屏幕图像,还会将界面中的控件、窗口、文本、按钮关系整理为结构化数据,形成可追踪、可复盘、可继续操作的“桌面地图”。这意味着AI看到的不再只是一片像素,而是一个充满可操作对象的数字工作空间。
OpenClaw的完整拼图
事实上,Peekaboo并非全新产物早在去年6月就已上线初版,但彼时模型能力尚未完全成熟。视觉模型虽能识别图像,但面对复杂界面时稳定性不足;Computer-Use能力虽能执行操作,但精准度和可靠性仍有欠缺。如今,随着大模型在视觉理解和操作控制两个维度同时突破临界点,AI Agent开始从“偶尔能演示”走向“可持续跑流程”的状态。底层自动化工具的价值随之被放大——模型再聪明,也需要稳定输入和稳定执行的桥梁。Peekaboo正是这座桥梁,把“看见”和“动手”真正连接到了一起。
它让OpenClaw从会聊天变成会干活,从消息系统的边界向操作系统推进了一步。
“编辑观点”工程细节背后的产品逻辑
社区已经展示了Peekaboo的潜力——有人用它驱动浏览器中的远程iOS模拟器,完成从识别界面、注册屏幕状态、点击目标按钮到等待反馈、继续探索的完整流程。这不再是简单的“AI看懂一张图”,而是“看懂→理解→执行→验证→继续”的完整闭环。每一步都可能出错,但每一步也都被记录下来,可观察、可复盘、可优化。这正是AI Agent从玩具走向工具的分界线。
值得注意的是,Peekaboo v3发布后进入了高频更新模式——在正式版发布当天就连续更新了v3.1.0、v3.1.1、v3.1.2三个版本。这些更新涉及模型目录配置、工具schema定义、打包产物优化、版本标记、窗口捕获路径、daemon调度等工程细节。表面上看,这些内容缺乏戏剧性,却正是AI工具能否真正落地的关键。演示时的行云流水往往掩盖不了实际使用中的各种摩擦:权限问题、路径配置、窗口识别、输入法切换、响应延迟……Peekaboo的密集更新正是在逐一解决这些“最后一公里”问题。好工具的最高境界是让用户感受不到它的存在——按钮该点就点,窗口该找就找,任务该继续就继续。
如有侵权,请联系删除。
Related Articles
-
Mon Jun 08 2026【计算机】海外巨头融资提速,AI应用静待续催化——计算机行业6月投资策略展望
本报告从投资策略视角出发,分析了截至2026年6月计算机行业的资金流向与应用进展,强调海外巨头在本轮融资中的加速布局以及对下游应用生态的潜在影响。
-
Mon Jun 08 20262026年1-5月全球AI制药融资全景
本文系统盘点了2026年1至5月期间全球AI制药领域的重要融资事件与市场动向,解析资本如何围绕算法、数据与试验能力重构药物发现生态。
-
Sun Jun 07 2026脑机接口、AR眼镜、智能体……,浙商如何抢抓AI风口
第23届浙商(投融资)合作周在杭州举行,聚焦智能体时代的裂变,讨论从具身智能到脑机接口与AR终端的技术与商业路径。
-
Sun Jun 07 2026“AI x开源鸿蒙” 智启新五年:Agent OS从概念走向系统,从系统走向生态,从生态走向真正的产业价值
在上海交通大学的开源鸿蒙城市技术论坛上,项目群技术指导委员会强调智能体时代需要新的操作系统范式,以系统层能力支撑概率性AI的确定性需求。
-
Sun Jun 07 2026脑机接口 、AR 眼镜、智能体……,浙商如何抢抓 AI 风口
第23届浙商(投融资)合作周在杭州召开,以'智能体时代的裂变'为主题,汇聚行业代表与投资人,共同探讨AI在传统产业中的应用与投融资机会。
-
Sat Jun 06 2026踏上AI +绿色发展新征程,中国铁建'铁骥'大模型重磅上线!
中国铁建发布'铁骥'大模型,作为面向全集团的自研智能底座,目标覆盖工程项目从勘察到运维的全流程,支持绿色建设与数字化管理。
-
Sat Jun 06 2026288核,Intel 18A制程,英特尔至强6+加速Agentic AI落地
英特尔在北京发布会上推出新一代至强6/6处理器,面向Agentic AI时代的数据中心需求,强调CPU在整体算力架构中的回归与重要性。
-
Sat Jun 06 2026中国电信研发云CodeFree荣获"2026中国AI智能体领航者"称号
中国电信研发云CodeFree在2026年评选中获得'通用智能体'方向称号,入选《2026中国智能体产业图谱》,其方案面向央国企研发痛点构建国产化芯片到研发工具链的全链路自主可控体系。
-
Sat Jun 06 2026大厂Agent天团已就位!AI智能体时代年度盛会进展公布,同期自进化智能体研讨会嘉宾揭晓
AgenticAICon 2026 将于杭州举办,作为聚焦AI智能体技术与应用的年度盛会,会议旨在连接学术、产业与投资三端,推动智能体技术的可落地发展。
-
Sat Jun 06 2026中国电信研发云CodeFree荣获“2026中国AI智能体领航者”称号
2026年6月,中国电信研发云CodeFree凭借其在通用智能体方向的技术突破与应用实践,被授予“2026中国AI智能体领航者”称号,并入选《2026中国智能体产业图谱》。
-
Fri Jun 05 2026达实召开生态伙伴大会,“AI+平台”实现快速迭代
达实智能在生态伙伴大会上展示AI Agent 2.0的演进速度与应用广度,强调通过AIoT平台和场景化模型快速复制落地,实现从单点到大规模场景覆盖的跨越。
-
Fri Jun 05 2026让AI深入产线!第三期『场景恳谈会』AI+制造业专场干货实录
第三期'场景恳谈会'聚焦 AI 在制造业的实际应用,来自企业与研究机构的案例展示说明 AI 智能体正从试点进入规模化部署阶段。
-
Fri Jun 05 2026智启新程,生态同行:2026高通汽车技术与合作峰会展现AI汽车新图景
2026高通汽车技术与合作峰会在无锡举行,聚焦AI智能体在汽车场景的落地与生态合作,展示了面向车载多模态交互、舱驾一体化和智能体验的解决方案。
-
Fri Jun 05 2026智启新程,生态同行:2026高通汽车技术与合作峰会展现AI汽车新图景
在无锡举行的高通汽车技术与合作峰会上,高通展示了面向汽车的AI能力,强调汽车正演进为重要的移动智能体载体,并提出了舱驾一体的交互愿景。
-
Fri Jun 05 2026Agentic AI风口已至!聚焦Agent最火的九个方向,年度AI智能体大会7月开幕
2026中国AI智能体大会将于7月2-3日在杭州举办,主题为“范式跃迁 重塑世界”,大会聚焦智能体技术的前沿方向与产业应用,邀请了大量来自企业与学界的专家。
-
Fri Jun 05 2026智启新程,生态同行:2026高通汽车技术与合作峰会展现AI汽车新图景
在2026高通汽车技术与合作峰会上,高通中国区领导指出2026年将成为“智能体之年”,并展示了其面向智能体的车载计算、感知与软件平台,强调汽车将成为智能体AI最重要的移动载体。
-
Fri Jun 05 2026汤道生对谈姚顺雨,回答关于腾讯AI的一切
在腾讯云 AI 产业应用大会上,腾讯高层就公司在 AI 下半场的战略与产品做出详细阐述,重点介绍面向企业的效率智能体与办公套件,旨在将智能体能力直接嵌入企业工作流中以提升生产力。
-
Fri Jun 05 2026华为云发布Agentic AI系列新品 打造智能时代“硅基黑土地”
在INSPIRE创想者大会上,华为云正式提出Agentic Infra新范式,并同步发布一系列面向企业级应用的Agentic AI产品,目标是为智能体时代提供从算力到平台的完整基础设施。
