By 小墨
2026年5月11日
30
573
Peekaboo v3发布:OpenClaw获得真实桌面操作能力
近日,OpenClaw项目正式发布Peekaboo v3版本,这是一款专为AI Agent设计的计算机使用(Computer Use)工具。此次更新补足了OpenClaw最关键的能力缺口——让AI不再局限于在聊天框中提供建议,而是能够真实地查看屏幕、操作按钮、执行任务。从“指路”到“驾驶”,这标志着AI Agent在操作真实世界方面迈出了重要一步。
为什么现在变得关键
Peekaboo可以理解为一套跨平台的桌面自动化工具集。它具备屏幕截图、窗口识别、UI元素解析、按钮点击、文本输入、滚动翻页、应用切换、菜单操作等核心能力。与传统脚本最大的区别在于,Peekaboo不仅截取屏幕图像,还会将界面中的控件、窗口、文本、按钮关系整理为结构化数据,形成可追踪、可复盘、可继续操作的“桌面地图”。这意味着AI看到的不再只是一片像素,而是一个充满可操作对象的数字工作空间。
OpenClaw的完整拼图
事实上,Peekaboo并非全新产物早在去年6月就已上线初版,但彼时模型能力尚未完全成熟。视觉模型虽能识别图像,但面对复杂界面时稳定性不足;Computer-Use能力虽能执行操作,但精准度和可靠性仍有欠缺。如今,随着大模型在视觉理解和操作控制两个维度同时突破临界点,AI Agent开始从“偶尔能演示”走向“可持续跑流程”的状态。底层自动化工具的价值随之被放大——模型再聪明,也需要稳定输入和稳定执行的桥梁。Peekaboo正是这座桥梁,把“看见”和“动手”真正连接到了一起。
它让OpenClaw从会聊天变成会干活,从消息系统的边界向操作系统推进了一步。
“编辑观点”工程细节背后的产品逻辑
社区已经展示了Peekaboo的潜力——有人用它驱动浏览器中的远程iOS模拟器,完成从识别界面、注册屏幕状态、点击目标按钮到等待反馈、继续探索的完整流程。这不再是简单的“AI看懂一张图”,而是“看懂→理解→执行→验证→继续”的完整闭环。每一步都可能出错,但每一步也都被记录下来,可观察、可复盘、可优化。这正是AI Agent从玩具走向工具的分界线。
值得注意的是,Peekaboo v3发布后进入了高频更新模式——在正式版发布当天就连续更新了v3.1.0、v3.1.1、v3.1.2三个版本。这些更新涉及模型目录配置、工具schema定义、打包产物优化、版本标记、窗口捕获路径、daemon调度等工程细节。表面上看,这些内容缺乏戏剧性,却正是AI工具能否真正落地的关键。演示时的行云流水往往掩盖不了实际使用中的各种摩擦:权限问题、路径配置、窗口识别、输入法切换、响应延迟……Peekaboo的密集更新正是在逐一解决这些“最后一公里”问题。好工具的最高境界是让用户感受不到它的存在——按钮该点就点,窗口该找就找,任务该继续就继续。
如有侵权,请联系删除。
Related Articles
-
Sat May 16 2026【投融资】芯片圈沸腾了!一周吸金超350亿,这阵“AI风口”正催生下一个万亿赛道
近期一周内,芯片与AI赛道迎来爆发式投融资,单周资金规模超350亿元,体现出资本对底层算力与AI模型生态的强烈押注。
-
Sat May 16 2026汉坤受邀参加2026钱伯斯大中华区高质量发展论坛,探讨AI领域投融资及资本市场业务热点问题
在钱伯斯大中华区高质量发展论坛上,法律界与产业界专家就AI领域的投融资与资本市场问题展开深入交流,强调合规与监管已成为投融资决策的重要考量因素。
-
Sat May 16 2026汉坤受邀参加2026钱伯斯大中华区高质量发展论坛,探讨AI领域投融资及资本市场业务热点问题
2026年5月13日至14日,汉坤律师事务所受邀参加钱伯斯大中华区高质量发展论坛并参与AI领域投融资及资本市场热点问题的圆桌讨论,分享行业观察与法律视角。
-
Sat May 16 2026腾讯&阿里财报看AI产业趋势
基于2026年5月14日腾讯与阿里一季报电话会议的公开信息,本文解读两家公司在AI领域的财务披露与业务进展,分析其对行业估值与资本配置的影响。
-
Fri May 15 2026滴普科技 X 上船院的AI智能体项目获“2026 IDC中国工业AI领航者”大奖
在IDC中国CIO峰会-深圳站上,上海船舶研究设计院与滴普科技联合打造的基于生成式AI的船型方案智能生成平台获得了“2026 IDC中国工业AI领航者”大奖,成为工业AI智能体应用的示范案例。
-
Fri May 15 2026【5.15-5.18 西安】高校教师AI智能体赋能教学创新全链路应用工作坊(第三期)
卓越国培组织的高校教师AI智能体赋能工作坊面向教育一线教师,强调零代码上手与教学全流程的AI应用,推动教育数字化与教学方法革新。
-
Fri May 15 2026AI行业观察:竞争格局动态演化,板块上行继续
2026年上半年,AI领域的竞争焦点明显向企业服务与落地部署倾斜。头部厂商频繁通过成立专门实体、对外并购与引入大额资本,强化面向企业客户的交付能力与服务链条。
-
Fri May 15 2026中电信AI公司智能体规模推广及运营支撑项目,百分点科技和软通动力中标,金额超500万元
2026年5月14日,中电信人工智能科技有限公司对2026-2028年智能体规模推广及运营支撑项目完成开标,百分点科技集团与软通动力中标,共同承担后续推广与运维工作。
-
Fri May 15 2026颠覆AI助手!这款登顶GitHub的开源Agent,普通人直接封神
GitHub项目OpenHuman由Tiny Humans AI团队开发,目标是让AI在几分钟内构建对用户工作与生活的深度理解,成为真正的数字分身,从而提升助手的实际效能。
-
Fri May 15 20262026新政解读:智能体与AI终端的'双向奔赴',AIoT产业迎来三大价值重构
2026年5月,相关部委发布的政策与标准信号明确:国家正在把智能体与AI终端纳入顶层治理与产业发展规划,旨在引导技术可控、安全与行业协同。
-
Fri May 15 2026上海交通大学最新Science论文:AI for Science再获突破
上海交通大学研究团队在Science期刊发表了一项重要成果,提出了一个由四个智能体组成的AI框架,专注于设计高效且稳定的钙钛矿太阳能电池材料与器件结构。
-
Fri May 15 2026葆德科技AI智能体隆重发布!
2026年5月15日,葆德科技在佛山市新质生产力大会上发布了面向工业全生命周期的“葆德科技AI智能体”。该智能体将设备选型、控制、节能与运维整合为一体,旨在为制造企业提供从采购到运维的端到端智能化支持
-
Thu May 14 2026从GraphRAG到本体演化:郑岩携手业界专家,打造Agent智能落地的知识工程实战
在 Agentic AI Summit 2026 的背景下,文章介绍了郑岩与业界专家围绕面向智能体的知识工程实践展开的讨论,重点关注如何让智能体在行业场景中具备更高的专业性与可解释性。
-
Thu May 14 20265.16 AI引领·资本赋能投融资对接会
5月16日的投融资对接会旨在搭建初创企业与资本方的高效沟通平台,聚焦具身智能、AI终端与大模型应用等领域的技术驱动型项目。
-
Thu May 14 2026腾讯季报图解:营收1965亿 马化腾称AI取得突破 市值却创一年新低
腾讯在2026年第一季度实现营收1965亿元,同比增长显著;公司在财报发布时同时强调对AI的持续投入与技术迭代,指出AI已在若干核心业务中取得阶段性进展。
-
Thu May 14 20265.13联发科'全域芯智能'发布会全面Ai生态化,包括:AI生态数据,AI智能体化引擎2.0,AI开发套件3.0,全星光影10亿三角面渲染。
2026年5月13日,联发科在上海举办天玑开发者大会(MDDC 2026),以“全域芯智能,体验新无界”为主题,正式推出其面向生态的AI解决方案与工具链。
-
Thu May 14 2026TikTok在美国和日本推出TikTok GO;苹果探索App Store引入AI智能体;熵约智能完成数百万美元天使轮融资
近期多条涉足消费与平台生态的AI与商业化新闻集中爆发,既体现大型平台的全球化产品扩展,也反映终端与具身智能创业公司的融资与产品迭代。
-
Thu May 14 2026143亿元,AI制药刚刚拿到了最大一笔融资
谷歌母公司Alphabet旗下的Isomorphic Labs完成了创纪录的B轮融资,本轮融资约为21亿美元(合计人民币143亿元),为AI驱动的药物研发注入重要资本。
