Peekaboo

2周前发布 1 0 0

使用 Peekaboo CLI 捕获、理解并自动操作 macOS 应用、窗口、菜单、对话框和输入设备。

收录时间:
2026-09-24

Peekaboo 是什么

为 macOS 提供命令行 UI 感知与操作能力,从截图和元素标注到点击、输入、菜单、窗口、Dock、剪贴板和 Space 管理。

适用场景

适合桌面应用自动化、截图文档、可视化测试、跨应用重复操作和难以通过 API 完成的流程。

核心能力与工作机制

完整清单覆盖 see 快照、元素 ID 与坐标定位、图像捕获分析、鼠标键盘、系统对话框、应用窗口、脚本运行和 JSON 输出。

执行流程

先检查屏幕录制与辅助功能权限,用 list/see 获取应用、窗口和标注快照;优先按元素 ID 操作,动作后重新观察并验证状态。

输入与输出

需要目标应用、窗口或元素、操作序列、可接受等待和输出路径。输出截图、快照 ID、JSON 状态或实际桌面操作结果。

依赖、账号与权限

仅适用于 macOS,依赖 Peekaboo CLI、Screen Recording 与 Accessibility 权限;分析功能可能还需模型配置。

副作用、限制与风险

GUI 状态易变化,坐标点击可能误触;剪贴板、文件选择和对话框可能暴露敏感数据。会真实点击、输入、启动或退出应用、移动窗口、读写剪贴板和保存截图。

不适用边界

不能绕过系统权限或登录验证,也不应在未确认目标时执行删除、提交、付款等高影响动作。

失败处理与验收

重新执行 see 获取新快照,检查焦点、窗口 ID、权限和等待条件;不要复用失效坐标连续点击。每个关键动作后重新读取 UI 或截图,核对目标应用、元素状态和最终文件。

适合谁使用

适合 macOS 自动化、测试和桌面 Agent 开发者。

来源、版本与许可

本条目依据 SkillHub 热门榜、发布者详情和版本 1.0.0 的完整 SKILL.md 整理,核验日期为 2026 年 9 月 21 日。完整 SKILL.md 未声明许可证,公开可下载不代表可以任意复制、修改或再分发。 SkillHub 当前两套安全扫描状态为 benign、benign;该状态只是平台信号,不能替代对脚本、凭据、网络请求、数据外送与后续版本的人工审查。

常见问题

1. Peekaboo 主要解决什么问题?

为 macOS 提供命令行 UI 感知与操作能力,从截图和元素标注到点击、输入、菜单、窗口、Dock、剪贴板和 Space 管理。适合桌面应用自动化、截图文档、可视化测试、跨应用重复操作和难以通过 API 完成的流程。是否采用它,应以实际任务边界和可核验材料为准,不要因为榜单热度而跳过来源审查。

2. 开始前需要准备什么?

需要目标应用、窗口或元素、操作序列、可接受等待和输出路径。准备阶段不要代替用户猜测关键事实;缺少会改变路线、费用或权限的输入时,应先补齐再执行。

3. 它怎样完成任务并交付结果?

先检查屏幕录制与辅助功能权限,用 list/see 获取应用、窗口和标注快照;优先按元素 ID 操作,动作后重新观察并验证状态。每个阶段都要保留输入、决策、输出和检查点,不能把计划、预览或排队状态描述成最终交付。

4. 需要哪些工具、账号或权限?

仅适用于 macOS,依赖 Peekaboo CLI、Screen Recording 与 Accessibility 权限;分析功能可能还需模型配置。凭据应放在安全环境中,并按最小权限授权;账号、网络或本地依赖不满足时应明确停止条件。

5. 它会产生哪些外部操作或副作用?

会真实点击、输入、启动或退出应用、移动窗口、读写剪贴板和保存截图。涉及外部写入、上传、发送、付费或持久配置时,应在实际动作前说明影响范围并取得相应确认。

6. 哪些情况不适合使用?

不能绕过系统权限或登录验证,也不应在未确认目标时执行删除、提交、付款等高影响动作。超出来源明确能力、专业资质或授权范围时,应切换到更合适的工具或交给专业人员处理。

7. 失败或结果异常时怎样恢复?

重新执行 see 获取新快照,检查焦点、窗口 ID、权限和等待条件;不要复用失效坐标连续点击。恢复时优先查询已有任务、日志或备份,避免无上限重试、重复扣费、重复发送或覆盖唯一原件。

8. 如何验收结果并控制风险?

每个关键动作后重新读取 UI 或截图,核对目标应用、元素状态和最终文件。验收应基于真实文件、页面、任务终态或权威来源,并把未能实际检查的部分明确标记出来。

数据统计

相关导航

暂无评论

none
暂无评论...