Mac 界面自动化
截取并自动操作 Mac 上的窗口和界面,把重复点击交给 AI。
功能与用途
一套跑在 Mac 上的界面自动化命令行工具:能截图(全屏/单窗口/菜单栏区域)、列出正在运行的应用和窗口、检查屏幕录制与辅助功能权限,还能按元素 ID 或坐标模拟点击、拖拽等操作,也支持执行预写的 .peekaboo.json 脚本。适合每天要在同一套界面里重复点几十次的人。
适用场景
- 桌面软件自动化录入:通过识别屏幕 UI 元素或坐标,自动在客户端表单中连续点击、输入账号与参数。
- 多窗口与工作区管理:按需启动或隐藏指定 App,调整窗口尺寸并自动切换 macOS Spaces 虚拟桌面。
- 界面巡检与状态截图:定时捕获特定窗口或全屏画面,借助视觉标注检查应用界面状态并输出诊断日志。
适用人群
- 自媒体
- 内容运营
- 品牌团队
使用步骤
- 先安装并确认 Peekaboo Bridge 连接正常,检查屏幕录制 / 辅助功能权限。
- 让 AI 截一张当前界面,说明你要它接手哪个重复动作。
- 让 AI 把每一步的输入输出和失败处理写成流程,并跑一次真实环境验证。
- 补上失败重试和需要你人工确认的节点,之后就能重复执行。
开始使用
将需求和 Skill 名称发送给已连接 SkillPX MCP 的 AI 助手,核对适用工具和安装要求。
技术信息
- 分类
- 效率
- 适用工具
- Codex、Claude Code、OpenClaw、Hermes、国内 Agent
- 使用难度
- 进阶
- 版本
- 1.0.0
- 最近更新
- 2026-05-18
- 文件数
- 3
- 安装包大小
- 自动生成 ZIP
- 安全检查
- 基础检查通过
Capture and automate macOS UI with the Peekaboo CLI.
使用前准备
- macOS 环境
- 屏幕录制与辅助功能权限
- 一份可用来试跑的真实操作场景
依赖与权限
- 读取用户主动提供的内容