什么是Mac Control
Mac Control 是一个专为 macOS 设计的自动化工具，通过集成 cliclick、AppleScript 和系统截图工具，实现对图形用户界面（UI）的精准控制。它允许开发者或自动化脚本直接模拟鼠标点击、键盘输入、窗口信息获取等操作，无需依赖图形界面即可完成复杂的交互流程。该工具的核心优势在于其轻量级与高效率，所有命令均通过命令行调用本地二进制文件执行，避免了额外依赖，特别适合在后台运行或集成到 CI/CD 流程中。 Mac Control 特别适用于需要精确坐标定位的场景，例如点击屏幕上的特定按钮、填写表单字段或触发弹窗操作。它支持多种坐标系统，并针对 Retina 显示屏提供了自动缩放转换机制，确保在不同分辨率下都能准确命中目标区域。此外，工具内置了完整的调试工作流：先截取当前画面，分析元素位置，再执行点击验证，最后确认结果，极大提升了自动化任务的可靠性。 该方案尤其适合处理那些无法通过传统 WebDriver 控制的桌面应用或混合环境中的 UI 元素。无论是 Chrome 扩展图标的精确定位，还是多窗口环境下浏览器标签页的管理，Mac Control 都能提供稳定可控的操作能力。同时，它也兼容 AppleScript 生态，能够无缝调用系统级 API 获取窗口边界、进程状态等信息，形成一套完整的 Mac 端自动化解决方案。
核心功能特点
- 使用 cliclick 实现高精度鼠标控制，支持单击、双击、右键及拖拽操作
- 集成 screencapture 和 ImageMagick，支持全屏/区域截图与基于颜色的像素检测
- 结合 AppleScript 获取窗口边界与控件属性，精准定位 UI 元素
- 提供坐标校准机制，适配不同 DPI 缩放比例，包括 Retina 显示屏自动换算
- 支持键盘模拟与组合键操作，应对反自动化页面（如 Google OAuth）
- 内置完整验证工作流：截图→分析→点击→再截图确认，提升任务可靠性
适用场景
Mac Control 最典型的应用场景是跨应用的自动化测试与部署流水线。例如，在持续集成环境中，当某个构建完成后，系统可自动打开 Chrome 浏览器，通过 AppleScript 定位 Clawdbot 扩展按钮并点击，触发远程指令执行后续测试套件。整个过程完全无头运行，不依赖任何 GUI 可见性，仅通过坐标点击即可完成关键路径操作，显著提高了 CI 系统的稳定性与可维护性。 另一个高频使用场景是处理那些拒绝 Web 自动化框架访问权限的受保护页面，尤其是 Google OAuth 登录界面。这类页面通常会拦截合成鼠标事件，导致传统点击失效。此时，Mac Control 可切换至纯键盘导航模式：先用 Tab 键遍历焦点元素，再按 Enter 激活目标按钮。这种策略绕过了反机器人检测机制，实现了在安全敏感环境下的可靠交互。 对于需要频繁操作桌面客户端软件的用户而言，Mac Control 也极具实用价值。比如自动填写重复性表单、批量截图归档、或是在多显示器配置下精确定位窗口控件。借助其灵活的坐标系统和丰富的命令集，用户不仅能完成简单的点击任务，还能构建出复杂的宏操作链，将多个步骤串联成一键执行的自动化脚本，大幅提升工作效率并减少人为错误。