TuriX桌面自动化

3小时前更新 1 00
TuriX桌面自动化TuriX桌面自动化
TuriX桌面自动化

技能简介

TuriX-Mac 是面向 macOS 的 Computer Use Agent(CUA),通过视觉方式控制桌面环境,完成无 CLI 或 API 的应用程序操作。

能做什么

  • 打开应用、点击按钮、浏览图形界面
  • 执行多步骤视觉工作流(如查找邮件附件并上传)
  • 在缺乏命令行接口的软件中导航操作

使用说明

  1. 权限准备:在系统设置中为 /opt/homebrew/bin/node 开启”屏幕录制”权限
  2. 安装检查:确认脚本路径 skills/local/turix-mac/scripts/run_turix.sh 存在且可执行
  3. 执行任务:通过 exec 调用脚本,传入完整任务描述:
    skills/local/turix-mac/scripts/run_turix.sh "Open System Settings and switch to Dark Mode"
  4. 监控状态:GUI 任务在后台运行,使用 process log 查看进度或错误

提示:任务描述需具体;脚本自动处理 config.json 注入,无需手动编辑;出现 NoneType 错误时检查屏幕录制权限。

输入与输出

见下方输入与输出表格。

项目内容
输入自然语言任务描述(英文)、屏幕录制权限
输出任务执行状态、process log 日志
适用人群需操作无 API 的 macOS 应用、执行多步骤桌面视觉工作流的用户
不包含Windows/Linux 系统支持、非视觉类后台任务、远程桌面控制

 

风险提示

  • 必须预先授予屏幕录制权限,否则任务失败
  • NoneType 错误通常源于权限缺失或进程需重启
  • GUI 任务耗时较长,需保持会话开启并主动监控日志
  • 脚本依赖 screencapture 工具,PATH 已硬编码包含 /usr/sbin

来源信息

原始链接:https://github.com/openclaw/skills/tree/main/skills/tongyu-yan/turix-computer-use/SKILL.md
来源类型:GitHub 仓库

数据统计

相关导航

暂无评论

none
暂无评论...