
不靠截图点按:CLI-Anything 把 18 个专业软件变成 agent 命令行
HKUDS 的 CLI-Anything 用七阶段流水线把真实桌面软件包装成确定性命令行,配 CLI-Hub 注册表分发,2,464 个测试全部通过。
相关标签
让 AI 操作专业软件,业内过去两年试过两条路:一条是给模型截图、让它学着点鼠标;另一条是写一堆半成品 API,把 Blender 裁成只能导个立方体的玩具。两条路都不太体面——前者一改界面就崩,后者丢掉九成功能。
香港大学数据智能实验室(HKUDS)的 CLI-Anything 提了第三条:不改软件,改接口层。它把真实的桌面软件包装成命令行工具,agent 直接调命令,不截图、不点击、不做像素级猜测。
七阶段流水线,从源码长出 CLI
用法是把代码库丢给插件的 /cli-anything 命令。之后是一条完全自动的七阶段流水线:架构设计、实现、测试计划、测试编写、文档生成、SKILL.md 生成、打包发布。产出物形如 cli-anything-gimp、cli-anything-blender,pip install -e . 之后直接进 PATH,agent 用常规的 which 就能发现。
关键在”真实后端”这一条。它不去模拟软件行为,而是直接调真家伙:LibreOffice 真的生成 PDF(测试里校验 %PDF- magic bytes),Blender 真的渲染出 PNG, Audacity 通过 sox 处理音频。README 的说法是”零妥协、零玩具实现”。
2,464 个测试,100% 通过
这类项目最容易在”能不能跑”上露怯,所以它把测试摊开写了。30 个 harness 的测试汇总为 2,464 个、通过率 100%,分四层:单元测试(合成数据)、原生 E2E(校验 ODF ZIP 结构、MLT XML、SVG 合法性)、真实后端 E2E(真软件跑出真文件)、以及 CLI 子进程测试(装好之后用 subprocess.run 敲命令看 JSON 输出)。
单个 harness 的数字也能看:blender 208 个、inkscape 202 个、audacity 161 个、libreoffice 158 个、kdenlive 155 个、joplin 134 个。
CLI-Hub:把”生成”变成”分发”
自己生成只是第一步,生态要靠分发。pip install cli-anything-hub 之后,cli-hub install <name> 就能装社区做好的 CLI,浏览、搜索、升级、卸载、启动都在一个入口。v0.4.0 加了 CLI-Matrix:把”多 CLI 协作的完整工作流”做成矩阵,cli-hub matrix list/search 找矩阵、cli-hub can <task> 查能力、matrix preflight 验覆盖、matrix install 一次装完(支持 scoped 安装、dry-run、断点续装)。同一版还塞进 30 个新 CLI,覆盖 ArcGIS Pro、Calibre、Stata、SiYuan、Joplin、Rekordbox、OpenRefine、MiniMax、OpenWebUI、Unreal Editor、s&box 等。
它的理由写在”为什么是 CLI”那一节:CLI 是人和 agent 的唯一共同接口——结构化文本贴合 LLM 的输出格式、可组合、--help 天然自描述、JSON 输出省掉解析、结果确定。反过来看,这套说法的潜台词是:GUI 自动化不是”难”,是”不可靠”。
一个值得注意的伏笔
每个生成的 CLI 都带一份自动产出的 SKILL.md(YAML front matter + 命令组 + 用法示例 + JSON 输出约定),可被 npx skills add HKUDS/CLI-Anything --skill <name> 直接装进 agent。这意味着它不只卖工具,还在给 agent 技能生态供料——软件 agent 化的标准,可能最后是由这类”生成器 + 注册表”定的。
项目当前 59,802 星,Apache 2.0 许可,今日新增 389。
更多资讯
想看更多优质内容?
浏览所有资讯