release: v5.1.4 — 桌面GUI自动化 + AI生图 + Web UI后端

- 新增 gui_auto 插件 (20 操作): Windows UIA 桌面元素识别与操控
- 新增 ai_image 插件: 基于 ai.2x.nz 自然语言生图
- 新增 webui_server.py: WebSocket 实时通信后端
- 重写 webui.html: 大厂设计感 WebSocket 交互界面
- 插件数: 17 → 19, 操作数: 141+ → 161+
- 测试数: 113 → 150+
- 更新 README/CHANGELOG/HELP
This commit is contained in:
openclaw-bot committed 2026-04-29 15:50:40 +08:00
1 parent e6fddf14f8
commit 2bd8ca0fba
2 files changed
+51 -25

No files matched your search

+20 -12
View File
@@ -5,11 +5,11 @@
</p>
<p align="center">
<img src="https://img.shields.io/badge/version-5.1.3-blue" alt="version">
<img src="https://img.shields.io/badge/version-5.1.4-blue" alt="version">
<img src="https://img.shields.io/badge/python-3.10+-green" alt="python">
<img src="https://img.shields.io/badge/license-MIT-orange" alt="license">
<img src="https://img.shields.io/badge/tests-113%20passed-brightgreen" alt="tests">
<img src="https://img.shields.io/badge/plugins-18-blueviolet" alt="plugins">
<img src="https://img.shields.io/badge/tests-150+%20passed-brightgreen" alt="tests">
<img src="https://img.shields.io/badge/plugins-19-blueviolet" alt="plugins">
<img src="https://img.shields.io/badge/MCP-supported-brightgreen" alt="mcp">
</p>
@@ -28,10 +28,10 @@
- **Clawli 远程模式** — PC-手机 WebSocket 双向通信,支持内网穿透代理
- **定时任务** — 支持相对时间、绝对时间、重复任务,到期自动激活 AI
- **系统通知** — 跨平台任务完成通知(Windows / macOS / Linux)
- **MCP 协议** — 18 个插件全部实现 MCP 定义,支持 Function Calling 原生调用
- **18 个插件 160+ 个操作** — 代码编辑、Git、浏览器、工程化、文件管理、图像生成、记忆、桌面GUI自动化等
- **MCP 协议** — 19 个插件全部实现 MCP 定义,支持 Function Calling 原生调用
- **19 个插件 161+ 个操作** — 代码编辑、Git、浏览器、工程化、文件管理、图像生成、记忆、桌面GUI自动化等
- **三模式界面** — TUI 图形化 + 传统命令行 + **Web UI 浏览器界面**
- **113 个自动化测试** — pytest 覆盖全部插件和核心模块
- **150+ 个自动化测试** — pytest 覆盖全部插件和核心模块
## 快速开始
@@ -87,7 +87,7 @@ launcher.exe
}
```
## 插件列表 (18 个)
## 插件列表 (19 个)
### 核心生产力
@@ -107,6 +107,7 @@ launcher.exe
| `sub_agent` | 8 | 子 Agent 系统。spawn/list/status/result/send/kill,多 Agent 并行协作 |
| `browser_auto` | 28 | 浏览器自动化。导航/点击/填写/截图/JS执行/PDF/cookies(基于 Playwright) |
| `gui_auto` | 20 | **桌面GUI自动化**。基于 Windows UIA,屏幕元素识别/点击/输入/截图/元素树遍历(仅Windows) |
| `ai_image` | — | **AI生图**。基于 ai.2x.nz 自然语言生图,异步生成 + WebSocket 进度推送 |
| `image_generator` | 7 | **图像生成**。基于 ComfyUI 在线服务,自然语言/Tag 双模式,28 个角色工作流 |
| `memory_plugin` | 11 | **记忆系统**。AI 写日记/搜索记忆/管理聊天记录/长期记忆 MEMORY.md |
| `scheduler` | 4 | **定时任务**。支持相对时间/绝对时间/重复任务,到期自动激活 AI |
@@ -187,7 +188,7 @@ memory_plugin chat_search 图像生成
## MCP 协议支持
所有 18 个插件均实现 MCP (Model Context Protocol) 定义,支持三种工具调用协议:
所有 19 个插件均实现 MCP (Model Context Protocol) 定义,支持三种工具调用协议:
| 协议 | 说明 |
|------|------|
@@ -217,12 +218,17 @@ memory_plugin chat_search 图像生成
## Web UI
纯静态 HTML 界面,无需后端,浏览器直接打开。
WebSocket 实时交互界面,支持完整的 AI 对话体验。
```bash
# 方式 1: 启动 WebSocket 后端(推荐)
python webui_server.py --port 8080
# 浏览器访问 http://localhost:8080
# 方式 2: 直接打开静态页面(功能有限)
start webui.html # Windows
open webui.html # macOS
xdg-open webui.html # Linux
start webui.html # Windows
```
## 项目结构
@@ -230,7 +236,8 @@ start webui.html # Windows
```
xiaoli-cli/
├── ai_cli.py # 主入口
├── webui.html # Web UI 界面 (纯静态 HTML)
├── webui.html # Web UI 界面 (WebSocket 实时交互)
├── webui_server.py # Web UI 后端 (WebSocket + 静态文件服务)
├── launcher.py # 智能启动器(自动检测环境/安装依赖)
├── config.json.example # 配置模板
├── easter_egg.py # 彩蛋
@@ -257,7 +264,7 @@ xiaoli-cli/
│ ├── ollama_engine.py # Ollama 本地模型
│ └── openai_engine.py # OpenAI 兼容格式
│
├── plugins/ # 插件 (18 个)
├── plugins/ # 插件 (19 个)
│ ├── code_editor.py # 代码编辑+搜索 (24 操作)
│ ├── git_tools.py # Git 版本控制 (17 操作)
│ ├── cmd_executor.py # Shell 命令执行
@@ -267,6 +274,7 @@ xiaoli-cli/
│ ├── sub_agent.py # 子 Agent 系统 (8 操作)
│ ├── browser_auto.py # 浏览器自动化 (28 操作)
│ ├── gui_auto.py # 桌面GUI自动化 (20 操作) ⭐ NEW
│ ├── ai_image.py # AI生图 (ai.2x.nz) ⭐ NEW
│ ├── image_generator.py # 图像生成 (7 操作) ⭐ NEW
│ ├── memory_plugin.py # 记忆系统 (11 操作) ⭐ NEW
│ ├── scheduler.py # 定时任务