chore(i18n): refresh zh-CN translations

This commit is contained in:
openclaw-docs-i18n[bot] 2026-04-17 01:30:13 +00:00
parent 51bf82464e
commit 0aac61446f
2 changed files with 428 additions and 411 deletions

View File

@ -3,41 +3,41 @@ read_when:
- 扩展 qa-lab 或 qa-channel
- 添加由仓库支持的 QA 场景
- 围绕 Gateway 网关仪表板构建更高真实性的 QA 自动化
summary: qa-lab、qa-channel、种子化场景和协议报告的私有 QA 自动化形态
summary: 用于 qa-lab、qa-channel、种子场景和协议报告的私有 QA 自动化结构
title: QA 端到端自动化
x-i18n:
generated_at: "2026-04-16T20:21:21Z"
generated_at: "2026-04-17T01:26:34Z"
model: gpt-5.4
provider: openai
source_hash: 7deefda1c90a0d2e21e2155ffd8b585fb999e7416bdbaf0ff57eb33ccc063afc
source_hash: 51f97293c184d7c04c95d9858305668fbc0f93273f587ec7e54896ad5d603ab0
source_path: concepts/qa-e2e-automation.md
workflow: 15
---
# QA 端到端自动化
私有 QA 栈旨在以比单个单元测试更贴近真实、更符合渠道形态的方式来验证 OpenClaw。
私有 QA 栈的目标是以比单个单元测试更贴近真实、更加符合渠道形态的方式来验证 OpenClaw。
当前组成部分:
- `extensions/qa-channel`:合成消息渠道,包含私信、渠道、线程、反应、编辑和删除等交互面。
- `extensions/qa-lab`:调试器 UI 和 QA 总线,用于观察转录内容、注入入站消息以及导出 Markdown 报告。
- `extensions/qa-channel`:合成消息渠道,支持私信、频道、线程、表情回应、编辑和删除等交互面。
- `extensions/qa-lab`:调试器 UI 和 QA 总线,用于观察转录内容、注入入站消息以及导出 Markdown 报告。
- `qa/`:由仓库支持的启动任务种子资源和基线 QA 场景。
当前的 QA 操作流程是一个双窗格 QA 站点:
- 左侧:带有智能体的 Gateway 网关仪表板Control UI
- 右侧QA Lab显示类 Slack 风格的转录内容和场景计划。
- 右侧QA Lab显示类 Slack 的转录内容和场景计划。
使用以下命令运行:
运行方式
```bash
pnpm qa:lab:up
```
该命令会构建 QA 站点,启动基于 Docker 的 Gateway 网关测试通道,并暴露 QA Lab 页面,供操作员或自动化循环为智能体分配 QA 任务、观察真实渠道行为,并记录哪些内容成功、失败或仍然受阻。
这会构建 QA 站点、启动由 Docker 支持的 Gateway 网关测试通道,并暴露 QA Lab 页面,供操作员或自动化循环向智能体下达 QA 任务、观察真实渠道行为,并记录哪些内容成功、失败或仍然受阻。
如果你想更快地迭代 QA Lab UI而不是每次都重新构建 Docker 镜像,请使用带有绑定挂载 QA Lab bundle 的方式启动栈:
如果你想更快地迭代 QA Lab UI而不必每次都重建 Docker 镜像,可通过绑定挂载的 QA Lab bundle 启动整套堆栈:
```bash
pnpm openclaw qa docker-build-image
@ -46,45 +46,45 @@ pnpm qa:lab:up:fast
pnpm qa:lab:watch
```
`qa:lab:up:fast` 会让 Docker 服务继续使用预构建镜像,并将 `extensions/qa-lab/web/dist` 绑定挂载到 `qa-lab` 容器中。`qa:lab:watch` 会在变更时重新构建该 bundle当 QA Lab 资源哈希发生变化时,浏览器会自动重新加载。
`qa:lab:up:fast` 会让 Docker 服务继续使用预构建镜像,并将 `extensions/qa-lab/web/dist` 绑定挂载到 `qa-lab` 容器中。`qa:lab:watch` 会在变更时重建该 bundle当 QA Lab 资源哈希变化时,浏览器会自动重新加载。
如果要运行一个使用真实传输的 Matrix 冒烟测试通道,请执行:
如果你想运行一个基于真实传输的 Matrix 烟雾测试通道,请执行:
```bash
pnpm openclaw qa matrix
```
该通道会在 Docker 中预配一个一次性的 Tuwunel homeserver注册临时的驱动、SUT 和观察者用户,创建一个私有房间,然后在 QA Gateway 网关子进程中运行真实的 Matrix 插件。该实时传输通道会将子配置限定在待测传输范围内,因此 Matrix 可在子配置中不包含 `qa-channel` 的情况下运行。它会将结构化报告产物以及合并后的 stdout/stderr 日志写入所选的 Matrix QA 输出目录。若还要捕获外层 `scripts/run-node.mjs` 的构建/启动输出,请将 `OPENCLAW_RUN_NODE_OUTPUT_LOG=<path>` 设置为仓库内本地日志文件路径。
该通道会在 Docker 中预配一个一次性的 Tuwunel homeserver注册临时的驱动、SUT 和观察者用户,创建一个私有房间,然后在 QA Gateway 网关子进程中运行真实的 Matrix 插件。这个实时传输通道会将子配置限定在被测传输范围内,因此 Matrix 会在子配置中不包含 `qa-channel` 的情况下运行。它会将结构化报告产物以及合并后的 stdout/stderr 日志写入所选的 Matrix QA 输出目录。若还想捕获外层 `scripts/run-node.mjs` 的构建/启动输出,可将 `OPENCLAW_RUN_NODE_OUTPUT_LOG=<path>` 设置为仓库内的某个日志文件路径。
如果要运行一个使用真实传输的 Telegram 冒烟测试通道,请执行:
如果你想运行一个基于真实传输的 Telegram 烟雾测试通道,请执行:
```bash
pnpm openclaw qa telegram
```
该通道针对的是一个真实的私有 Telegram 群组,而不是预配一次性服务器。它要设置 `OPENCLAW_QA_TELEGRAM_GROUP_ID`、`OPENCLAW_QA_TELEGRAM_DRIVER_BOT_TOKEN` 和 `OPENCLAW_QA_TELEGRAM_SUT_BOT_TOKEN`,并且要求两个不同的 bot 位于同一个私有群组中。SUT bot 必须有 Telegram 用户名,并且当两个 bot 都在 `@BotFather` 中启用了 Bot-to-Bot Communication Mode 时bot 间观察效果最佳。
该通道会面向一个真实的私有 Telegram 群组,而不是预配一次性服务器。它要设置 `OPENCLAW_QA_TELEGRAM_GROUP_ID`、`OPENCLAW_QA_TELEGRAM_DRIVER_BOT_TOKEN` 和 `OPENCLAW_QA_TELEGRAM_SUT_BOT_TOKEN`,并要求两个不同的机器人位于同一个私有群组中。SUT 机器人必须具有 Telegram 用户名,而当两个机器人都在 `@BotFather` 中启用了 Bot-to-Bot Communication Mode 时,机器人之间的观察效果最佳。
现在,各实时传输通道共享同一个更小的契约,而不是各自定义自己的场景列表结构:
实时传输通道现在共享一套更小的统一契约,而不是每条通道各自发明自己的场景列表结构:
`qa-channel` 仍然是覆盖面广泛的合成产品行为测试套件,不属于实时传输覆盖矩阵的一部分。
| 通道 | Canary | 提及门控 | Allowlist 阻止 | 顶层回复 | 重启恢复 | 线程后续回复 | 线程隔离 | 反应观察 | 帮助命令 |
| ---- | ------ | -------- | -------------- | -------- | -------- | ------------ | -------- | -------- | -------- |
| Matrix | x | x | x | x | x | x | x | x | |
| Telegram | x | | | | | | | | x |
| 通道 | Canary | 提及门控 | allowlist 拦截 | 顶层回复 | 重启恢复 | 线程跟进 | 线程隔离 | 表情回应观察 | 帮助命令 |
| ---- | ------ | -------- | -------------- | -------- | -------- | -------- | -------- | ------------ | -------- |
| Matrix | x | x | x | x | x | x | x | x | |
| Telegram | x | | | | | | | | x |
样可以让 `qa-channel` 保持为覆盖广泛产品行为的测试套件,同时让 Matrix、Telegram 以及未来的实时传输共享一份明确的传输契约检查清单。
使 `qa-channel` 保持为广泛的产品行为测试套件,而 Matrix、Telegram 以及未来的实时传输则共享一份明确的传输契约检查清单。
如果要运行一个一次性的 Linux VM 通道,而不将 Docker 引入 QA 路径,请执行:
如果你想运行一个一次性的 Linux VM 通道,并且不把 Docker 纳入 QA 路径,请执行:
```bash
pnpm openclaw qa suite --runner multipass --scenario channel-chat-baseline
```
这会启动一个全新的 Multipass guest在 guest 中安装依赖、构建 OpenClaw、运行 `qa suite`,然后将常规 QA 报告和摘要复制回宿主机上的 `.artifacts/qa-e2e/...`
它复用宿主机上 `qa suite` 相同的场景选择行为。
宿主机和 Multipass 套件运行默认都会使用相互隔离的 Gateway 网关工作进程并行执行多个选定场景,最多 64 个工作进程或所选场景数。使用 `--concurrency <count>` 可调整工作进程数量,或使用 `--concurrency 1` 进行串行执行。
实时运行会转发适合 guest 使用的受支持 QA 凭证输入基于环境变量的提供商密钥、QA 实时提供商配置路径,以及在存在时的 `CODEX_HOME`。请将 `--output-dir` 保持在仓库根目录下,这样 guest 才能通过挂载的工作区回写内容
这会启动一个全新的 Multipass 来宾实例,在来宾中安装依赖、构建 OpenClaw、运行 `qa suite`,然后把常规 QA 报告和摘要复制回主机上的 `.artifacts/qa-e2e/...`
复用与主机上 `qa suite` 相同的场景选择行为。
主机和 Multipass 的 suite 运行默认都会并行执行多个已选场景,并为每个场景使用隔离的 Gateway 网关 worker最多 64 个 worker 或已选场景数,以较小者为准。使用 `--concurrency <count>` 可调整 worker 数量,或使用 `--concurrency 1` 进行串行执行。
实时运行会转发适合来宾环境使用的受支持 QA 凭证输入基于环境变量的提供商密钥、QA 实时提供商配置路径,以及在存在时的 `CODEX_HOME`。请将 `--output-dir` 保持在仓库根目录下,以便来宾能够通过挂载的工作区回写结果
## 由仓库支持的种子资源
@ -93,40 +93,50 @@ pnpm openclaw qa suite --runner multipass --scenario channel-chat-baseline
- `qa/scenarios/index.md`
- `qa/scenarios/*.md`
这些内容有意保存在 git 中,以便人类和智能体都能看到 QA 计划。
这些内容有意保存在 git 中,以便人类和智能体都能看到 QA 计划。
`qa-lab` 应保持为一个通用的 Markdown 运行器。每个场景 Markdown 文件都是一次测试运行的唯一事实来源,并且应定义:
`qa-lab` 应保持为一个通用的 Markdown 运行器。每个场景 Markdown 文件都是一次测试运行的事实来源,并且应定义:
- 场景元数据
- 文档和代码引用
- 可选插件要
- 可选 Gateway 网关配置补丁
- 可选的插件需
- 可选 Gateway 网关配置补丁
- 可执行的 `qa-flow`
`qa-flow` 的可复用运行时表面可以保持通用且跨领域。例如Markdown 场景可以组合传输侧辅助工具与浏览器侧辅助工具,通过 Gateway 网关 `browser.request` 接缝驱动嵌入式 Control UI而无需添加特殊用途的运行器。
`qa-flow` 的可复用运行时表面可以保持通用且跨领域。例如Markdown 场景可以将传输侧辅助工具与浏览器侧辅助工具结合起来,通过 Gateway 网关的 `browser.request` 接缝驱动嵌入式 Control UI而无需新增专用场景运行器。
基线列表应保持足够广泛,以覆盖:
基线列表应足够广泛,以覆盖:
- 私信和道聊天
- 私信和道聊天
- 线程行为
- 消息动作生命周期
- cron 回调
- 记忆召回
- 模型切换
- 子智能体
- 子智能体交
- 读取仓库和读取文档
- 一个小型构建任务,例如 Lobster Invaders
## 提供商 mock 通道
`qa suite` 有两条本地提供商 mock 通道:
- `mock-openai` 是面向场景的 OpenClaw mock。它仍然是用于由仓库支持的 QA 和一致性门禁的默认确定性 mock 通道。
- `aimock` 会启动一个由 AIMock 支持的提供商服务器,用于实验性的协议、夹具、录制/回放和混沌覆盖。它是附加能力,不替代 `mock-openai` 的场景分发器。
提供商通道实现位于 `extensions/qa-lab/src/providers/` 下。
每个提供商都拥有自己的默认设置、本地服务器启动方式、Gateway 网关模型配置、凭证配置文件暂存需求,以及实时/mock 能力标志。共享的 suite 和 Gateway 网关代码应通过提供商注册表进行路由,而不是根据提供商名称分支。
## 传输适配器
`qa-lab` 为 Markdown QA 场景提供一个通用的传输接缝。
`qa-channel` 是该接缝上的第一个适配器,但设计目标更广:未来的真实或合成渠道应接入同一个套件运行器,而不是添加传输专用的 QA 运行器。
`qa-lab` 拥有一个面向 Markdown QA 场景的通用传输接缝。
`qa-channel` 是该接缝上的第一个适配器,但设计目标更广:未来的真实或合成渠道都应接入同一个 suite 运行器,而不是新增一个传输专用的 QA 运行器。
在架构层面,划分如下:
在架构层面,分如下:
- `qa-lab` 负责通用场景执行、工作进程并发、产物写入和报告。
- 传输适配器负责 Gateway 网关配置、就绪状态、入站和出站观察、传输动作以及标准化后的传输状态。
- `qa/scenarios/` 下的 Markdown 场景文件定义测试运行;`qa-lab` 提供执行它们所需的可复用运行时表面。
- `qa-lab` 负责通用场景执行、worker 并发、产物写入和报告。
- 传输适配器负责 Gateway 网关配置、就绪性、入站与出站观察、传输动作以及规范化的传输状态。
- `qa/scenarios/` 下的 Markdown 场景文件定义测试运行;`qa-lab` 提供执行它们的可复用运行时表面。
面向维护者的新渠道适配器接入指南位于
[测试](/zh-CN/help/testing#adding-a-channel-to-qa)。
@ -134,14 +144,14 @@ pnpm openclaw qa suite --runner multipass --scenario channel-chat-baseline
## 报告
`qa-lab` 会根据观察到的总线时间线导出一份 Markdown 协议报告。
报告应回答:
这份报告应回答:
- 哪些内容成功了
- 哪些内容失败了
- 哪些内容仍然受阻
- 值得添加哪些后续场景
- 值得补充哪些后续场景
对于角色与风格检查,请在多个实时模型引用上运行同一场景,并写出一份经过评判的 Markdown 报告:
对于角色和风格检查,可在多个实时模型引用上运行同一场景,并生成一份经评判的 Markdown 报告:
```bash
pnpm openclaw qa character-eval \
@ -160,14 +170,13 @@ pnpm openclaw qa character-eval \
--judge-concurrency 16
```
该命令运行的是本地 QA Gateway 网关子进程,而不是 Docker。角色评估场景应通过 `SOUL.md` 设置 persona然后运行普通用户轮次,例如聊天、工作区帮助和小型文件任务。候选模型不应被告知自己正在接受评估。该命令会保留每份完整转录,记录基本运行统计信息,然后以快速模式和 `xhigh` 推理要求评审模型根据自然度、氛围和幽默感对这些运行进行排序。
在比较提供商时,请使用 `--blind-judge-models`:评审提示仍会收到每份转录和运行状态,但候选引用会被替换为诸如 `candidate-01` 之类的中性标签;解析后,报告会将排名映射回真实引用。
候选运行默认使用 `high` thinking对于支持该能力的 OpenAI 模型则使用 `xhigh`。可使用 `--model provider/model,thinking=<level>` 内联覆盖特定候选。`--thinking <level>` 仍会设置全局回退值,而旧的 `--model-thinking <provider/model=level>` 形式则保留用于兼容
OpenAI 候选引用默认启用快速模式,以便在提供商支持时使用优先处理。若单个候选或评审需要覆盖,请内联添加 `,fast`、`,no-fast` 或 `,fast=false`。只有在你想为每个候选模型都强制开启快速模式时,才使用 `--fast`。候选和评审的持续时间都会记录在报告中以供基准分析,但评审提示会明确说明不要按速度排序
候选和评审模型运行默认都使用并发度 16。当提供商限制或本地 Gateway 网关压力导致运行噪声过大时,请降低 `--concurrency``--judge-concurrency`
该命令运行的是本地 QA Gateway 网关子进程,而不是 Docker。角色评估场景应通过 `SOUL.md` 设置人格,然后执行普通用户轮次,例如聊天、工作区帮助和小型文件任务。候选模型不应被告知自己正在被评估。该命令会保留每份完整转录、记录基本运行统计信息,然后要求评审模型以快速模式和 `xhigh` 推理来按自然度、氛围感和幽默感对这些运行进行排序。
在比较不同提供商时,请使用 `--blind-judge-models`:评审提示仍会获得每份转录和运行状态,但候选引用会被替换为中性标签,例如 `candidate-01`;报告会在解析完成后再将排名映射回真实引用。
候选运行默认使用 `high` thinking而对支持该能力的 OpenAI 模型则默认使用 `xhigh`。你可以通过 `--model provider/model,thinking=<level>` 为某个候选项单独覆盖。`--thinking <level>` 仍然会设置全局后备值,而旧的 `--model-thinking <provider/model=level>` 形式则为兼容性保留
OpenAI 候选引用默认启用快速模式,以便在提供商支持时使用优先处理。若单个候选或评审模型需要覆盖,请内联添加 `,fast`、`,no-fast` 或 `,fast=false`。只有在你想为每个候选模型都强制开启快速模式时,才传入 `--fast`。候选和评审模型的耗时都会记录在报告中用于基准分析,但评审提示会明确说明不要按速度排名
候选和评审模型运行默认都使用并发数 16。当提供商限制或本地 Gateway 网关压力使运行噪声过大时,请降低 `--concurrency``--judge-concurrency`
当未传入候选 `--model` 时,角色评估默认使用
`openai/gpt-5.4`、`openai/gpt-5.2`、`openai/gpt-5`、`anthropic/claude-opus-4-6`、
`anthropic/claude-sonnet-4-6`、`zai/glm-5.1`、
`openai/gpt-5.4`、`openai/gpt-5.2`、`openai/gpt-5`、`anthropic/claude-opus-4-6`、`anthropic/claude-sonnet-4-6`、`zai/glm-5.1`、
`moonshot/kimi-k2.5`
`google/gemini-3.1-pro-preview`
当未传入 `--judge-model` 时,评审默认使用

File diff suppressed because it is too large Load Diff