Skip to main content

Casebook

Casebook 是一个面向 AI 时代测试用例工作的本地工具。

它把需求文档、AI 测试设计规范、JSON Schema 约束、YAML 用例文件和可视化编辑界面连成一条完整工作流:

Casebook 的目标不是替代测试人员,而是把测试人员从重复录入中释放出来:人负责需求理解、风险判断和评审,AI 负责按规范批量生成结构化用例,Casebook 负责可视化查看和编辑。

设计理念

传统测试用例往往散落在表格、文档和测试管理平台里,格式难统一,版本难追踪,AI 也很难稳定复用。

Casebook 将用例工程化:

  • docs/requirements/ 承载需求输入。
  • .agents/skills/ 固化测试设计方法。
  • schema/ 固化结构约束。
  • releases/ 存放可版本化的 YAML 用例。
  • 用本地 Web UI 完成审阅、标记、编辑和执行。

这让测试用例变成可以被 AI 生成、被 schema 校验、被 Git 管理、被人高效评审和执行的工程资产。

核心能力

  • 一条命令创建标准 Casebook 用例项目。
  • 将需求文档放入 docs/requirements/,让 AI 按项目技能包生成测试用例。
  • 使用 schema/test-case-schema.json 约束 YAML 用例格式。
  • 在本地 Web UI 中浏览、筛选、展开、标记和编辑 YAML 用例。
  • 按启动目录创建测试计划,记录用例通过、失败、阻塞和执行备注。
  • 保存编辑时直接回写原始 YAML 文件。
  • 使用 ruamel.yaml 尽量保留 YAML 注释、字段顺序、缩进和 inline list 风格。
  • 将标记状态保存在 .casebook/marks.json,不污染用例文件本身。
  • 监听 YAML 文件变化,并通知浏览器刷新。

安装

Casebook 需要 Python 3.10 或更高版本。

在本仓库中安装:

pip install casebook

安装后可以使用:

casebook --help
                                                                                              
 Usage: casebook [OPTIONS] COMMAND [ARGS]...                                                   
                                                                                               
 Render, review, and edit YAML test cases locally.                                             
                                                                                               
╭─ Options ───────────────────────────────────────────────────────────────────────────────────╮
│ --version          Show the Casebook version and exit.                                      │
│ --help             Show this message and exit.                                              │
╰─────────────────────────────────────────────────────────────────────────────────────────────╯
╭─ Commands ──────────────────────────────────────────────────────────────────────────────────╮
│ serve  Start the local Casebook web UI.                                                     │
│ init   Create a new Casebook test case project.                                             │
╰─────────────────────────────────────────────────────────────────────────────────────────────╯

快速开始

创建一个新的 Casebook 项目:

casebook init my-casebook
cd my-casebook

启动本地用例工作台。推荐按需求目录或版本目录启动,避免历史需求互相干扰:

casebook serve releases/example

默认地址:

http://127.0.0.1:8089

也可以自动打开浏览器:

casebook serve releases/example --open

指定端口:

casebook serve releases/example --port 8090

初始化项目

casebook init <project> 会创建一个完整的用例项目脚手架:

my-casebook/
  AGENTS.md
  .agents/
    skills/
      casebook-test-cases/
        SKILL.md
  .vscode/
    settings.json
  docs/
    requirements/
      login.md
  releases/
    example/
      login.yaml
  schema/
    test-case-schema.json

这些文件分别负责:

  • docs/requirements/login.md:示例需求文档。
  • releases/example/login.yaml:由示例需求反向配套的 YAML 测试用例。
  • schema/test-case-schema.json:测试用例结构约束。
  • .agents/skills/casebook-test-cases/SKILL.md:AI 生成用例时需要遵循的技能包。
  • AGENTS.md:项目根目录 AI 入口,提示 AI 读取技能包和 schema。
  • .vscode/settings.json:让 VS Code YAML 插件自动关联 schema。

如果目标目录中已经存在同名文件,init 默认跳过,不会覆盖:

casebook init my-casebook

需要重置脚手架文件时,可以使用:

casebook init my-casebook --force

AI 用例生成工作流

推荐工作方式:

  1. 将产品需求、接口说明、交互规则或业务背景放入 docs/requirements/
  2. 让 AI 阅读 AGENTS.md.agents/skills/casebook-test-cases/SKILL.md
  3. AI 根据需求、技能包和 schema/test-case-schema.json 生成 YAML 用例。
  4. 将真实项目用例写入 releases/<版本或模块>/<功能>.yaml
  5. 使用 casebook serve releases/<需求目录> 查看、标记、编辑和执行当前需求范围内的用例。

示例目录中的 releases/example/ 只用于脚手架演示。真实项目用例建议放在更明确的目录中,例如:

releases/v1-auth/login.yaml
releases/v5-user-backend/package-management.yaml

使用时建议直接启动当前需求或版本目录:

casebook serve releases/v1-auth
casebook serve releases/v5-user-backend

用例格式

Casebook 读取符合以下结构的 YAML 文件:

metadata:
  module: "系统认证"
  feature: "用户登录"
  owner: "qa"
  last_reviewed: "2026-06-24"
  tags: [auth, login]

test_cases:
  - id: "TC_LOGIN_001"
    title: "有效用户名和密码登录成功"
    description: "验证用户使用正确的登录凭证可以成功进入系统。"
    priority: "P0"
    type: "functional"
    preconditions:
      - 用户已注册并处于正常可登录状态
    steps:
      - 输入有效用户名和对应密码
      - 点击登录按钮
    expected_results:
      - 登录成功,进入系统首页
      - 显示当前用户姓名和欢迎信息
    tags: [smoke, login]
    auto: true

字段约束以 schema/test-case-schema.json 为准。默认支持的优先级:

P0, P1, P2

默认支持的类型:

functional, ui, security, performance, accessibility, business, other, data-consistency

本地工作台

启动后,Casebook 提供一个本地 Web UI:

  • 左侧按目录展示 YAML 用例文件。
  • 中间展示当前文件的用例列表、统计、优先级和标签。
  • 用例行可以展开,直接查看前置条件、步骤和预期结果。
  • 可以用 Mark 标记需要关注或后续修改的用例。
  • 测试计划作为全局功能显示在工作区顶部,默认折叠,不影响用例评审。
  • 选择或创建测试计划后,可以逐条记录 Pass、Fail、Block。
  • 测试计划面板实时显示当前启动目录的用例总数、进度条、通过数、失败数、阻塞数和未执行数。
  • 展开用例后可以记录执行备注。
  • 点击 Edit 打开右侧编辑抽屉,并保存回 YAML 文件。

Casebook 会根据文件修改时间做编辑冲突检查。如果 YAML 文件在页面加载后被外部修改,保存时会提示冲突,避免覆盖他人的改动。

测试计划与用例执行

Casebook 将执行数据保存在独立文件中,不写入 YAML 用例定义。

test-runs/<run-id>.json

测试计划不是必选项。用例评审时可以完全不启用测试计划;需要进入执行阶段时,再展开顶部测试计划面板并创建或选择计划。

测试计划绑定当前 casebook serve <目录> 的启动目录。比如:

casebook serve releases/v1-auth

此时创建的测试计划只属于 releases/v1-auth,不会混入其他需求目录的计划。

每个测试计划会记录名称、范围、开始时间和每条用例的执行结果。用例结果以 文件路径#用例ID 作为 key:

{
  "run": {
    "id": "run-20260625093000-login-smoke",
    "name": "登录冒烟测试",
    "status": "in_progress",
    "scope": ["releases/v1-auth"],
    "started_at": "2026-06-25T01:30:00+00:00"
  },
  "results": {
    "releases/v1-auth/login.yaml#TC_LOGIN_001": {
      "status": "passed",
      "notes": "验证通过",
      "executed_at": "2026-06-25T01:35:00+00:00"
    }
  }
}

支持的执行状态:

passed, failed, blocked

未出现在 results 中的用例视为未执行。

命令参考

创建项目:

casebook init my-casebook

覆盖脚手架文件:

casebook init my-casebook --force

启动当前需求目录:

casebook serve releases/v1-auth

同时扫描多个目录:

casebook serve releases/v1 releases/v2

指定主机和端口:

casebook serve releases/v1-auth --host 127.0.0.1 --port 8090

禁用文件监听:

casebook serve releases/v1-auth --no-watch

项目状态文件

Casebook 的标记数据保存在项目根目录:

.casebook/marks.json

示例:

{
  "releases/example/login.yaml#TC_LOGIN_001": {
    "needs_update": true,
    "updated_at": "2026-06-24T02:00:00+00:00"
  }
}

这些状态不写入 YAML 用例文件,因此不会影响用例正文和 schema 校验。

执行数据保存在:

test-runs/*.json

这些文件是后续生成测试报告的重要数据来源。测试计划按启动目录隔离,适合围绕单个需求、版本或模块做执行统计。

开发

本地开发安装:

pip install -e .

创建演示项目:

casebook init /tmp/casebook-demo
cd /tmp/casebook-demo
casebook serve releases/example

在源码模式下也可以直接运行:

python -m casebook.cli init /tmp/casebook-demo
python -m casebook.cli serve releases/example

Download files

Download the file for your platform. If you're not sure which to choose, learn more about installing packages.

Source Distribution

casebook-0.2.0.tar.gz (46.4 kB view details)

Uploaded Source

Built Distribution

If you're not sure about the file name format, learn more about wheel file names.

casebook-0.2.0-py3-none-any.whl (46.3 kB view details)

Uploaded Python 3

File details

Details for the file casebook-0.2.0.tar.gz.

File metadata

  • Download URL: casebook-0.2.0.tar.gz
  • Upload date:
  • Size: 46.4 kB
  • Tags: Source
  • Uploaded using Trusted Publishing? No
  • Uploaded via: twine/6.2.0 CPython/3.13.5

File hashes

Hashes for casebook-0.2.0.tar.gz
Algorithm Hash digest
SHA256 83c02acbd9c24c233a8a0b14283e21184d8b76280709cd72865dc2c16ee52f50
MD5 9f563baa0151359a366fd8095af70b89
BLAKE2b-256 205186625450cb5609e6d5768575ccad5d1aa2ed63413806921ef58343f74da3

See more details on using hashes here.

File details

Details for the file casebook-0.2.0-py3-none-any.whl.

File metadata

  • Download URL: casebook-0.2.0-py3-none-any.whl
  • Upload date:
  • Size: 46.3 kB
  • Tags: Python 3
  • Uploaded using Trusted Publishing? No
  • Uploaded via: twine/6.2.0 CPython/3.13.5

File hashes

Hashes for casebook-0.2.0-py3-none-any.whl
Algorithm Hash digest
SHA256 d178bd01c32a282be33d6dc29b1f443e408169ae5361726c50558191e7d49507
MD5 7d3924eb2afd2964a019c42c8085082f
BLAKE2b-256 50c61f590d442d861b11e9711d1d2524db4f7b068c6179dedc84b6ce568aaa50

See more details on using hashes here.

Release history Release notifications | RSS feed

0.9.0

2 files

0.8.0

2 files

0.7.0

2 files

0.6.0

2 files

0.5.0

2 files

0.4.0

2 files

0.3.0

2 files

This release

0.2.0 This release

2 files

0.1.0

2 files

Anthropic, PBC Visionary sponsor Bloomberg Visionary sponsor Hudson River Trading Visionary sponsor Meta Visionary sponsor NVIDIA Visionary sponsor Microsoft Sustainability sponsor Depot Continuous Integration AWS Cloud computing and Security Sponsor Datadog Monitoring Fastly CDN Google Download Analytics Sentry Error logging StatusPage Status page