自动化测试 / 系统课时
规划综合测试项目
规划综合测试项目
综合测试项目最容易失控的地方不是脚本数量,而是范围、浏览器、账号、数据和交付标准彼此脱节。这里把五类约束压成一张可执行计划,并用配置与校验脚本让团队在写第一条 Selenium 用例前就能发现遗漏。
学习目标
- 把登录、查询与 CRUD 范围写成可验收的测试清单。
- 制定浏览器矩阵、账号隔离和测试数据命名规则。
- 用配置文件与校验脚本固化 CI 门槛和交付物。
把范围写成可验收清单
先把“要测什么”改写成可观察结果。综合项目可把订单管理作为主链,并给每个能力一个唯一验收信号;只有能由页面状态或后端结果确认的条目才进入 Selenium E2E。
| 能力 | 最小场景 | 通过条件 | 优先级 |
|---|---|---|---|
| 登录 | 有效管理员账号登录 | 出现用户菜单且 URL 进入 /dashboard |
P0 |
| 查询 | 按唯一订单号检索 | 结果表出现目标订单号 | P0 |
| 新增 | 创建一条测试订单 | 详情页显示新订单号 | P0 |
| 修改 | 把状态从 Draft 改为 Approved |
刷新后仍显示 Approved |
P0 |
| 删除 | 删除本次创建的数据 | 再次查询为空 | P0 |
| 权限 | viewer 尝试进入编辑页 | 编辑入口不可见或服务端拒绝 | P1 |
范围边界也要写出来:支付网关、邮件投递和第三方风控不在本项目做真实联调,E2E 只验证应用对这些依赖返回结果后的页面行为。这样失败时不会把外部服务波动误判为 Selenium 脚本故障。
固化浏览器、账号和数据矩阵
PR 阶段只跑 Chrome 最新稳定版以控制反馈时间;夜间任务补 Firefox 最新稳定版;Windows 周期任务补 Edge 最新稳定版。Selenium Python Bindings 4.x 可直接通过 Selenium Manager 解析本机兼容驱动,CI 镜像仍应固定浏览器安装策略,避免同一提交因浏览器自动升级产生不可重复结果。
账号至少准备 e2e-admin-01、e2e-editor-01、e2e-viewer-01 三个独立账户。并行执行时不要让多个 worker 共用同一账号;数据命名空间使用 run-{CI_RUN_ID}-gw{WORKER},业务记录额外写入 owner=selenium-e2e,便于失败后批量清理。

用配置文件把约束变成项目输入
下面的 e2e-plan.json 是项目自定义配置,不是 Selenium 标准 capability。它把必须浏览器、周期浏览器、账号池、数据 owner 和产物保留天数放进版本库,评审时能直接看到测试策略变化。
{
"requiredBrowsers": ["chrome"],
"scheduledBrowsers": ["firefox", "edge"],
"accounts": [
"e2e-admin-01",
"e2e-editor-01",
"e2e-viewer-01"
],
"dataOwner": "selenium-e2e",
"artifactRetentionDays": 14
}配置生效的最低验证是检查必跑浏览器、账号唯一性和保留期。把下面脚本保存为 validate_plan.py,与配置文件放在同一目录后执行。
import json
from pathlib import Path
plan = json.loads(Path("e2e-plan.json").read_text(encoding="utf-8"))
assert "chrome" in plan["requiredBrowsers"], "Chrome must run on every PR"
assert len(plan["accounts"]) == len(set(plan["accounts"])), "accounts must be unique"
assert plan["dataOwner"] == "selenium-e2e"
assert plan["artifactRetentionDays"] >= 7
print(
f"plan ok: {len(plan['requiredBrowsers'])} required browser, "
f"{len(plan['scheduledBrowsers'])} scheduled browsers, "
f"{len(plan['accounts'])} isolated accounts"
)预期输出:
plan ok: 1 required browser, 2 scheduled browsers, 3 isolated accounts定义交付门槛与失败产物
PR 的 P0 集合应要求 100% 通过,不要用自动重试把红灯洗成绿灯;若团队仍需重试来收集波动证据,应同时保留第一次失败记录。每次 CI 至少归档 junit.xml、失败截图和浏览器控制台日志,建议保留 14 天,与上面的配置一致。
验收时逐项检查:P0 五个能力都有用例;PR、nightly、weekly 三类运行入口已定义;三个角色账号互不复用;测试数据能按 owner 和 run namespace 清理;任一失败都能在同一次 CI 产物中找到用例名、截图和日志。五项全部满足后,项目才算从“脚本集合”变成可持续运行的测试工程。