自动化测试 / 系统课时

规划综合测试项目

规划综合测试项目

综合测试项目最容易失控的地方不是脚本数量,而是范围、浏览器、账号、数据和交付标准彼此脱节。这里把五类约束压成一张可执行计划,并用配置与校验脚本让团队在写第一条 Selenium 用例前就能发现遗漏。

学习目标

  • 把登录、查询与 CRUD 范围写成可验收的测试清单。
  • 制定浏览器矩阵、账号隔离和测试数据命名规则。
  • 用配置文件与校验脚本固化 CI 门槛和交付物。

把范围写成可验收清单

先把“要测什么”改写成可观察结果。综合项目可把订单管理作为主链,并给每个能力一个唯一验收信号;只有能由页面状态或后端结果确认的条目才进入 Selenium E2E。

能力 最小场景 通过条件 优先级
登录 有效管理员账号登录 出现用户菜单且 URL 进入 /dashboard P0
查询 按唯一订单号检索 结果表出现目标订单号 P0
新增 创建一条测试订单 详情页显示新订单号 P0
修改 把状态从 Draft 改为 Approved 刷新后仍显示 Approved P0
删除 删除本次创建的数据 再次查询为空 P0
权限 viewer 尝试进入编辑页 编辑入口不可见或服务端拒绝 P1

范围边界也要写出来:支付网关、邮件投递和第三方风控不在本项目做真实联调,E2E 只验证应用对这些依赖返回结果后的页面行为。这样失败时不会把外部服务波动误判为 Selenium 脚本故障。

固化浏览器、账号和数据矩阵

PR 阶段只跑 Chrome 最新稳定版以控制反馈时间;夜间任务补 Firefox 最新稳定版;Windows 周期任务补 Edge 最新稳定版。Selenium Python Bindings 4.x 可直接通过 Selenium Manager 解析本机兼容驱动,CI 镜像仍应固定浏览器安装策略,避免同一提交因浏览器自动升级产生不可重复结果。

账号至少准备 e2e-admin-01、e2e-editor-01、e2e-viewer-01 三个独立账户。并行执行时不要让多个 worker 共用同一账号;数据命名空间使用 run-{CI_RUN_ID}-gw{WORKER},业务记录额外写入 owner=selenium-e2e,便于失败后批量清理。

综合测试项目中范围、浏览器矩阵、账号、数据命名空间与交付门槛的关系

用配置文件把约束变成项目输入

下面的 e2e-plan.json 是项目自定义配置,不是 Selenium 标准 capability。它把必须浏览器、周期浏览器、账号池、数据 owner 和产物保留天数放进版本库,评审时能直接看到测试策略变化。

json
{
  "requiredBrowsers": ["chrome"],
  "scheduledBrowsers": ["firefox", "edge"],
  "accounts": [
    "e2e-admin-01",
    "e2e-editor-01",
    "e2e-viewer-01"
  ],
  "dataOwner": "selenium-e2e",
  "artifactRetentionDays": 14
}

配置生效的最低验证是检查必跑浏览器、账号唯一性和保留期。把下面脚本保存为 validate_plan.py,与配置文件放在同一目录后执行。

python
import json
from pathlib import Path

plan = json.loads(Path("e2e-plan.json").read_text(encoding="utf-8"))

assert "chrome" in plan["requiredBrowsers"], "Chrome must run on every PR"
assert len(plan["accounts"]) == len(set(plan["accounts"])), "accounts must be unique"
assert plan["dataOwner"] == "selenium-e2e"
assert plan["artifactRetentionDays"] >= 7

print(
    f"plan ok: {len(plan['requiredBrowsers'])} required browser, "
    f"{len(plan['scheduledBrowsers'])} scheduled browsers, "
    f"{len(plan['accounts'])} isolated accounts"
)

预期输出:

text
plan ok: 1 required browser, 2 scheduled browsers, 3 isolated accounts

定义交付门槛与失败产物

PR 的 P0 集合应要求 100% 通过,不要用自动重试把红灯洗成绿灯;若团队仍需重试来收集波动证据,应同时保留第一次失败记录。每次 CI 至少归档 junit.xml、失败截图和浏览器控制台日志,建议保留 14 天,与上面的配置一致。

验收时逐项检查:P0 五个能力都有用例;PR、nightly、weekly 三类运行入口已定义;三个角色账号互不复用;测试数据能按 owner 和 run namespace 清理;任一失败都能在同一次 CI 产物中找到用例名、截图和日志。五项全部满足后,项目才算从“脚本集合”变成可持续运行的测试工程。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

规划综合测试项目

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通