@educa-corp/sdd-framework 0.9.6 → 0.9.8
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- package/bin/lint-trace.js +4 -4
- package/bin/qc-base-map.json +13 -11
- package/bin/self-check.js +497 -16
- package/bin/trace-schema.json +3226 -2656
- package/core/FRAMEWORK_VERSION +1 -1
- package/core/commands/amend-prd.md +7 -1
- package/core/commands/debug.md +8 -2
- package/core/commands/define-product.md +38 -1
- package/core/commands/dev-gen-test.md +9 -3
- package/core/commands/dev-run-test.md +8 -2
- package/core/commands/dev-smoke-test.md +7 -1
- package/core/commands/extend-prd.md +7 -1
- package/core/commands/fix-bug.md +11 -5
- package/core/commands/generate-architecture.md +9 -1
- package/core/commands/generate-bdd.md +45 -5
- package/core/commands/generate-code.md +43 -4
- package/core/commands/generate-design-spec.md +7 -1
- package/core/commands/generate-prd.md +9 -1
- package/core/commands/generate-spec-manifest.md +7 -1
- package/core/commands/generate-tech-docs.md +41 -1
- package/core/commands/learn.md +7 -1
- package/core/commands/map-testids.md +11 -5
- package/core/commands/propose-scenario.md +7 -1
- package/core/commands/qc-analyze.md +12 -6
- package/core/commands/qc-automation-assess.md +356 -0
- package/core/commands/qc-design-script.md +430 -0
- package/core/commands/qc-design-test.md +98 -20
- package/core/commands/qc-plan.md +9 -3
- package/core/commands/qc-report.md +92 -77
- package/core/commands/qc-review-script.md +342 -0
- package/core/commands/{qc-review.md → qc-review-testcase.md} +86 -54
- package/core/commands/qc-run-manualtest.md +401 -0
- package/core/commands/qc-run-script.md +421 -0
- package/core/commands/refine-prd.md +7 -1
- package/core/commands/report-bug.md +9 -3
- package/core/commands/review-code.md +9 -3
- package/core/commands/review-context.md +11 -3
- package/core/commands/review-tech-docs.md +11 -3
- package/core/commands/setup-ai-first.md +7 -1
- package/core/commands/validate-traces.md +10 -4
- package/core/modules/qc-playwright-ts/module.yaml +13 -0
- package/core/modules/qc-playwright-ts/stack-profile.yaml +99 -0
- package/core/modules/qc-wdio-appium/module.yaml +20 -0
- package/core/modules/qc-wdio-appium/stack-profile.yaml +107 -0
- package/core/rules/workflow.md +2 -2
- package/core/skills/qc/_shared/self-review-principles.md +2 -2
- package/core/skills/qc/qa-analyst/DOC_GAP.template.md +1 -1
- package/core/skills/qc/qa-analyst/data-flow.md +1 -1
- package/core/skills/qc/qa-analyst/spec-issue-reporter.md +1 -1
- package/core/skills/qc/qa-automation-assess/matrix.md +123 -0
- package/core/skills/qc/qa-designer/e2e/journey.md +1 -1
- package/core/skills/qc/qa-designer/exploratory/explore-to-functional.md +1 -1
- package/core/skills/qc/{qa-runner → qa-designer}/exploratory/session.md +8 -2
- package/core/skills/qc/qa-designer/functional/api.md +2 -2
- package/core/skills/qc/qa-designer/functional/gui-feature.md +1 -1
- package/core/skills/qc/qa-designer/functional/gui-screen.md +1 -1
- package/core/skills/qc/qa-designer/functional/job.md +128 -0
- package/core/skills/qc/qa-designer/integration/api.md +2 -2
- package/core/skills/qc/qa-designer/integration/db.md +2 -2
- package/core/skills/qc/qa-designer/integration/gui.md +1 -1
- package/core/skills/qc/qa-designer/integration/{kafka.md → queue.md} +21 -5
- package/core/skills/qc/qa-designer/non-functional.md +1 -1
- package/core/skills/qc/qa-designer/shared/skill-decision-tree.md +17 -0
- package/core/skills/qc/qa-designer/shared/tc-metadata-format.md +28 -6
- package/core/skills/qc/qa-reviewer/script/_shared/review-rules.md +121 -0
- package/core/skills/qc/qa-reviewer/script/api/auth.md +49 -0
- package/core/skills/qc/qa-reviewer/script/api/endpoint.md +89 -0
- package/core/skills/qc/qa-reviewer/script/api/security.md +46 -0
- package/core/skills/qc/qa-reviewer/script/exploratory.md +3 -3
- package/core/skills/qc/qa-reviewer/script/mobile/e2e.md +41 -0
- package/core/skills/qc/qa-reviewer/script/mobile/functional.md +90 -0
- package/core/skills/qc/qa-reviewer/script/mobile/integration.md +41 -0
- package/core/skills/qc/qa-reviewer/script/mobile/non-functional.md +43 -0
- package/core/skills/qc/qa-reviewer/script/web/e2e.md +46 -0
- package/core/skills/qc/qa-reviewer/script/web/functional.md +111 -0
- package/core/skills/qc/qa-reviewer/script/web/integration.md +46 -0
- package/core/skills/qc/qa-reviewer/script/web/non-functional.md +49 -0
- package/core/skills/qc/qa-reviewer/shared/read-doc-gap-inputs.md +1 -1
- package/core/skills/qc/qa-reviewer/shared/review-file-template.md +29 -10
- package/core/skills/qc/qa-reviewer/test-case/e2e.md +2 -2
- package/core/skills/qc/qa-reviewer/test-case/exploratory.md +1 -1
- package/core/skills/qc/qa-reviewer/test-case/functional.md +2 -2
- package/core/skills/qc/qa-reviewer/test-case/integration.md +2 -2
- package/core/skills/qc/qa-reviewer/test-case/non-functional.md +2 -2
- package/core/skills/qc/qa-script-designer/_shared/api-conventions.md +94 -0
- package/core/skills/qc/qa-script-designer/_shared/file-naming-and-folders.md +109 -0
- package/core/skills/qc/qa-script-designer/_shared/mobile-conventions.md +196 -0
- package/core/skills/qc/qa-script-designer/_shared/web-conventions.md +257 -0
- package/core/skills/qc/qa-script-designer/api/auth.md +43 -0
- package/core/skills/qc/qa-script-designer/api/endpoint.md +61 -0
- package/core/skills/qc/qa-script-designer/api/security.md +41 -0
- package/core/skills/qc/qa-script-designer/mobile/e2e.md +35 -0
- package/core/skills/qc/qa-script-designer/mobile/functional/feature.md +32 -0
- package/core/skills/qc/qa-script-designer/mobile/functional/screen.md +42 -0
- package/core/skills/qc/qa-script-designer/mobile/integration.md +39 -0
- package/core/skills/qc/qa-script-designer/mobile/non-functional.md +39 -0
- package/core/skills/qc/qa-script-designer/web/e2e.md +36 -0
- package/core/skills/qc/qa-script-designer/web/functional/api.md +39 -0
- package/core/skills/qc/qa-script-designer/web/functional/gui-feature.md +34 -0
- package/core/skills/qc/qa-script-designer/web/functional/gui-screen.md +42 -0
- package/core/skills/qc/qa-script-designer/web/integration.md +43 -0
- package/core/skills/qc/qa-script-designer/web/non-functional.md +42 -0
- package/core/skills/qc/qa-script-runner/mobile/run.md +38 -0
- package/core/skills/qc/qa-script-runner/report.md +41 -0
- package/core/skills/qc/qa-script-runner/web/run.md +48 -0
- package/core/steps/context-loader.md +1 -1
- package/core/steps/gate.md +7 -1
- package/core/steps/qc-scope.md +45 -2
- package/core/steps/qc-stamp.md +4 -4
- package/core/steps/report-footer.md +10 -9
- package/docs/02-concepts/pipeline-steps/07-dev-selftest.md +1 -1
- package/docs/02-concepts/pipeline-steps/08-qc-automation.md +13 -12
- package/docs/02-concepts/pipeline-steps/10-feedback-loop.md +3 -3
- package/docs/02-concepts/traceability.md +1 -1
- package/docs/03-guides/developer.md +1 -1
- package/docs/03-guides/tester-qa.md +40 -11
- package/docs/04-reference/commands.md +4 -2
- package/docs/04-reference/modules.md +2 -1
- package/docs/04-reference/trace-schema.md +4 -4
- package/docs/explain/17-qc-design-test.md +5 -5
- package/docs/explain/18-qc-review.md +42 -20
- package/docs/explain/19-qc-run-test.md +13 -10
- package/docs/explain/20-qc-report.md +3 -3
- package/docs/explain/23-fix-bug.md +2 -2
- package/docs/explain/README.md +2 -2
- package/docs/plans/qc-surgery/01-checklist.md +86 -21
- package/docs/plans/qc-surgery/PLAN_v2.md +295 -0
- package/docs/plans/qc-surgery/exec-S-ap-stack-typescript.md +420 -0
- package/docs/plans/qc-surgery/exec-S0-guard-cam-stack-cu.md +400 -0
- package/docs/plans/qc-surgery/exec-S1-hai-module-thay-qc-playwright.md +267 -0
- package/docs/plans/qc-surgery/exec-S2-qa-runner-thanh-script-designer-runner.md +340 -0
- package/docs/plans/qc-surgery/exec-S3-viet-lai-tieu-chi-review-script.md +322 -0
- package/docs/plans/qc-surgery/exec-S5-an-theo-don-dau-vet-stack-cu.md +292 -0
- package/package.json +1 -1
- package/core/commands/qc-run-test.md +0 -561
- package/core/modules/qc-playwright/stack-profile.yaml +0 -66
- package/core/skills/qc/qa-reviewer/script/e2e.md +0 -95
- package/core/skills/qc/qa-reviewer/script/functional.md +0 -109
- package/core/skills/qc/qa-reviewer/script/integration.md +0 -99
- package/core/skills/qc/qa-reviewer/script/non-functional.md +0 -134
- package/core/skills/qc/qa-runner/e2e.md +0 -49
- package/core/skills/qc/qa-runner/functional/api.md +0 -35
- package/core/skills/qc/qa-runner/functional/gui-feature.md +0 -57
- package/core/skills/qc/qa-runner/functional/gui-screen.md +0 -61
- package/core/skills/qc/qa-runner/integration.md +0 -47
- package/core/skills/qc/qa-runner/non-functional.md +0 -49
- package/core/skills/qc/qa-runner/report/report.md +0 -37
|
@@ -1,561 +0,0 @@
|
|
|
1
|
-
---
|
|
2
|
-
version: 1.0
|
|
3
|
-
updated: 2026-06-11
|
|
4
|
-
ported_from: ai-automation-qc-base
|
|
5
|
-
---
|
|
6
|
-
|
|
7
|
-
# /qc-run-test — QC Script Generation & Run (ghi qc_status)
|
|
8
|
-
|
|
9
|
-
> Stage 5 của QC automation pipeline native (qc-analyze → qc-plan → qc-design-test → qc-review → qc-run-test → qc-report). Port từ qa-runner của team QC. Sinh & chạy Python pytest-playwright từ `.Test.md` đã review, rồi ghi `qc_status` **chính thức** vào trace TSV.
|
|
10
|
-
|
|
11
|
-
## Gate
|
|
12
|
-
|
|
13
|
-
*Checkpoint: **chặn CỨNG** — ghi đè script Python đã có → XOÁ bản sửa `script-bug` mà chính lệnh này bảo QC tự sửa bằng tay. `--yes` KHÔNG bỏ qua được (gate Bước 3a).*
|
|
14
|
-
|
|
15
|
-
*Mức cứng chỉ áp khi **sinh lại** file script đã tồn tại. Chạy lại test trên script không đổi — việc thường nhất của trạm này — **không** chạm CHECKPOINT cứng. Xem §Chạy lại.*
|
|
16
|
-
|
|
17
|
-
# Gate — Quy trình vào chuẩn cho mọi lệnh
|
|
18
|
-
|
|
19
|
-
Mọi lệnh PHẢI chạy gate này trước khi thực thi phần logic riêng của nó.
|
|
20
|
-
|
|
21
|
-
## Bước 0 — Kiểm tra chế độ Sub-Agent
|
|
22
|
-
|
|
23
|
-
Trước tiên, kiểm tra xem `$ARGUMENTS` có phải là payload JSON từ một orchestrator hay không:
|
|
24
|
-
|
|
25
|
-
1. Thử parse `$ARGUMENTS` dưới dạng JSON.
|
|
26
|
-
2. Nếu parse thành công **và** chứa `"_agent_mode": true`:
|
|
27
|
-
- **Bỏ qua hoàn toàn Bước 1, 2 và 3 của Gate này.**
|
|
28
|
-
- Đặt target file = `payload.target_file`
|
|
29
|
-
- Đặt loaded context = `payload.context` (KHÔNG chạy context-loader.md)
|
|
30
|
-
- Đặt phạm vi UC = `payload.uc_id` (chỉ xử lý UC này)
|
|
31
|
-
- Đặt line range = `payload.uc_section` (chỉ đọc đúng section đó của PRD)
|
|
32
|
-
- Đặt dimension = `payload.dimension` nếu có (lệnh review per-UC: chỉ review đúng lăng kính này)
|
|
33
|
-
- Đi thẳng tới phần logic riêng của lệnh.
|
|
34
|
-
3. Nếu `$ARGUMENTS` không phải JSON hoặc không có `_agent_mode` → tiếp tục sang Bước 1 (chế độ thường).
|
|
35
|
-
|
|
36
|
-
## Bước 0-B — Ghi nhận Model *(KHÔNG chặn)*
|
|
37
|
-
|
|
38
|
-
*Bỏ qua nếu `_agent_mode: true` (sub-agent — orchestrator đã ghi nhận rồi).*
|
|
39
|
-
|
|
40
|
-
Ghi lại **model mà bạn — agent đang chạy lệnh này — thực sự đang dùng**, rồi mang nó vào
|
|
41
|
-
dòng `Model:` của report cuối (xem `report-footer`). Nếu bạn biết mình **không** phải một
|
|
42
|
-
model Opus, gắn thêm cảnh báo ngay ở dòng đó.
|
|
43
|
-
|
|
44
|
-
**KHÔNG hỏi người dùng. KHÔNG chờ. KHÔNG dừng.**
|
|
45
|
-
|
|
46
|
-
> **Vì sao bước này từng là prompt chặn, và vì sao bỏ (GAPS-v3 G41):** bản cũ hiện khối
|
|
47
|
-
> `⚙️ MODEL CHECK` rồi chờ `Y/S/N`. Ba vấn đề cùng chỉ một hướng:
|
|
48
|
-
> **(1)** nó hỏi người dùng thứ mà **agent đã biết chính xác**;
|
|
49
|
-
> **(2)** câu trả lời **không kiểm chứng được** — gõ `Y` xong vẫn đang chạy Haiku thì không
|
|
50
|
-
> gì phát hiện;
|
|
51
|
-
> **(3)** **cả `Y` lẫn `S` đều đi tiếp** — cách duy nhất để nó dừng là tự nguyện gõ `N`.
|
|
52
|
-
> Tức nó **không chặn được ai**, mà tốn một lần chặn ở **mọi** lệnh. Một feature đi hết
|
|
53
|
-
> pipeline dùng 20 lệnh; 30/32 lệnh chạy gate. Hai mươi lần bấm cho một tín hiệu tự-khai
|
|
54
|
-
> không kiểm chứng được — và chính cái giá đó làm mòn CHECKPOINT ở Bước 3, cổng có giá trị thật.
|
|
55
|
-
>
|
|
56
|
-
> Khai báo trong report **mạnh hơn** hỏi: đúng nguồn (agent, không phải người), và nằm
|
|
57
|
-
> **cạnh kết quả** để cân nhắc, thay vì nằm trước khi có kết quả để bấm cho xong.
|
|
58
|
-
|
|
59
|
-
**Vẫn khuyến nghị Opus:** phân tích spec, review kiến trúc và sinh code đòi hỏi suy luận sâu;
|
|
60
|
-
model nhỏ hơn dễ bỏ sót edge case và vi phạm kiến trúc. Đổi: `/model` → chọn Opus.
|
|
61
|
-
|
|
62
|
-
## Bước 1 — Xác định Target File
|
|
63
|
-
|
|
64
|
-
0. **Tách cờ trước khi resolve target.** `$ARGUMENTS` có thể lẫn các `--flag` (vd `--phase=integration`, `--comment`, `--fix`). **Loại bỏ mọi token bắt đầu bằng `--`** ra khỏi phần dùng để tìm target — chỉ giữ phần path/UC-ID/ticket. (Các flag đó do phần logic riêng của lệnh parse ở bước sau, KHÔNG phải tên file.)
|
|
65
|
-
1. Nếu `$ARGUMENTS` (đã tách cờ) được cung cấp và trỏ tới một file tồn tại → dùng trực tiếp làm target.
|
|
66
|
-
2. Nếu `$ARGUMENTS` là một **UC-ID / ticket ID / tên rút gọn** (không có path) → phân giải thành file bằng cách glob theo bố cục feature-package. `{prd-slug}` lúc này **chưa biết**, nên dùng wildcard `*` cho segment đó, và `**` đệ quy dưới `bdd/` để phủ hết các thư mục con theo platform (`bdd/web/`, `bdd/app/`, `bdd/system/`):
|
|
67
|
-
- **Lệnh BDD** (target là `.feature`): `{specs_dir}/{domain}/*/bdd/**/{UC-ID}*.feature` — hoặc `{specs_dir}/*/*/bdd/**/{UC-ID}*.feature` nếu domain cũng chưa biết. Nếu lệnh ngụ ý một platform/scope cụ thể (vd: system tech-doc cần BDD `system/`), ưu tiên kết quả trong thư mục con platform đó.
|
|
68
|
-
- **Lệnh PRD** (target là file PRD `{TICKET-ID}-{prd-slug}.md` — file `.md` duy nhất ở gốc feature folder, cạnh `bdd/`): `{specs_dir}/{domain}/*/{TICKET-ID}*.md` nếu biết TICKET-ID; nếu không, `{specs_dir}/{domain}/*/*.md` (khớp feature folder có id tương ứng), hoặc `{specs_dir}/*/*/*.md` nếu domain cũng chưa biết. *(Glob `*/*.md` ở cấp gốc folder chỉ khớp PRD — tech-docs/design-spec `.md` nằm sâu hơn trong thư mục con.)*
|
|
69
|
-
- **Lệnh tech-docs** — target là tech-doc **gộp cấp PRD** `{TICKET-ID}-tech-design.md` (MỘT doc phủ nhiều UC; danh sách UC nằm ở `@trace.ucs`). Vì tên file mang `{TICKET-ID}` chứ **không** mang `{UC-ID}`, phải tách trước khi glob:
|
|
70
|
-
- `$ARGUMENTS` là **UC-ID** (`{TICKET-ID}-UC{N}`) → lấy `{TICKET-ID}` = phần **trước** `-UC`, rồi glob `{specs_dir}/{domain}/*/tech-docs/{TICKET-ID}-tech-design.md`.
|
|
71
|
-
- `$ARGUMENTS` là **TICKET-ID** → glob trực tiếp như trên.
|
|
72
|
-
- Chưa biết domain → `{specs_dir}/*/*/tech-docs/{TICKET-ID}-tech-design.md`.
|
|
73
|
-
- Vẫn không khớp → glob rộng `{specs_dir}/*/*/tech-docs/*tech-design*.md` rồi liệt kê để người dùng chọn.
|
|
74
|
-
*(Đừng glob `{UC-ID}*-tech-design*.md` — nó nở thành `FT-001-UC1*-tech-design*.md` và **không bao giờ** khớp `FT-001-tech-design.md`.)*
|
|
75
|
-
- **Lệnh design-spec**: `{specs_dir}/{domain}/*/design-spec/{TICKET-ID}*.md`.
|
|
76
|
-
|
|
77
|
-
Khi một file khớp: đặt nó làm target **và** ghi lại `domain` + `prd_slug` từ path của nó (theo quy tắc trích xuất trong `context-loader.md` Bước 1 — `prd_slug` = segment đầu tiên sau `{specs_dir}/{domain}/`). Mọi path mà lệnh đọc/ghi về sau (BDD/tech-docs/design-spec/trace cùng cấp) đều dùng **`prd_slug` đã phân giải đó**, nên tất cả artifact nằm chung một feature package. Nếu nhiều file khớp (vd: nhiều platform), chọn theo platform/scope của lệnh hoặc liệt kê ra và hỏi.
|
|
78
|
-
3. Nếu `$ARGUMENTS` rỗng hoặc không tìm thấy file khớp:
|
|
79
|
-
- Liệt kê các file trong thư mục liên quan của lệnh này (vd: `specs/*/*/*.md` — file PRD ở gốc mỗi feature folder — cho lệnh PRD, `specs/*/*/bdd/**/*.feature` cho lệnh BDD).
|
|
80
|
-
- Hiển thị danh sách cho người dùng và hỏi: "Bạn muốn làm việc với file nào? (Nhập số thứ tự hoặc tên file)"
|
|
81
|
-
- Chờ người dùng chọn rồi mới tiếp tục.
|
|
82
|
-
|
|
83
|
-
## Bước 2 — Chạy Context Loader
|
|
84
|
-
|
|
85
|
-
Nạp toàn bộ context của dự án bằng cách làm theo quy trình trong `steps/context-loader.md`.
|
|
86
|
-
Lưu toàn bộ context đã nạp vào bộ nhớ để dùng xuyên suốt phiên làm việc của lệnh.
|
|
87
|
-
|
|
88
|
-
## Bước 3 — CHECKPOINT
|
|
89
|
-
|
|
90
|
-
*Bỏ qua nếu `_agent_mode: true`.*
|
|
91
|
-
|
|
92
|
-
### 3a — Lệnh này có phải chặn không?
|
|
93
|
-
|
|
94
|
-
| Mức | Lệnh nào | `--yes` bỏ qua được? |
|
|
95
|
-
|---|---|:---:|
|
|
96
|
-
| **Không chặn** | Lệnh read-only: `/review-code` · `/validate-traces` · `/debug` · `/review-context` · `/review-tech-docs` | — (vốn không có) |
|
|
97
|
-
| **Chặn thường** | Mọi lệnh sinh/sửa artifact | ✅ |
|
|
98
|
-
| **Chặn CỨNG** | Ghi đè file đã tồn tại · `--resume` áp findings · migrate · prune | ❌ **không bao giờ** |
|
|
99
|
-
|
|
100
|
-
`--yes` trong `$ARGUMENTS` → bỏ qua CHECKPOINT mức *chặn thường*. (Bước 1 đã tách mọi token
|
|
101
|
-
`--` khỏi phần resolve target, nên cờ này không ảnh hưởng việc tìm file.) Mở đường chạy
|
|
102
|
-
headless: `claude -p "/generate-code UC1 --yes"`.
|
|
103
|
-
|
|
104
|
-
> **KHÔNG tự suy mức từ bảng này.** Mỗi lệnh **tự khai** mức của nó ở một dòng `*Checkpoint: …*`
|
|
105
|
-
> ngay dưới `## Gate` của chính nó — đọc dòng đó, đừng suy diễn. Bảng trên chỉ giải thích ba mức
|
|
106
|
-
> **nghĩa là gì**.
|
|
107
|
-
> Nguồn máy đọc: `bin/trace-schema.json` → `gate.checkpoint_levels`; `self-check` **R11** fail
|
|
108
|
-
> build nếu nhãn trong file lệnh lệch với schema, hoặc nếu một lệnh `hard`/`none` thiếu nhãn.
|
|
109
|
-
> *(Lệnh không có dòng nào = mức **chặn thường**, mặc định.)*
|
|
110
|
-
|
|
111
|
-
> **Mức *không chặn* là thực thi đúng miễn trừ mà `rules/workflow.md` đã cấp từ trước** —
|
|
112
|
-
> trước G41 file đó viết *"read-only commands may skip CHECKPOINT"* còn gate thì luôn đòi.
|
|
113
|
-
> Hai file cùng được nạp vào mọi lệnh mà nói ngược nhau; agent theo cái nào là tuỳ lúc.
|
|
114
|
-
|
|
115
|
-
### 3b — In gì
|
|
116
|
-
|
|
117
|
-
**KHÔNG lặp lại những gì `[CTX LOADED]` vừa in.** Recap của context-loader (Bước 7) đã hiện
|
|
118
|
-
Stack · Platform · Layers · CLAUDE.md · Dict · Entities · Lessons · Service · Status ngay phía
|
|
119
|
-
trên. CHECKPOINT chỉ thêm **một** thông tin mới là `Target`.
|
|
120
|
-
|
|
121
|
-
**Mọi thứ sạch** — recap báo `Status: FULL`, không cờ nào bật → in đúng hai dòng:
|
|
122
|
-
|
|
123
|
-
```
|
|
124
|
-
CHECKPOINT — Target: {resolved file path}
|
|
125
|
-
Tiếp tục? (Y/N)
|
|
126
|
-
```
|
|
127
|
-
|
|
128
|
-
**Có bất thường** → thêm một dòng cho **mỗi** trạng thái, nặng nhất lên đầu:
|
|
129
|
-
|
|
130
|
-
```
|
|
131
|
-
CHECKPOINT
|
|
132
|
-
🔴 Service : unresolved — {lý do context-loader đã ghi}
|
|
133
|
-
⚠️ CLAUDE.md: service overlay THIẾU — dùng root (code sinh ra có thể sai stack)
|
|
134
|
-
⚠️ Target : resolve bằng wildcard — {n} file khớp, chọn {file}
|
|
135
|
-
⚠️ Module : not configured — code sinh ra sẽ dùng default
|
|
136
|
-
Status : PARTIAL — thiếu: {danh sách}
|
|
137
|
-
Target : {resolved file path}
|
|
138
|
-
Tiếp tục? (Y/N)
|
|
139
|
-
```
|
|
140
|
-
|
|
141
|
-
### 3c — Cờ nào bật, cờ nào KHÔNG
|
|
142
|
-
|
|
143
|
-
Mỗi dòng ⚠️/🔴 phải ứng với một trạng thái **context-loader đã tính rồi** — không phát minh
|
|
144
|
-
điều kiện mới, chỉ mang thứ đang bị giấu lên chỗ người dùng phải quyết định:
|
|
145
|
-
|
|
146
|
-
| Bật cờ khi | Nguồn | Mức |
|
|
147
|
-
|---|---|:---:|
|
|
148
|
-
| `active_service = unresolved` | context-loader Bước 2b/2c/Fallback | 🔴 |
|
|
149
|
-
| `Status = MINIMAL` | recap Bước 7 | 🔴 |
|
|
150
|
-
| `Status = PARTIAL` | recap Bước 7 | ⚠️ |
|
|
151
|
-
| CLAUDE.md thiếu, hoặc service overlay thiếu | context-loader Bước 3 | ⚠️ |
|
|
152
|
-
| Target resolve qua wildcard, hoặc nhiều file khớp mà lệnh tự chọn | Bước 1 ở trên | ⚠️ |
|
|
153
|
-
| `module` không cấu hình | recap Bước 7 | ⚠️ |
|
|
154
|
-
|
|
155
|
-
**KHÔNG bật cờ cho:** `Lessons: chưa có` · `Dict: missing` · `Entities: missing`. Đó là
|
|
156
|
-
*"dự án chưa điền"*, không phải *"có gì đó sai"* — chúng ở lại trong recap.
|
|
157
|
-
|
|
158
|
-
> **Nguyên tắc một câu:** cờ dành cho thứ **framework không chắc chắn hoặc đã phải đoán**,
|
|
159
|
-
> không dành cho thứ **người dùng chưa làm**. Đẩy hết mọi thứ lên thì CHECKPOINT lại đầy như
|
|
160
|
-
> cũ, và ta quay về đúng chỗ xuất phát: một cổng luôn giống nhau thì bị lướt qua.
|
|
161
|
-
|
|
162
|
-
### 3d — Chờ trả lời
|
|
163
|
-
|
|
164
|
-
- "Y" → tiếp tục sang các bước riêng của lệnh.
|
|
165
|
-
- "N" → dừng, hỏi người dùng muốn thay đổi gì.
|
|
166
|
-
- Có `--yes` và mức *chặn thường* → coi như "Y", **nhưng vẫn IN khối CHECKPOINT** nếu có cờ
|
|
167
|
-
🔴/⚠️ (không chặn ≠ không báo — người đọc log sau này vẫn cần thấy).
|
|
168
|
-
|
|
169
|
-
|
|
170
|
-
*Lưu ý: Với lệnh này, target ở Bước 1 là một UC-ID (`active_platform` + `qc_artifact_dir` do §Phạm vi QC phân giải). `active_platform` này CHÍNH LÀ platform của sổ trace sẽ ghi `qc_status` (`{UC-ID}-{active_platform}.tsv`) — nên `@trace.verifies={UC-ID}-SC{N}` resolve không nhập nhằng. Đọc `.Test.md` đã review từ `{qc_artifact_dir}test-cases/`. Lệnh này dùng stack module **qc-playwright** (`.agent/modules/qc-playwright/stack-profile.yaml`) — Python + pytest-playwright + Page Object — độc lập với module implementation của dev.*
|
|
171
|
-
|
|
172
|
-
## Context
|
|
173
|
-
**BẮT BUỘC — đọc `.agent/steps/context-loader.md` và thực thi TOÀN BỘ quy trình trong đó**,
|
|
174
|
-
rồi mới tiếp tục phần bên dưới.
|
|
175
|
-
|
|
176
|
-
Bỏ qua bước này thì `{paths.*}`, `{tech_stack.*}`, `{conventions.*}`, guardrail từ
|
|
177
|
-
`project-lessons`, và routing service (chế độ umbrella) đều **chưa được phân giải** — mọi
|
|
178
|
-
placeholder bên dưới sẽ rỗng và lệnh sẽ đọc/ghi sai chỗ.
|
|
179
|
-
|
|
180
|
-
## Phạm vi QC
|
|
181
|
-
|
|
182
|
-
**BẮT BUỘC — đọc `.agent/steps/qc-scope.md` và thực thi TOÀN BỘ quy trình trong đó**,
|
|
183
|
-
rồi mới tiếp tục phần bên dưới.
|
|
184
|
-
|
|
185
|
-
Nó chốt bốn thứ mà mọi trạm QC đều cần: `TICKET-ID` · `active_platform` ·
|
|
186
|
-
`qc_artifact_dir` · `uc_list` (kèm trạng thái BDD từng UC, và cờ `--force`).
|
|
187
|
-
Bỏ qua thì artifact QC ghi vào **sai thư mục** và `qc_status` ghi vào **sai sổ trace** —
|
|
188
|
-
cả hai đều xảy ra trong im lặng, không có bước nào phía sau bắt được.
|
|
189
|
-
|
|
190
|
-
---
|
|
191
|
-
|
|
192
|
-
## Stamp phiên bản nguồn
|
|
193
|
-
|
|
194
|
-
**BẮT BUỘC — đọc `.agent/steps/qc-stamp.md` và thực thi phần áp cho lệnh này**,
|
|
195
|
-
rồi mới tiếp tục phần bên dưới.
|
|
196
|
-
|
|
197
|
-
Nó có **hai vế**: §1 **ghi** khối `Nguồn & phiên bản` vào artifact lệnh này sinh ra ·
|
|
198
|
-
§2 **so** stamp của artifact lệnh này ĐỌC với version hiện tại của spec.
|
|
199
|
-
Bỏ vế ghi thì trạm sau không có gì để so; bỏ vế so thì stamp thành một con số không ai
|
|
200
|
-
đọc — và một bộ TC lỗi thời sẽ chạy xanh rồi ghi `pass` **hợp lệ theo mọi phép kiểm**.
|
|
201
|
-
|
|
202
|
-
> **Trạm này vẫn gọi theo TỪNG UC** *(B11)* — thiết kế và chạy test **thật sự** làm tăng dần
|
|
203
|
-
> theo UC, nên giữ khả năng làm UC1 khi UC3 chưa xong là đúng. Chỉ **chỗ đọc/ghi** đổi: mọi
|
|
204
|
-
> artifact nằm chung ở `{qc_artifact_dir}` cấp PRD, không còn một thư mục mỗi UC.
|
|
205
|
-
>
|
|
206
|
-
> Nên `DOC_GAP.md` / `TEST_PLAN.md` đọc được ở đây phủ **cả PRD**: **lọc theo cột `UC`** để lấy
|
|
207
|
-
> phần của UC đang làm. Đừng coi toàn bộ bảng gap là của UC này — sẽ chặn oan.
|
|
208
|
-
|
|
209
|
-
---
|
|
210
|
-
|
|
211
|
-
|
|
212
|
-
---
|
|
213
|
-
|
|
214
|
-
## Role & stack (theo module qc-playwright)
|
|
215
|
-
|
|
216
|
-
Bạn là **QC Runner** — stage 5. Chuyển `.Test.md` đã review thành Python
|
|
217
|
-
pytest-playwright script + Page Object, chạy chúng, và report kết quả theo từng scenario.
|
|
218
|
-
|
|
219
|
-
Quy tắc stack (BẮT BUỘC — từ `modules/qc-playwright/stack-profile.yaml`):
|
|
220
|
-
- Markdown-first: không bao giờ sinh Python khi chưa có `.Test.md` đã review.
|
|
221
|
-
- Page Object extends `BasePage` gọn, 3 lớp: locator `_x()`, action `verb_noun()`, assertion `assert_x()` dùng `expect()`.
|
|
222
|
-
- **Locator từ test-id contract (không scan runtime).** Đọc bảng *Test Selectors* §4.5.6 (block platform) của tech-doc gộp tại `{paths.tech_docs_dir}/{domain}/{prd-slug}/tech-docs/{TICKET-ID}-tech-design.md` (nếu có — bảng gộp mọi UC của platform, **lọc theo cột "Serves SC" khớp SC của UC này**) và dựng mỗi Page Object locator từ test-id ổn định của nó. **Ưu tiên map; fallback** về role/label/text/CSS (scan chậm hơn) chỉ cho một element có action mà **không** có test-id trong §4.5.6 — và ghi chú để gap được thêm vào tech-design.
|
|
223
|
-
|
|
224
|
-
- **TÊN THUỘC TÍNH test-id: đọc `@trace.testid_attr`, KHÔNG tự suy từ platform.**
|
|
225
|
-
Đọc `@trace.testid_attr` từ **header tech-doc gộp** (do `/map-testids` ghi — nó đã phân giải một lần cho cả feature). Đây là **nửa QC của contract FE↔QC**: `/generate-code` đọc chính field này để emit thuộc tính lên element.
|
|
226
|
-
|
|
227
|
-
| Đọc được | Làm gì |
|
|
228
|
-
|---|---|
|
|
229
|
-
| web + attr ≠ `data-testid` (vd `data-test` · `data-qa`) | **BẮT BUỘC** cấu hình test-id attribute trước khi dùng `get_by_test_id()`: `playwright.selectors.set_test_id_attribute("{attr}")` (hoặc `testIdAttribute` trong config). Bỏ bước này thì `get_by_test_id()` vẫn dò `data-testid` mặc định → **trượt 100% locator**. |
|
|
230
|
-
| web + attr = `data-testid` | `get_by_test_id("...")` như thường (đúng mặc định Playwright). |
|
|
231
|
-
| RN / Flutter / native | Dùng đúng cơ chế mà `{attr}` mô tả (`testID` · `Key`/`Semantics(identifier:)` · `accessibilityIdentifier`). |
|
|
232
|
-
| **Không tìm thấy field** | **Cảnh báo mềm, KHÔNG im lặng hardcode:** `⚠️ Tech-doc thiếu @trace.testid_attr — fallback theo platform ({attr mặc định}). Nếu FE dùng thuộc tính khác thì MỌI locator sẽ trượt. Chạy /map-testids {UC-ID} để ghi field này.` Rồi mới fallback. |
|
|
233
|
-
|
|
234
|
-
> **Vì sao không suy từ platform cho nhanh:** suy từ platform là **phát biểu lại một sự thật đã được ghi ở nơi khác** — đúng lớp lỗi mà `bin/trace-schema.json` sinh ra để chống. Nó hỏng ở đúng ca field này tồn tại để phục vụ: dự án web dùng `data-test`/`data-qa` thay vì mặc định, hoặc một PRD trải ba platform với ba thuộc tính khác nhau. Và nó hỏng **im lặng theo kiểu tệ nhất**: test fail với "element not found" — trông y hệt một bug sản phẩm, nên QC sẽ đi mở bug thay vì sửa selector.
|
|
235
|
-
- pytest-playwright fixture; mỗi test độc lập; gom theo (role, account) để auth không bao giờ xen kẽ.
|
|
236
|
-
- Không hard-code URL/cred/timeout (dùng `Env.*` / `CONFIG[...]`); không `time.sleep()`; không Allure.
|
|
237
|
-
- Phủ **100%** TC trong file — mỗi TC kết thúc Pass/Fail/Skip (không còn Draft).
|
|
238
|
-
- Phân loại mỗi FAIL — **ba** nhãn, sau khi đã chạy lại (xem §Chạy lại trước khi kết luận): `script-bug` (fix selector/logic) · `product-gap` (giữ FAIL + evidence, **không bao giờ fake-pass**) · `flaky` (không nhất quán qua các lần chạy lại — chưa đủ căn cứ để kết luận hai cái kia).
|
|
239
|
-
|
|
240
|
-
## Skills — chọn layer, nạp MỘT file (`{paths.qc_skills_dir}/qa-runner/`)
|
|
241
|
-
|
|
242
|
-
`functional/{gui-screen,gui-feature,api}.md`, `integration.md`, `e2e.md`,
|
|
243
|
-
`non-functional.md`, `exploratory/session.md`.
|
|
244
|
-
|
|
245
|
-
---
|
|
246
|
-
|
|
247
|
-
## Guard — hợp đồng test-id, chân thứ tư *(phép so GIÁ TRỊ, một chiều)*
|
|
248
|
-
|
|
249
|
-
`bin/trace-schema.json` canh **ba** chân của hợp đồng test-id: §4.5.6 ↔ `.feature` (**T15**) ·
|
|
250
|
-
↔ header `@trace.testid_attr` (**T16**) · ↔ code (**T17/T18**). Chân thứ tư — §4.5.6 ↔ `*.Test.md`
|
|
251
|
-
— **không máy nào canh**, và nó là chân duy nhất mà giá trị id bị **chép cứng vào một artifact bền**:
|
|
252
|
-
|
|
253
|
-
```
|
|
254
|
-
generate-code → bake vào code → T17/T18 canh
|
|
255
|
-
qc-run-test → dựng locator LÚC CHẠY → đọc bảng tươi, tự cứu
|
|
256
|
-
qc-design-test → chép vào .Test.md → KHÔNG AI CANH ← chỗ này
|
|
257
|
-
```
|
|
258
|
-
|
|
259
|
-
**Phạm vi — đọc trước khi làm gì.** Không có block §4.5 client trong tech-doc (dự án backend-only,
|
|
260
|
-
hoặc chưa từng chạy `/map-testids`) → **im lặng hoàn toàn**, không kiểm gì. Cùng điều khoản phạm vi
|
|
261
|
-
với `testid_contract`: *"hai rule nói 'chỗ nào đã hứa thì phải giữ', KHÔNG nói 'mọi chỗ đều phải có
|
|
262
|
-
hợp đồng'"*.
|
|
263
|
-
|
|
264
|
-
**Phép so — MỘT chiều:**
|
|
265
|
-
|
|
266
|
-
1. Gom mọi test-id được nhắc trong các `*.Test.md` của UC này.
|
|
267
|
-
2. Gom id ở §4.5.6 (block `active_platform`), **lọc theo cột "Serves SC"** khớp SC của UC này.
|
|
268
|
-
3. `TC ∖ bảng` = id TC nhắc mà hợp đồng không có → ⚠️.
|
|
269
|
-
|
|
270
|
-
| Kết quả | Làm gì |
|
|
271
|
-
|---|---|
|
|
272
|
-
| Rỗng | **im lặng, đi tiếp** |
|
|
273
|
-
| Có id lạ | `⚠️ Hợp đồng test-id: {k} id trong .Test.md không có ở §4.5.6: {danh sách}`<br/>kèm: `Chạy /map-testids {UC-ID} (đưa vào hợp đồng) hoặc /qc-design-test {UC-ID} (sửa TC theo hợp đồng).` |
|
|
274
|
-
|
|
275
|
-
**Chiều ngược KHÔNG kiểm.** §4.5.6 có id mà không TC nào nhắc là **bình thường** — không phải element
|
|
276
|
-
nào cũng cần một bước TC. Kiểm chiều đó là **ồn**, đúng bất đối xứng T17/T18 đã chọn.
|
|
277
|
-
|
|
278
|
-
**Mức là `warn`, không chặn.** Id sai làm test **ĐỎ**, không làm test **xanh giả** — nên nó **không**
|
|
279
|
-
thuộc lớp *"báo cáo sai"* và không đi cùng đường với `steps/qc-stamp.md` §2 (chặn `pass`). Chặn ở đây
|
|
280
|
-
là chặn nhầm loại.
|
|
281
|
-
|
|
282
|
-
> **Vì sao vẫn đáng cảnh báo dù test sẽ tự đỏ.** Vì nó đỏ **đội lốt thứ khác**. `testid_contract` ghi
|
|
283
|
-
> đúng chữ: *"test đỏ 'element not found' **trông y hệt bug sản phẩm**"* — nên `/qc-report` phân loại
|
|
284
|
-
> *product-gap* rồi in một `/report-bug` sẵn-chạy, và một lỗi **hợp đồng nội bộ** đi ra khỏi đội QC
|
|
285
|
-
> thành phiếu lỗi gửi PO. Dòng ⚠️ này là chỗ duy nhất chặn được chuyến đi đó.
|
|
286
|
-
|
|
287
|
-
## Output — lệnh này ghi những gì, ở đâu
|
|
288
|
-
|
|
289
|
-
| Đường dẫn | Nội dung | Người sửa tay? |
|
|
290
|
-
|---|---|:---:|
|
|
291
|
-
| `tests/<project>/test_<feature>.py` | pytest script, 1-1 với `test-cases/` | ✅ **có** — `script-bug` |
|
|
292
|
-
| `pages/<feature>_page.py` | Page Object (3 lớp + BasePage) | ✅ **có** — `script-bug` |
|
|
293
|
-
| `{paths.trace_dir}/…/{UC-ID}-{platform}.tsv` | `qc_status` · `qc_run_at` | ❌ lệnh ghi |
|
|
294
|
-
|
|
295
|
-
*(Đường dẫn theo `modules/qc-playwright/stack-profile.yaml` §layout.)*
|
|
296
|
-
|
|
297
|
-
> **Vì sao mục này tồn tại** *(G77)*. Trước đó lệnh **không có §Output** — nó không khai mình ghi
|
|
298
|
-
> cái gì, ở đâu; đường dẫn chỉ nằm trong `stack-profile.yaml` của module. Và một lệnh **không khai
|
|
299
|
-
> mình ghi gì** thì không ai nghĩ tới việc **bảo vệ thứ nó ghi**. Cột *"người sửa tay?"* là câu hỏi
|
|
300
|
-
> mà `bin/trace-schema.json` → `artifact_writers` giờ ép mọi lệnh phải trả lời.
|
|
301
|
-
|
|
302
|
-
## Chạy lại — script đã tồn tại *(CHẠY, đừng sinh lại)*
|
|
303
|
-
|
|
304
|
-
**Vòng đời của trạm này là CHẠY nhiều, SINH ít.** §Phân loại FAIL ngay dưới đây khai tường minh
|
|
305
|
-
rằng QC **sửa tay** chính các file trên: *"`script-bug` … **QC tự sửa.** Không mở bug"*. Nên chuỗi
|
|
306
|
-
bình thường là **sinh → chạy → đỏ → QC sửa tay → chạy lại**, và bước cuối **không được** là bước xoá.
|
|
307
|
-
|
|
308
|
-
| Tình huống | Xử lý |
|
|
309
|
-
|---|---|
|
|
310
|
-
| Script đã có, TC không đổi | **CHẠY nó. KHÔNG sinh lại.** Không hỏi gì — đây là ca thường nhất |
|
|
311
|
-
| TC mới xuất hiện trong `.Test.md` | Sinh **chỉ phần thiếu**; giữ nguyên file đã có |
|
|
312
|
-
| Script có **thay đổi chưa commit** | **DỪNG** — xem dưới |
|
|
313
|
-
|
|
314
|
-
**Nhận diện "đã sửa tay" bằng `git status` / `git diff`** trên các đường dẫn ở §Output. Không cần ai
|
|
315
|
-
đánh dấu gì, và nó bắt được **mọi** lần sửa — kể cả lần người sửa quên đánh dấu.
|
|
316
|
-
|
|
317
|
-
```
|
|
318
|
-
❌ {n} file script có thay đổi chưa commit — có thể là bản sửa `script-bug` của bạn.
|
|
319
|
-
Sinh lại sẽ XOÁ chúng.
|
|
320
|
-
Files: {danh sách}
|
|
321
|
-
Cách đúng: commit bản sửa trước, rồi chạy lại.
|
|
322
|
-
Cố ý bỏ hết và sinh từ trắng: thêm --force
|
|
323
|
-
```
|
|
324
|
-
|
|
325
|
-
**KHÔNG đoán.** Thấy thay đổi chưa commit thì lệnh **không tự phân biệt** *"QC vừa sửa"* với *"lần
|
|
326
|
-
sinh trước chưa commit"* — hai ca đó nhìn giống hệt nhau trên `git status`. **Dừng oan một lần rẻ
|
|
327
|
-
hơn xoá nhầm một lần.**
|
|
328
|
-
|
|
329
|
-
> **Vì sao dùng `git`, không dùng marker hay băm nội dung.** Marker (`# @qc.hand-fixed`) **dựa vào kỷ
|
|
330
|
-
> luật** — đúng thứ đã bác ở G64 (*"dựa vào `Next` là dựa vào kỷ luật, không phải vào máy"*). Băm nội
|
|
331
|
-
> dung **du nhập một lớp cơ chế mới**: `rules/workflow.md` ghi *"0 content hash trong toàn bộ
|
|
332
|
-
> codebase"*, và G63 đã chọn không mở mặt trận đó.
|
|
333
|
-
>
|
|
334
|
-
> **Vì sao ca "không đổi gì" phải HOÀN TOÀN im lặng.** Chạy lại test là việc làm hàng chục lần một
|
|
335
|
-
> ngày. Bản vá nào làm nó hỏi mỗi lần thì người dùng sẽ thêm `--force` vào alias — và lúc đó ta mất
|
|
336
|
-
> sạch lớp bảo vệ này.
|
|
337
|
-
|
|
338
|
-
Có `--force` → report **bắt buộc** khai:
|
|
339
|
-
```
|
|
340
|
-
⚠️ --force: sinh lại từ trắng — đã xoá {n} file script có thay đổi chưa commit: {danh sách}
|
|
341
|
-
```
|
|
342
|
-
|
|
343
|
-
## Trace tag (bắt buộc)
|
|
344
|
-
|
|
345
|
-
Mỗi pytest test được sinh ra mang scenario framework mà nó verify, lấy từ
|
|
346
|
-
Trace matrix của `.Test.md`:
|
|
347
|
-
|
|
348
|
-
```python
|
|
349
|
-
# @trace.verifies={UC-ID}-SC{N}
|
|
350
|
-
def test_TC_<FEATURE>_001_...(...): ...
|
|
351
|
-
```
|
|
352
|
-
|
|
353
|
-
## Chạy lại trước khi kết luận — rồi người xác nhận *(bắt buộc cho MỌI FAIL)*
|
|
354
|
-
|
|
355
|
-
Một test đỏ **một lần** chưa nói được nó đỏ vì cái gì. Trước khi phân loại, phải loại nhiễu.
|
|
356
|
-
|
|
357
|
-
### Bước 1 — Chạy lại riêng test đó, tối đa 2 lần
|
|
358
|
-
|
|
359
|
-
```
|
|
360
|
-
đỏ → đỏ → đỏ ⇒ NHẤT QUÁN → sang Bước 2, phân loại script-bug | product-gap
|
|
361
|
-
đỏ → xanh ⇒ KHÔNG NHẤT QUÁN → flaky
|
|
362
|
-
đỏ → đỏ → xanh ⇒ KHÔNG NHẤT QUÁN → flaky
|
|
363
|
-
```
|
|
364
|
-
|
|
365
|
-
**Đây KHÔNG phải `retries` trong config của test runner.** `retries` tự thử lại rồi báo
|
|
366
|
-
*"passed on retry"* — nó **che** sự không nhất quán. Ở đây chạy **tách biệt từng lần** để
|
|
367
|
-
**quan sát**, vì chính sự không nhất quán mới là thông tin cần.
|
|
368
|
-
|
|
369
|
-
### Bước 2 — Điều tra bằng bằng chứng, KHÔNG đoán
|
|
370
|
-
|
|
371
|
-
Đọc trace/video/log: timeline, DOM snapshot, network, console **tại thời điểm fail**. Rồi chọn
|
|
372
|
-
một trong ba:
|
|
373
|
-
|
|
374
|
-
| Nhãn | Khi nào | Hệ quả |
|
|
375
|
-
|---|---|---|
|
|
376
|
-
| `script-bug` | Sai locator / logic test / timing / dữ liệu test | QC tự sửa. **Không** mở bug |
|
|
377
|
-
| `product-gap` | Hành vi thật ≠ spec (PRD/BDD/AC) — defect thật | Mở bug qua `/report-bug`. Giữ `fail` + evidence, **không bao giờ fake-pass** |
|
|
378
|
-
| `flaky` | Không nhất quán ở Bước 1 — **chưa đủ căn cứ** | Cách ly + **ghi nghi vấn nguyên nhân**. **Không** mở bug từ một lần chạy hên xui |
|
|
379
|
-
|
|
380
|
-
### Bước 3 — Người xác nhận TRƯỚC khi hành động
|
|
381
|
-
|
|
382
|
-
In đề xuất kèm bằng chứng cụ thể, rồi **dừng chờ**:
|
|
383
|
-
|
|
384
|
-
```
|
|
385
|
-
❓ {UC-ID}-SC{N} FAIL — đề xuất: {script-bug | product-gap | flaky}
|
|
386
|
-
Bằng chứng: {trích từ trace/log — vd "locator #submit-btn không tồn tại, DOM đã đổi id"
|
|
387
|
-
hoặc "lần 1 đỏ, lần 2 xanh — không nhất quán"}
|
|
388
|
-
Xác nhận phân loại này? (script-bug / product-gap / flaky)
|
|
389
|
-
```
|
|
390
|
-
|
|
391
|
-
**KHÔNG ghi `qc_status` cho scenario nào còn FAIL chưa được xác nhận phân loại.**
|
|
392
|
-
|
|
393
|
-
**Nếu QC không chắc** giữa `script-bug` và `product-gap` (bằng chứng mơ hồ, hành vi ở biên của
|
|
394
|
-
spec) → **mời Dev cùng xem trace**, đừng tự đoán cho xong.
|
|
395
|
-
|
|
396
|
-
> **Vì sao chỗ này đáng chặn** — trong khi framework vốn đang cố giảm số cổng chặn (G41): vì
|
|
397
|
-
> **hai hướng sai đều không đảo ngược rẻ**. Gắn nhầm `script-bug` cho lỗi sản phẩm thật là
|
|
398
|
-
> **giấu bug** — dev không bao giờ thấy nó. Gắn nhầm `product-gap` cho lỗi test là mở bug sai,
|
|
399
|
-
> hoặc tệ hơn là đi "sửa" một sản phẩm không có lỗi. Đây không phải cổng hỏi cho có; nó là điểm
|
|
400
|
-
> rẽ mà agent **không có quyền tự quyết**.
|
|
401
|
-
>
|
|
402
|
-
> **Vì sao `flaky` không phải thùng rác.** Nhãn này **buộc** ghi nghi vấn nguyên nhân (thường:
|
|
403
|
-
> thiếu cách ly dữ liệu · thiếu `storageState` · race condition thật) và cách ly test, không
|
|
404
|
-
> phải chỉ đánh dấu rồi bỏ qua. Nó là *"chưa kết luận được"*, không phải *"thôi bỏ đi"* — và
|
|
405
|
-
> một test nằm mãi ở `flaky` là một việc còn nợ, nhìn thấy được.
|
|
406
|
-
|
|
407
|
-
## Write Trace State — qc_status (kết quả QC CHÍNH THỨC)
|
|
408
|
-
|
|
409
|
-
Sau khi chạy, cập nhật **sổ của platform đang test** `{paths.trace_dir}/{domain}/{prd-slug}/{UC-ID}-{active_platform}.tsv` (`{active_platform}` đã phân giải ở Bước 1 — chính là platform của QC pass này; nếu `domain`/`prd_slug` không phân giải được từ spec target, định vị TSV bằng cách glob `{paths.trace_dir}/**/{UC-ID}-{active_platform}.tsv` — nó được tạo trước đó bởi `/generate-bdd`) — cho mỗi scenario row (khớp
|
|
410
|
-
`sc_id` qua tag `@trace.verifies={UC-ID}-SC{N}` của test). *(Umbrella + `spec_source`: `trace_dir` là `{spec_source}/.trace` — ghi update `qc_status` vào **spec repo** và commit/push spec submodule, giống `feedback/`.)*
|
|
411
|
-
|
|
412
|
-
| Cột | Giá trị |
|
|
413
|
-
|--------|-------|
|
|
414
|
-
| `qc_status` | Đọc cột `status` của row **TRƯỚC** — xem §Guard ngay dưới bảng. Row `OK`/`GAP`/`UNTRACKED`: `pass` nếu mọi QC test của SC này pass · `fail` nếu có cái fail **đã xác nhận là `script-bug` hoặc `product-gap`** · `skip` nếu tất cả skip/xfail · `not_run` nếu không QC test nào phủ nó, **hoặc SC chỉ có kết quả `flaky`** (xem hàng dưới). Row **`DRIFT`/`ORPHANED`**: **không bao giờ ghi `pass`** — hạ về `not_run` |
|
|
415
|
-
| `qc_status` khi `flaky` | **`not_run`, KHÔNG phải `fail`.** `fail` ngụ ý *đã có kết luận*; kết quả không nhất quán qua các lần chạy lại nghĩa là **chưa có** kết luận nào. Ghi `fail` ở đây là khẳng định một điều chưa biết — và nó còn đẩy việc sang dev (xem `qc_owner`) trong khi việc đang thuộc QC |
|
|
416
|
-
| `qc_run_at` | hôm nay `YYYY-MM-DD` |
|
|
417
|
-
| `last_updated` | hôm nay `YYYY-MM-DD` |
|
|
418
|
-
| `qc_owner` | **SC đang chờ ai** (view "pending" của PM/PO): `dev` nếu FAIL = product-gap (defect thật → dev fix) · `po` nếu `skip`/`not_run` vì một **`DOC_GAP` 🔴 Blocker đang open** chặn test (PO phải làm rõ PRD/BDD) · **`qc` nếu FAIL = flaky** (QC phải điều tra nguyên nhân, **không** phải việc của dev) · `—` nếu `pass`, hoặc FAIL = script-bug (QC tự fix — tạm thời) |
|
|
419
|
-
| `qc_blocked_by` | artifact liên kết: `GAP-{id}` khi bị chặn bởi spec gap (set ở đây) · `BUG-{id}` khi `/report-bug` đã được file cho product-gap (backfill bởi `/report-bug`) · `—` ngược lại |
|
|
420
|
-
|
|
421
|
-
Set `qc_owner`/`qc_blocked_by` cùng với `qc_status`. Khi `pass`, **clear** cả hai về `—` — nhưng **PHẢI chạy §Đóng bug đã verify bên dưới TRƯỚC**, vì `qc_blocked_by` chính là con trỏ tới bug và clear xong là mất đường về.
|
|
422
|
-
Với FAIL product-gap, set `qc_owner=dev` ngay; `BUG-{id}` được backfill vào `qc_blocked_by`
|
|
423
|
-
khi QC chạy `/report-bug` mà `/qc-report` nhắc.
|
|
424
|
-
|
|
425
|
-
### Guard — ĐỌC `status` trước khi ghi `pass` *(bắt buộc)*
|
|
426
|
-
|
|
427
|
-
*Contract: `bin/trace-schema.json` → `positive_assertion_guards`. Đối xứng hoàn toàn với `/dev-run-test`; dữ liệu đã có trong sổ, không phát sinh I/O.*
|
|
428
|
-
|
|
429
|
-
`pass` **không** mang nghĩa *"QC test đã chạy và xanh"*. Nó mang nghĩa **"scenario này đã được nghiệm thu theo spec HIỆN TẠI"**.
|
|
430
|
-
|
|
431
|
-
| `status` của row | `qc_status` ghi gì | `qc_run_at` |
|
|
432
|
-
|---|---|---|
|
|
433
|
-
| `OK` · `GAP` · `UNTRACKED` | như bảng trên | hôm nay |
|
|
434
|
-
| **`DRIFT`** | test **pass** → **`not_run`** *(KHÔNG `pass`)* · **fail** → **`fail`** như thường · **skip** → `skip` như thường | `—` nếu ghi `not_run` |
|
|
435
|
-
| **`ORPHANED`** | **`not_run`** — scenario đã bị xoá khỏi `.feature` | `—` |
|
|
436
|
-
|
|
437
|
-
**Chỉ `pass` bị chặn.** `fail` là tin xấu thật, `skip` là giá trị trung tính — cả hai không phải lời khẳng định nên ghi bình thường. Chặn chúng là biến một guard chống-báo-cáo-sai thành một guard che-tin-xấu.
|
|
438
|
-
|
|
439
|
-
Khi hạ về `not_run` vì `DRIFT`/`ORPHANED`, **KHÔNG** clear `qc_owner`/`qc_blocked_by` và **KHÔNG** chạy §Đóng bug đã verify — hai bước đó chỉ dành cho `pass` **thật**. Đóng một bug dựa trên một lần QC chạy trên spec đã đổi là đóng sai. In:
|
|
440
|
-
```
|
|
441
|
-
⚠️ {sc_id} — QC test XANH nhưng row đang {DRIFT | ORPHANED}, nên KHÔNG ghi pass.
|
|
442
|
-
Không bug nào được đóng ở lần chạy này cho SC đó.
|
|
443
|
-
Làm: /generate-code {UC-ID} → /qc-design-test lại → chạy lại lệnh này.
|
|
444
|
-
```
|
|
445
|
-
|
|
446
|
-
> **Vì sao (GAPS-v4 G55).** Bản cũ khai `qc_status` **trực giao** với `status` — trực giao về *kết quả chạy* thì đúng, nhưng **không** trực giao về *quyền được khẳng định*. `/generate-bdd` hạ `qc_status → not_run` khi spec đổi (kèm lý do *"cái này làm cờ nói dối"*), rồi lần `/qc-run-test` kế tiếp dựng lại `pass` với ngày mới. Ở đây hậu quả còn đi xa hơn `/dev-run-test`: một `pass` sai còn **đóng một bug** (§Đóng bug đã verify) — nên guard phải chặn cả nhánh đó.
|
|
447
|
-
>
|
|
448
|
-
> **Tầng thứ hai độc lập:** `lint-trace` **T12** bắt đúng trạng thái này ở sổ thật, bất kể lệnh nào ghi ra.
|
|
449
|
-
|
|
450
|
-
Giữ nguyên mọi cột khác — **không bao giờ** đụng `dev_selftest`/`dev_selftest_at`
|
|
451
|
-
(do `/dev-run-test` sở hữu; nó có guard riêng cùng loại). `qc_status` (QC chính thức) và
|
|
452
|
-
`dev_selftest` (dev smoke) là hai tín hiệu riêng; cả hai trực giao với `status` về **kết quả
|
|
453
|
-
chạy**, nhưng **KHÔNG** trực giao về **quyền khẳng định `pass`** — xem §Guard ở trên.
|
|
454
|
-
|
|
455
|
-
## Đóng bug đã verify *(chạy TRƯỚC khi clear `qc_blocked_by`)*
|
|
456
|
-
|
|
457
|
-
`/qc-run-test` là **chủ sở hữu** bước `🟡 Fixed → 🟢 Closed` của bug lifecycle: `/report-bug` mở bug (`🟢 Open`), `/fix-bug` Phase 5.5 đặt `🟡 Fixed`, và chỉ QC re-verify mới được đóng. Không có bước này thì mọi bug đứng vĩnh viễn ở `Fixed`.
|
|
458
|
-
|
|
459
|
-
Với **mỗi** row mà `qc_status` **vừa chuyển thành `pass`**:
|
|
460
|
-
|
|
461
|
-
1. **Đọc `qc_blocked_by` TRƯỚC khi clear.** Nếu khớp `BUG-*`:
|
|
462
|
-
- Mở `{paths.bug_reports_dir}/{BUG-ID}.md`.
|
|
463
|
-
- `State` đang `🟡 Fixed` → set `🟢 Closed` + thêm dòng: `Verified: /qc-run-test {today} — {UC-ID}-SC{N} pass`.
|
|
464
|
-
- `State` đang `🟢 Open` (**chưa ai fix mà test đã pass**) → **KHÔNG đóng.** Giữ `Open` và thêm ghi chú: `⚠️ {UC-ID}-SC{N} pass ngày {today} nhưng bug chưa có Resolution — kiểm tra test có phủ đúng behavior đã báo không.` *(Test pass trên một bug chưa fix là dấu hiệu test sai, không phải bug hết. Tự đóng ở đây sẽ chôn một defect thật.)*
|
|
465
|
-
- Không tìm thấy file → bỏ qua im lặng (bug có thể đã archive).
|
|
466
|
-
2. Nếu khớp `GAP-*` → **không** đóng gì (spec-gap do PO xử lý, không phải QC).
|
|
467
|
-
3. Commit + push các bug report vừa đổi vào spec repo (cùng cách push như `/report-bug` Step 6) — file local là dead drop, PO/Dev chỉ thấy sau khi push.
|
|
468
|
-
|
|
469
|
-
Rồi mới clear `qc_owner`/`qc_blocked_by` về `—`.
|
|
470
|
-
|
|
471
|
-
## Refresh Panel Mirror
|
|
472
|
-
# Làm mới panel mirror của Living Docs *(local)*
|
|
473
|
-
|
|
474
|
-
> **Hai vị trí, HAI TÊN KHÁC NHAU — đọc trước khi sửa gì ở đây.**
|
|
475
|
-
>
|
|
476
|
-
> | Đường dẫn | Vai trò | Git |
|
|
477
|
-
> |---|---|---|
|
|
478
|
-
> | `{paths.trace_dir}` (`.trace/` hoặc `{spec_source}/.trace/`) | **AUTHORITATIVE** — TSV + `trace-history.jsonl`. Không regenerate được. | **PHẢI commit** |
|
|
479
|
-
> | `./.trace-mirror/` ở gốc workspace hiện tại | **MIRROR** — bản sao tiện cho panel VS Code. Sinh lại được bất cứ lúc nào. | **Luôn gitignore** |
|
|
480
|
-
>
|
|
481
|
-
> Trước v0.4.3 cả hai đều tên `.trace`, nên một luật gitignore theo tên có thể **xoá sạch sổ gốc**
|
|
482
|
-
> khi dev mở thẳng spec repo làm workspace (lúc đó hai path bằng nhau). Hai tên khác nhau làm
|
|
483
|
-
> luật git đọc được bằng mắt và **không còn ca nhập nhằng nào**: `.trace-mirror/` không bao giờ
|
|
484
|
-
> commit, `.trace/` không bao giờ gitignore.
|
|
485
|
-
|
|
486
|
-
## Khi nào CÓ mirror
|
|
487
|
-
|
|
488
|
-
Mirror chỉ tồn tại khi **`{paths.trace_dir}` nằm NGOÀI workspace hiện tại** — panel đọc từ workspace đang mở nên cần một bản sao ở đây.
|
|
489
|
-
|
|
490
|
-
| Tình huống | `{paths.trace_dir}` | Có mirror? |
|
|
491
|
-
|---|---|---|
|
|
492
|
-
| Single-service | `./.trace` — **trong** workspace | ❌ Không. Panel đọc thẳng `.trace/trace-report.json`. Bỏ qua cả file này. |
|
|
493
|
-
| Dev mở thẳng **spec repo** | `./.trace` — **trong** workspace | ❌ Không. Như trên. |
|
|
494
|
-
| Umbrella + `spec_source`, dev đứng ở umbrella hoặc service submodule | `{spec_source}/.trace` — **ngoài** workspace | ✅ Có |
|
|
495
|
-
| Umbrella legacy (không `spec_source`) | `.trace` theo từng service | ✅ Có |
|
|
496
|
-
|
|
497
|
-
Quy tắc một dòng: **phân giải `panel_mirror = ./.trace-mirror` ở gốc workspace hiện tại; nếu `{paths.trace_dir}` đã nằm trong workspace này thì bỏ qua toàn bộ bước mirror.**
|
|
498
|
-
|
|
499
|
-
---
|
|
500
|
-
|
|
501
|
-
Sau khi cập nhật TSV authoritative tại `{paths.trace_dir}`:
|
|
502
|
-
|
|
503
|
-
**Khi `setup.spec_source` được đặt (trace gộp — trường hợp phổ biến):**
|
|
504
|
-
`{paths.trace_dir}` phân giải về `{spec_source}/.trace` — vị trí authoritative duy nhất.
|
|
505
|
-
Lệnh này chạy từ `service_root`, nên thao tác ghi là **liên-repo vào spec submodule**;
|
|
506
|
-
commit/push spec submodule cho lần cập nhật trace (giống như `feedback/`).
|
|
507
|
-
|
|
508
|
-
1. Phân giải `panel_mirror = ./.trace-mirror` tại **gốc workspace hiện tại**.
|
|
509
|
-
2. Nếu `{paths.trace_dir}` **không** nằm trong workspace hiện tại, copy mỗi
|
|
510
|
-
`{UC-ID}-{platform}.tsv` vừa cập nhật → `{panel_mirror}/{UC-ID}-{platform}.tsv` (tạo thư mục; ghi đè).
|
|
511
|
-
Không namespace theo service — chỉ có một bộ trace; service sở hữu được mang ở
|
|
512
|
-
**cột `service` (cột 23)** của chính từng row, do `/generate-bdd` ghi từ `@trace.service`.
|
|
513
|
-
3. **KHÔNG copy `trace-history.jsonl`.** Nó là dữ liệu tích luỹ, không phải thứ sinh lại được —
|
|
514
|
-
nhân bản nó ra một thư mục gitignore là tạo hai lịch sử lệch nhau rồi mất bản thật.
|
|
515
|
-
|
|
516
|
-
**Legacy (không có `spec_source` — trace theo service):**
|
|
517
|
-
Copy mỗi `{UC-ID}-{platform}.tsv` vừa cập nhật → `{panel_mirror}/{service-name}/{UC-ID}-{platform}.tsv`
|
|
518
|
-
(namespace theo `active_service`).
|
|
519
|
-
|
|
520
|
-
Cách này giữ panel Living Docs của workspace đang mở luôn mới **giữa các lần sync** — nó chỉ là
|
|
521
|
-
một **mirror tiện lợi cục bộ**. File `trace-report.json` đã merge (canonical, trong
|
|
522
|
-
`{spec_source}/.living-docs/`) được build lại bởi `/sync` hoặc `/validate-traces`. Với các lệnh
|
|
523
|
-
được orchestrate, làm việc này một lần trong orchestrator sau khi tất cả sub-agent trả về — không phải
|
|
524
|
-
bên trong từng sub-agent.
|
|
525
|
-
|
|
526
|
-
|
|
527
|
-
## Self-Review *(trước khi in Report)*
|
|
528
|
-
|
|
529
|
-
Theo 3 nhóm ở `{paths.qc_skills_dir}/_shared/self-review-principles.md` — **không chép lại ở đây**.
|
|
530
|
-
|
|
531
|
-
- **Bịa:** mỗi đề xuất phân loại FAIL dựa trên bằng chứng **đọc thật** từ trace/video/log — trích
|
|
532
|
-
được dòng lỗi, tên locator, response code — không phải *"thường thì đây là script-bug"*?
|
|
533
|
-
- **Nhảy bước:** **MỌI** FAIL đã qua chạy lại ×2 trước khi đề xuất — không có cái nào bị bỏ bước
|
|
534
|
-
vì "chắc chắn là gì rồi"? Guard `DRIFT`/`ORPHANED` đã áp cho **từng** row trước khi ghi `pass`,
|
|
535
|
-
không chỉ vài row?
|
|
536
|
-
- **Số liệu:** `{pass}`/`{fail}`/`{skip}`/`{flaky}` = **đúng output của test runner**
|
|
537
|
-
(`--reporter=list` / summary), không phải đếm lại bằng mắt qua context?
|
|
538
|
-
|
|
539
|
-
> Nhóm 3 ở trạm này là chỗ dễ sai nhất: kết quả chạy nằm trong output của runner, nhưng agent đã
|
|
540
|
-
> đọc qua nó một lần rồi **nhớ lại** lúc viết report. Lấy lại từ nguồn, đừng nhớ.
|
|
541
|
-
|
|
542
|
-
## Report
|
|
543
|
-
|
|
544
|
-
**Đọc `.agent/steps/report-footer.md`** và áp đúng khuôn footer trong đó (Status Badge ·
|
|
545
|
-
Output Artifacts · Next) cho report cuối, kèm khối bên dưới.
|
|
546
|
-
|
|
547
|
-
```
|
|
548
|
-
/qc-run-test Report — {UC-ID} ({qc-playwright})
|
|
549
|
-
QC: ✅ {pass} pass | ❌ {fail} fail | ⏭️ {skip} skip | 🔄 {flaky} flaky (TCs: {total})
|
|
550
|
-
{chỉ khi có FAIL — ngược lại bỏ}
|
|
551
|
-
Phân loại FAIL (người đã xác nhận): script-bug {a} · product-gap {b} · flaky {c} → cách ly
|
|
552
|
-
{với mỗi flaky: "🔄 {UC-ID}-SC{N} — nghi: {nguyên nhân}" }
|
|
553
|
-
Trace: {paths.trace_dir}/{domain}/{prd-slug}/{UC-ID}-{active_platform}.tsv updated (qc_status, qc_run_at)
|
|
554
|
-
{chỉ khi có bug đổi trạng thái — ngược lại bỏ}
|
|
555
|
-
🐞 Bugs: {BUG-ID} → 🟢 Closed (verified {UC-ID}-SC{N})
|
|
556
|
-
⚠️ {BUG-ID} giữ 🟢 Open — SC pass nhưng bug chưa có Resolution, kiểm tra lại test
|
|
557
|
-
Self-review: {✅ sạch | ⚠️ {n} điểm cần chú ý — liệt kê}
|
|
558
|
-
Next: /qc-report {UC-ID} ← sinh report + evidence
|
|
559
|
-
/qc-review {UC-ID} ← review script đã sinh trước khi merge
|
|
560
|
-
📊 Living Docs: chạy /validate-traces (hoặc /sync) để push qc_status lên dashboard spec-module.
|
|
561
|
-
```
|
|
@@ -1,66 +0,0 @@
|
|
|
1
|
-
# QC automation module — Python + pytest-playwright + Page Object
|
|
2
|
-
# Used by the /qc-* commands (the official QC automation pipeline ported from the QC team).
|
|
3
|
-
# This is the QC test-authoring/execution stack, independent of the dev implementation
|
|
4
|
-
# module (java-spring, react, flutter, …). Selected via tech_stack.qc_module or per /qc-* run.
|
|
5
|
-
|
|
6
|
-
build:
|
|
7
|
-
test: "python3 -m pytest"
|
|
8
|
-
e2e: "python3 -m pytest -m e2e"
|
|
9
|
-
report: "python3 -m pytest --html=reports/<feature>/report.html --self-contained-html"
|
|
10
|
-
show_trace: "python3 -m playwright show-trace <test-results/<nodeid>/trace.zip>"
|
|
11
|
-
|
|
12
|
-
architecture:
|
|
13
|
-
style: "Page Object Model over pytest-playwright — Markdown test-case first, Python second"
|
|
14
|
-
key_rules:
|
|
15
|
-
- "Markdown-first: never generate Python until a reviewed .Test.md exists for the feature"
|
|
16
|
-
- "No Allure, no hand-written dashboard, no record_video — use Playwright Trace + pytest-html"
|
|
17
|
-
- "No hard-coded URL/credential/timeout — read from Env.* and CONFIG[...]"
|
|
18
|
-
- "No time.sleep() — use Playwright auto-wait / expect()"
|
|
19
|
-
- "Each test independent via pytest-playwright fixtures (page / logged_in_page / …)"
|
|
20
|
-
- "Page Object extends slim BasePage; split 3 layers: locators _x(), actions verb_noun(), assertions assert_x() using expect()"
|
|
21
|
-
- "Locator priority: data-testid → role → label/text → CSS → avoid XPath"
|
|
22
|
-
- "test-id values come from the FE tech-design Test Selectors contract (tech-doc gộp cấp PRD: {TICKET-ID}-tech-design.md, bảng Test Selectors §4.5.6 — lọc theo cột 'Phục vụ SC') — prefer them (no runtime scan); fall back to role/text only when an actionable element has no test-id there, and note the gap"
|
|
23
|
-
- "Group tests by (role, account) so login/logout never interleaves across roles"
|
|
24
|
-
- "Cover 100% of TCs in the .Test.md — every TC ends Pass/Fail/Skip, none left Draft"
|
|
25
|
-
folder_structure: |
|
|
26
|
-
{qc_artifact_dir}test-cases/ ← test-case Markdown (.Test.md) — source of truth (mặc định docs/, lộ ra ngoài)
|
|
27
|
-
pages/ ← Page Object Model
|
|
28
|
-
│ ├── base_page.py ← slim BasePage (click/fill/wait/screenshot)
|
|
29
|
-
│ └── <feature>_page.py
|
|
30
|
-
tests/ ← pytest scripts, 1-1 with test-cases/
|
|
31
|
-
│ ├── conftest.py ← fixtures: browser, page, logged_in_page, tracing
|
|
32
|
-
│ └── <project>/test_<feature>.py
|
|
33
|
-
utils/ ← config_loader, logger, steps, test_ordering, report helpers
|
|
34
|
-
test_data/ ← JSON datasets
|
|
35
|
-
config/config.yaml ← browser, timeout, video/screenshot/trace toggles
|
|
36
|
-
reports/ test-results/ ← generated (gitignored): html report, trace.zip, screenshots
|
|
37
|
-
|
|
38
|
-
coding_standards:
|
|
39
|
-
naming:
|
|
40
|
-
test_case_id: "TC_<FEATURE>_<NNN>"
|
|
41
|
-
test_class: "TestFeatureHappyCase"
|
|
42
|
-
test_function: "test_TC<NNN>_<snake_case>"
|
|
43
|
-
page_object: "<feature>_page.py with <Feature>Page class extending BasePage"
|
|
44
|
-
files:
|
|
45
|
-
test_case_md: "{qc_artifact_dir}test-cases/TC_<FEATURE>.Test.md"
|
|
46
|
-
page_object: "pages/<feature>_page.py"
|
|
47
|
-
test_script: "tests/<project>/test_<feature>.py"
|
|
48
|
-
patterns:
|
|
49
|
-
steps: "wrap steps with `with step(\"…\")` (from utils.steps import step)"
|
|
50
|
-
assertions: "Playwright expect() — never bare assert on dynamic UI"
|
|
51
|
-
fixtures: "auth fixtures register via register_auth_fixtures([...]) in project conftest"
|
|
52
|
-
fail_triage: "classify each FAIL as script-bug (fix selector/logic) vs product-gap (keep FAIL + evidence, never fake-pass)"
|
|
53
|
-
|
|
54
|
-
testing:
|
|
55
|
-
layers: "functional (gui-screen / gui-feature / api), integration (api/db/gui/kafka), e2e (journey), non-functional, exploratory"
|
|
56
|
-
runner: "pytest-playwright; trace via context.tracing.start in conftest"
|
|
57
|
-
report: "pytest-html (--html ... --self-contained-html) + Playwright Trace viewer"
|
|
58
|
-
|
|
59
|
-
trace_tags:
|
|
60
|
-
# QC tests map back to the framework's scenarios — drives qc_status in the trace TSV.
|
|
61
|
-
verifies: "# @trace.verifies={UC-ID}-SC{N}"
|
|
62
|
-
source: "# @trace.source=specs/{domain}/{prd-slug}/bdd/{platform}/{UC-ID}-{slug}.feature"
|
|
63
|
-
test_type: "# @trace.test_type=functional|integration|e2e|non-functional"
|
|
64
|
-
|
|
65
|
-
# qc_status: /qc-run-test writes pass|fail|skip|not_run + qc_run_at into {trace_dir}/{UC-ID}.tsv
|
|
66
|
-
# (parallel to dev_selftest), surfaced in Living Docs as the OFFICIAL QC automation result.
|