@dzhechkov/keysarium 1.0.1 → 1.1.1
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- package/README.md +21 -5
- package/package.json +1 -1
- package/src/utils.js +5 -4
- package/templates/.claude/commands/brain-export.md +121 -0
- package/templates/.claude/commands/brain-import.md +115 -0
- package/templates/.claude/rules/checkpoint-protocol.md +46 -0
- package/templates/.claude/rules/feedback-loops.md +113 -0
- package/templates/.claude/rules/model-routing.md +65 -0
- package/templates/.claude/rules/trust-tiers.md +36 -0
- package/templates/.claude/shards/phase-0-discovery.shard.md +45 -0
- package/templates/.claude/shards/phase-1-explore.shard.md +32 -0
- package/templates/.claude/shards/phase-2-research.shard.md +42 -0
- package/templates/.claude/shards/phase-25-cjm.shard.md +47 -0
- package/templates/.claude/shards/phase-3-solve.shard.md +47 -0
- package/templates/.claude/shards/phase-4-architecture.shard.md +41 -0
- package/templates/.claude/shards/phase-5-presentation.shard.md +56 -0
- package/templates/.claude/skills/explore/SKILL.md +7 -4
- package/templates/.claude/skills/frontend-design/SKILL.md +3 -0
- package/templates/.claude/skills/goap-research-ed25519/SKILL.md +3 -0
- package/templates/.claude/skills/presentation-storyteller/SKILL.md +5 -2
- package/templates/.claude/skills/problem-solver-enhanced/SKILL.md +3 -0
- package/templates/.claude/skills/reverse-engineering-unicorn/SKILL.md +3 -0
- package/templates/CLAUDE.md +55 -3
- package/templates/docs/improvement-directions.md +641 -0
- package/templates/docs/skills-bto/01-deployment-guide.md +33 -33
- package/templates/docs/skills-bto/02-admin-guide.md +13 -13
- package/templates/docs/skills-bto/03-user-guide.md +1 -1
- package/templates/docs/skills-bto/04-infrastructure-requirements.md +4 -4
- package/templates/docs/skills-bto/05-architecture.md +4 -4
- package/templates/docs/skills-bto/06-user-flows.md +1 -1
|
@@ -0,0 +1,641 @@
|
|
|
1
|
+
# Направления улучшений Keysarium & Skills-BTO
|
|
2
|
+
|
|
3
|
+
> Результат deep research по репозиториям [Ruflo](https://github.com/ruvnet/ruflo), [Agentic QE](https://github.com/proffesor-for-testing/agentic-qe) и статье [The Portable Orchestra](https://qualityforge.substack.com/p/the-portable-orchestra) (Dragan Spiridonov).
|
|
4
|
+
>
|
|
5
|
+
> Дата исследования: 2026-03-01
|
|
6
|
+
|
|
7
|
+
---
|
|
8
|
+
|
|
9
|
+
## Содержание
|
|
10
|
+
|
|
11
|
+
1. [Governance & Constitution](#1-governance--constitution)
|
|
12
|
+
2. [Portable Brain / Knowledge Export](#2-portable-brain--knowledge-export)
|
|
13
|
+
3. [Learning & Memory System](#3-learning--memory-system)
|
|
14
|
+
4. [Trust Tiers для скиллов](#4-trust-tiers-для-скиллов)
|
|
15
|
+
5. [Enhanced Agent Orchestration](#5-enhanced-agent-orchestration)
|
|
16
|
+
6. [Multi-Platform Support](#6-multi-platform-support)
|
|
17
|
+
7. [Cryptographic Verification Upgrade](#7-cryptographic-verification-upgrade)
|
|
18
|
+
8. [Modular Reuse: keysarium-core extraction](#8-modular-reuse-keysarium-core-extraction)
|
|
19
|
+
9. [Приоритезация](#9-приоритезация)
|
|
20
|
+
10. [Источники](#10-источники)
|
|
21
|
+
|
|
22
|
+
---
|
|
23
|
+
|
|
24
|
+
## 1. Governance & Constitution
|
|
25
|
+
|
|
26
|
+
**Текущее состояние:** 7 правил в `.claude/rules/` — мягкие рекомендации, которые Claude может "забыть" через ~40 минут контекста.
|
|
27
|
+
|
|
28
|
+
### 1.1. Constitution + Shards
|
|
29
|
+
|
|
30
|
+
| | |
|
|
31
|
+
|---|---|
|
|
32
|
+
| **Источник** | Ruflo (7-layer governance), AQE (domain shards) |
|
|
33
|
+
| **Проблема** | Правила загружаются один раз и дрифтуют при длинных сессиях |
|
|
34
|
+
| **Решение** | Каждая фаза пайплайна получает свой `.shard.md` с жёсткими правилами, которые перечитываются перед каждой фазой |
|
|
35
|
+
|
|
36
|
+
**Ruflo** реализует 7-слойную систему governance:
|
|
37
|
+
1. Constitutional Layer — неизменяемые инварианты
|
|
38
|
+
2. Policy Layer — правила, изменяемые через голосование
|
|
39
|
+
3. Enforcement Layer — автоматическая проверка на каждом шаге
|
|
40
|
+
4. Audit Layer — логирование всех решений
|
|
41
|
+
5. Amendment Layer — процесс изменения политик
|
|
42
|
+
6. Arbitration Layer — разрешение конфликтов
|
|
43
|
+
7. Attestation Layer — криптографическое подтверждение
|
|
44
|
+
|
|
45
|
+
**AQE** использует domain shards (`.claude/guidance/shards/{domain}.shard.md`), которые определяют:
|
|
46
|
+
- Правила и пороги качества для конкретного домена
|
|
47
|
+
- Права агентов (кто может писать, кто read-only)
|
|
48
|
+
- Триггеры эскалации с уровнями серьёзности
|
|
49
|
+
- Namespace памяти и политику retention
|
|
50
|
+
|
|
51
|
+
**Реализация для Keysarium:**
|
|
52
|
+
|
|
53
|
+
```
|
|
54
|
+
.claude/shards/
|
|
55
|
+
├── phase-0-discovery.shard.md ← Правила для Phase 0
|
|
56
|
+
├── phase-1-explore.shard.md ← Правила для Phase 1
|
|
57
|
+
├── phase-2-research.shard.md ← Правила для Phase 2 (PARANOID mode)
|
|
58
|
+
├── phase-25-cjm.shard.md ← Правила для Phase 2.5 (MANDATORY)
|
|
59
|
+
├── phase-3-solve.shard.md ← Правила для Phase 3
|
|
60
|
+
├── phase-4-architecture.shard.md ← Правила для Phase 4
|
|
61
|
+
├── phase-5-presentation.shard.md ← Правила для Phase 5
|
|
62
|
+
└── bto-evaluation.shard.md ← Правила для BTO pipeline
|
|
63
|
+
```
|
|
64
|
+
|
|
65
|
+
Каждый shard перечитывается агентом перед началом работы фазы, что решает проблему context drift.
|
|
66
|
+
|
|
67
|
+
### 1.2. Unbreakable Invariants
|
|
68
|
+
|
|
69
|
+
| | |
|
|
70
|
+
|---|---|
|
|
71
|
+
| **Источник** | AQE (7 invariants в Constitution) |
|
|
72
|
+
| **Проблема** | Критические правила записаны как текст — их можно случайно нарушить |
|
|
73
|
+
| **Решение** | Формализовать инварианты как enforcement gates |
|
|
74
|
+
|
|
75
|
+
AQE определяет 7 неизменяемых инвариантов:
|
|
76
|
+
1. Test Execution Integrity — доказательство реального выполнения
|
|
77
|
+
2. Security Scan Requirement — zero critical vulnerabilities
|
|
78
|
+
3. Backup Before Delete — обязательный бэкап
|
|
79
|
+
4. Loop Detection — max 3 идентичных действия подряд
|
|
80
|
+
5. Budget Enforcement — лимиты сессии
|
|
81
|
+
6. Memory Consistency — нет противоречивых паттернов
|
|
82
|
+
7. Verification Before Claim — claims require proof
|
|
83
|
+
|
|
84
|
+
**Предлагаемые инварианты для Keysarium:**
|
|
85
|
+
|
|
86
|
+
| Инвариант | Enforcement |
|
|
87
|
+
|-----------|-------------|
|
|
88
|
+
| CJM Phase 2.5 НИКОГДА не пропускается | Gate check перед Phase 3 |
|
|
89
|
+
| Executive Summary (08) ОБЯЗАТЕЛЕН | Gate check перед packaging |
|
|
90
|
+
| PARANOID mode: ноль unverified claims | Automated scan артефактов Phase 2 |
|
|
91
|
+
| BTO: judge и generator — разные модели | Model check в BTO pipeline |
|
|
92
|
+
| Layer 0 rejection = NO escalation без 3 retries | Retry counter в BTO test |
|
|
93
|
+
| Файлы создаются в момент фазы, не в Phase 6 | File existence check на checkpoint |
|
|
94
|
+
|
|
95
|
+
### 1.3. Policy Compilation
|
|
96
|
+
|
|
97
|
+
| | |
|
|
98
|
+
|---|---|
|
|
99
|
+
| **Источник** | Ruflo (`CLAUDE.md → PolicyBundle → shards → gates → ledger`) |
|
|
100
|
+
| **Решение** | `CLAUDE.md` компилируется в per-phase шарды при `/casarium` старте |
|
|
101
|
+
|
|
102
|
+
Каждый агент получает только релевантный шард вместо всего CLAUDE.md (~300 строк). Это снижает нагрузку на контекст и повышает точность следования правилам.
|
|
103
|
+
|
|
104
|
+
---
|
|
105
|
+
|
|
106
|
+
## 2. Portable Brain / Knowledge Export
|
|
107
|
+
|
|
108
|
+
**Текущее состояние:** `/harvest` извлекает знания в `TOOLKIT_HARVEST.md` — плоский текстовый файл. One-way процесс без импорта.
|
|
109
|
+
|
|
110
|
+
### 2.1. Portable Intelligence Container
|
|
111
|
+
|
|
112
|
+
| | |
|
|
113
|
+
|---|---|
|
|
114
|
+
| **Источник** | Quality Forge (`.rvf` format — "Docker for quality intelligence"), Ruflo (`brain export/import`) |
|
|
115
|
+
| **Проблема** | Знания не переносятся между проектами и командами |
|
|
116
|
+
| **Решение** | Формат portable brain container с export/import |
|
|
117
|
+
|
|
118
|
+
Quality Forge вводит концепцию "Docker для quality intelligence" — `.rvf` (RuVector Format):
|
|
119
|
+
- Упаковывает все паттерны, оценки, метаданные в один файл
|
|
120
|
+
- Включает версионирование и совместимость
|
|
121
|
+
- Поддерживает selective import (только нужные домены)
|
|
122
|
+
|
|
123
|
+
**Реализация для Keysarium:**
|
|
124
|
+
|
|
125
|
+
```bash
|
|
126
|
+
npx @dzhechkov/keysarium brain export # → keysarium-brain-2026-03-01.json
|
|
127
|
+
npx @dzhechkov/keysarium brain import brain.json # Импорт в другой проект
|
|
128
|
+
npx @dzhechkov/keysarium brain merge brain1 brain2 # Слияние из нескольких проектов
|
|
129
|
+
```
|
|
130
|
+
|
|
131
|
+
Структура brain container:
|
|
132
|
+
```json
|
|
133
|
+
{
|
|
134
|
+
"version": "1.0",
|
|
135
|
+
"exported_at": "2026-03-01T12:00:00Z",
|
|
136
|
+
"source_project": "product-keysarium-2026",
|
|
137
|
+
"patterns": [...],
|
|
138
|
+
"bto_evaluations": [...],
|
|
139
|
+
"harvest_data": [...],
|
|
140
|
+
"domain_templates": [...],
|
|
141
|
+
"metadata": {
|
|
142
|
+
"total_cases_processed": 12,
|
|
143
|
+
"skill_trust_tiers": {...},
|
|
144
|
+
"domain_statistics": {...}
|
|
145
|
+
}
|
|
146
|
+
}
|
|
147
|
+
```
|
|
148
|
+
|
|
149
|
+
### 2.2. Cross-project Knowledge Transfer
|
|
150
|
+
|
|
151
|
+
| | |
|
|
152
|
+
|---|---|
|
|
153
|
+
| **Источник** | AQE (ReasoningBank, cross-project patterns) |
|
|
154
|
+
| **Проблема** | BTO-оценки скиллов не переносятся |
|
|
155
|
+
| **Решение** | Если скилл прошёл Layer 2 в проекте A, в проекте B можно пропустить полную ре-оценку |
|
|
156
|
+
|
|
157
|
+
### 2.3. Hash-chained Audit Trail
|
|
158
|
+
|
|
159
|
+
| | |
|
|
160
|
+
|---|---|
|
|
161
|
+
| **Источник** | Quality Forge (SHA-256 witness chain), Ruflo (AttestationLog) |
|
|
162
|
+
| **Проблема** | Нет гарантии целостности цепочки решений |
|
|
163
|
+
| **Решение** | Каждое решение BTO подписывается и чейнится |
|
|
164
|
+
|
|
165
|
+
```
|
|
166
|
+
Artifact_v1 → hash_1 → Judge_scores → hash_2 → Optimization_v2 → hash_3 → ...
|
|
167
|
+
```
|
|
168
|
+
|
|
169
|
+
Невозможно задним числом подправить оценку или подменить промежуточный артефакт.
|
|
170
|
+
|
|
171
|
+
---
|
|
172
|
+
|
|
173
|
+
## 3. Learning & Memory System
|
|
174
|
+
|
|
175
|
+
**Текущее состояние:** Нет никакой персистентной памяти. Каждая сессия начинается с нуля. 10-й кейс решается так же, как первый.
|
|
176
|
+
|
|
177
|
+
### 3.1. Reward-calibrated Learning
|
|
178
|
+
|
|
179
|
+
| | |
|
|
180
|
+
|---|---|
|
|
181
|
+
| **Источник** | AQE (0-1 reward scale на каждую задачу каждого агента) |
|
|
182
|
+
| **Проблема** | Нет обратной связи по качеству работы агентов |
|
|
183
|
+
| **Решение** | Каждый агент записывает reward после завершения |
|
|
184
|
+
|
|
185
|
+
Протокол AQE:
|
|
186
|
+
1. **Pre-task:** `memory_query()` — загрузить релевантные паттерны
|
|
187
|
+
2. **Post-task:** `memory_store()` — сохранить результат с reward score (0.0–1.0)
|
|
188
|
+
3. **Submit:** Отчёт координатору
|
|
189
|
+
|
|
190
|
+
Шкала reward:
|
|
191
|
+
- 1.0 = Отличный результат на checkpoint, пользователь сказал "ок" сразу
|
|
192
|
+
- 0.7 = Хороший результат, минимальные правки
|
|
193
|
+
- 0.3 = Потребовалась существенная доработка
|
|
194
|
+
- 0.0 = Полный провал, переделка с нуля
|
|
195
|
+
|
|
196
|
+
**Применение к Keysarium:** Со временем система показывает, какие фазы проблемные, какие скиллы дают лучшие результаты в каких доменах.
|
|
197
|
+
|
|
198
|
+
### 3.2. Cross-phase Feedback Loops
|
|
199
|
+
|
|
200
|
+
| | |
|
|
201
|
+
|---|---|
|
|
202
|
+
| **Источник** | AQE (4 named feedback loops с TTL namespaces) |
|
|
203
|
+
| **Проблема** | Передача данных между фазами ручная (через `{CHOSEN_CJM}`) |
|
|
204
|
+
| **Решение** | Формализованные именованные feedback loops |
|
|
205
|
+
|
|
206
|
+
AQE реализует 4 кросс-фазных цикла обратной связи:
|
|
207
|
+
|
|
208
|
+
1. **Production → Ideation (Strategic):** Прошлые дефекты влияют на планирование
|
|
209
|
+
2. **Production → Refinement (Tactical):** История дефектов задаёт вес факторам
|
|
210
|
+
3. **CI/CD → Development (Operational):** Провалы гейтов направляют генерацию тестов
|
|
211
|
+
4. **Development → Refinement (Quality Criteria):** Пробелы покрытия выявляют дефициты критериев
|
|
212
|
+
|
|
213
|
+
**Предлагаемые feedback loops для Keysarium:**
|
|
214
|
+
|
|
215
|
+
| Loop | Маршрут | Данные |
|
|
216
|
+
|------|---------|--------|
|
|
217
|
+
| CJM → Solve | Phase 2.5 → Phase 3 | `{CHOSEN_CJM}`, pain points, conversion metrics |
|
|
218
|
+
| Research → Presentation | Phase 2 → Phase 5 | Ключевые finding'ы, verified sources |
|
|
219
|
+
| Solve → Architecture | Phase 3 → Phase 4 | Выбранная стратегия, constraints |
|
|
220
|
+
| BTO Judges → Optimize | Layer 2 → Optimizer | Judge feedback, weak dimensions |
|
|
221
|
+
| History → Discovery | Past cases → Phase 0 | Domain patterns, common pitfalls |
|
|
222
|
+
|
|
223
|
+
Все loops используют именованные namespaces с TTL:
|
|
224
|
+
```
|
|
225
|
+
keysarium/cross-phase/cjm-to-solve/{case-slug} — 30 days
|
|
226
|
+
keysarium/cross-phase/research-to-pres/{case-slug} — 30 days
|
|
227
|
+
keysarium/history/domain-patterns/{domain} — 90 days
|
|
228
|
+
```
|
|
229
|
+
|
|
230
|
+
### 3.3. Dream Cycles (Background Consolidation)
|
|
231
|
+
|
|
232
|
+
| | |
|
|
233
|
+
|---|---|
|
|
234
|
+
| **Источник** | AQE (биологическая метафора: сон → консолидация памяти) |
|
|
235
|
+
| **Проблема** | Нет автоматического анализа паттернов между сессиями |
|
|
236
|
+
| **Решение** | Фоновый процесс анализирует накопленные паттерны |
|
|
237
|
+
|
|
238
|
+
Как работает Dream Cycle в AQE:
|
|
239
|
+
1. **Pattern Collection** — хуки автоматически собирают опыт
|
|
240
|
+
2. **Dream Triggers** — по времени (60 мин), по объёму (20 событий), по провалу quality gate
|
|
241
|
+
3. **The Dream** — DreamEngine загружает топ-200 паттернов, строит concept graph, обнаруживает кросс-доменные ассоциации
|
|
242
|
+
4. **Insight Application** — инсайты становятся actionable паттернами
|
|
243
|
+
5. **Future Influence** — HNSW search обогащает маршрутизацию агентов
|
|
244
|
+
|
|
245
|
+
**Применение к Keysarium:**
|
|
246
|
+
После нескольких `/casarium` запусков фоновый процесс анализирует паттерны:
|
|
247
|
+
- "В банковских кейсах Phase 2 занимает 2x дольше запланированного"
|
|
248
|
+
- "TRIZ чаще даёт прорывы, чем Game Theory для retail-доменов"
|
|
249
|
+
- "CJM Variant B выигрывает в 70% enterprise-кейсов"
|
|
250
|
+
|
|
251
|
+
### 3.4. Semantic Completion Promises
|
|
252
|
+
|
|
253
|
+
| | |
|
|
254
|
+
|---|---|
|
|
255
|
+
| **Источник** | AQE (`<promise>TESTS_GREEN</promise>` — машинно-читаемые сигналы состояния) |
|
|
256
|
+
| **Проблема** | Статус фазы — текстовый, не machine-readable |
|
|
257
|
+
| **Решение** | `<promise>` теги как формальные сигналы |
|
|
258
|
+
|
|
259
|
+
AQE использует semantic promises:
|
|
260
|
+
- `<promise>TESTS_GREEN</promise>`
|
|
261
|
+
- `<promise>COVERAGE_MET</promise>`
|
|
262
|
+
- `<promise>QUALITY_GATES_PASSED</promise>`
|
|
263
|
+
- `<promise>SECURITY_CLEARED</promise>`
|
|
264
|
+
- `<promise>DEPLOYMENT_READY</promise>`
|
|
265
|
+
|
|
266
|
+
**Предлагаемые promises для Keysarium:**
|
|
267
|
+
|
|
268
|
+
| Promise | Фаза | Значение |
|
|
269
|
+
|---------|------|----------|
|
|
270
|
+
| `DISCOVERY_COMPLETE` | Phase 0 | JTBD + конкуренты + ROI проанализированы |
|
|
271
|
+
| `CASE_EXPLORED` | Phase 1 | Кейс полностью понят, brief создан |
|
|
272
|
+
| `RESEARCH_PARANOID_PASSED` | Phase 2 | Все claims верифицированы, zero unverified |
|
|
273
|
+
| `CJM_VALIDATED` | Phase 2.5 | CJM прототип создан и выбран |
|
|
274
|
+
| `SOLUTION_DESIGNED` | Phase 3 | Стратегия решения сформирована |
|
|
275
|
+
| `ARCHITECTURE_DEFINED` | Phase 4 | C4 диаграммы + sequence flows готовы |
|
|
276
|
+
| `PRESENTATION_READY` | Phase 5 | Все 4 артефакта (05-08) созданы |
|
|
277
|
+
| `BTO_LAYER0_PASSED` | BTO | 71 детерминистическая проверка пройдена |
|
|
278
|
+
| `BTO_LAYER2_SCORED` | BTO | Panel из 3 judges оценила артефакт |
|
|
279
|
+
| `BTO_OPTIMIZED` | BTO | Оптимизация завершена, convergence достигнута |
|
|
280
|
+
|
|
281
|
+
---
|
|
282
|
+
|
|
283
|
+
## 4. Trust Tiers для скиллов
|
|
284
|
+
|
|
285
|
+
**Текущее состояние:** Все 6 скиллов равноправны, нет градации по валидированности.
|
|
286
|
+
|
|
287
|
+
### Система тиров (из AQE)
|
|
288
|
+
|
|
289
|
+
AQE классифицирует 78 скиллов по 4 уровням доверия:
|
|
290
|
+
|
|
291
|
+
| Tier | Определение | Требования |
|
|
292
|
+
|------|------------|------------|
|
|
293
|
+
| **Tier 3 — Verified** | Полностью валидирован | Eval test suites с детерминистической валидацией |
|
|
294
|
+
| **Tier 2 — Validated** | Протестирован | Тестирование без формальной eval-инфраструктуры |
|
|
295
|
+
| **Tier 1 — Structured** | Структурирован | JSON output schemas, документация |
|
|
296
|
+
| **Tier 0 — Advisory** | Рекомендательный | Базовые инструкции без тестов |
|
|
297
|
+
|
|
298
|
+
**Применение к текущим скиллам Keysarium:**
|
|
299
|
+
|
|
300
|
+
| Скилл | Текущий тир | Путь к повышению |
|
|
301
|
+
|-------|------------|------------------|
|
|
302
|
+
| explore | Tier 1 — Structured | SKILL.md + references → прогнать `/bto-test` |
|
|
303
|
+
| goap-research-ed25519 | Tier 1 — Structured | SKILL.md + references + scripts → прогнать `/bto-test` |
|
|
304
|
+
| problem-solver-enhanced | Tier 1 — Structured | SKILL.md → прогнать `/bto-test` |
|
|
305
|
+
| reverse-engineering-unicorn | Tier 1 — Structured | SKILL.md + modules + examples → прогнать `/bto-test` |
|
|
306
|
+
| bto | Tier 1 — Structured | SKILL.md + 3 modules → self-evaluate через `/bto-test` |
|
|
307
|
+
| frontend-design | Tier 0 — Advisory | Только SKILL.md → нужны references |
|
|
308
|
+
| presentation-storyteller | Tier 0 — Advisory | SKILL.md + references → нужны eval tests |
|
|
309
|
+
|
|
310
|
+
**Реализация:**
|
|
311
|
+
```bash
|
|
312
|
+
npx @dzhechkov/keysarium doctor # Показывает tier каждого скилла
|
|
313
|
+
npx @dzhechkov/skills-bto test .claude/skills/explore/ # Повысить tier
|
|
314
|
+
```
|
|
315
|
+
|
|
316
|
+
Вывод `doctor`:
|
|
317
|
+
```
|
|
318
|
+
Skills Health Check:
|
|
319
|
+
✅ explore Tier 1 — Structured
|
|
320
|
+
✅ goap-research-ed25519 Tier 1 — Structured
|
|
321
|
+
✅ problem-solver-enhanced Tier 1 — Structured
|
|
322
|
+
✅ reverse-engineering-unicorn Tier 1 — Structured
|
|
323
|
+
⚠️ frontend-design Tier 0 — Advisory (missing: references/)
|
|
324
|
+
⚠️ presentation-storyteller Tier 0 — Advisory (missing: eval tests)
|
|
325
|
+
✅ bto Tier 1 — Structured
|
|
326
|
+
|
|
327
|
+
Tip: Run /bto-test on each skill to promote to Tier 2+
|
|
328
|
+
```
|
|
329
|
+
|
|
330
|
+
---
|
|
331
|
+
|
|
332
|
+
## 5. Enhanced Agent Orchestration
|
|
333
|
+
|
|
334
|
+
**Текущее состояние:** Простой параллелизм через Agent tool (2–3 агента на фазу), advisory рекомендации в `agent-swarm.md`.
|
|
335
|
+
|
|
336
|
+
### 5.1. Queen Coordinator Protocol
|
|
337
|
+
|
|
338
|
+
| | |
|
|
339
|
+
|---|---|
|
|
340
|
+
| **Источник** | AQE (10-phase mandatory protocol для queen coordinator) |
|
|
341
|
+
| **Проблема** | Нет формального протокола координации — ad-hoc параллелизм |
|
|
342
|
+
| **Решение** | `/casarium` становится queen-координатором |
|
|
343
|
+
|
|
344
|
+
10-фазный протокол AQE:
|
|
345
|
+
1. `fleet_init()` — инициализация с выбранной топологией
|
|
346
|
+
2. `fleet_health()` — проверка готовности системы
|
|
347
|
+
3. `memory_query()` — загрузка исторических паттернов
|
|
348
|
+
4. Анализ задачи, определение нужных доменов
|
|
349
|
+
5. `agent_spawn()` — spawn агентов по доменам
|
|
350
|
+
6. `task_orchestrate()` — отправка работы (parallel/sequential/adaptive)
|
|
351
|
+
7. `task_list()` — мониторинг до завершения
|
|
352
|
+
8. `agent_metrics()` — сбор результатов
|
|
353
|
+
9. `memory_store()` — архивация паттернов
|
|
354
|
+
10. Structured report
|
|
355
|
+
|
|
356
|
+
**Адаптация для Keysarium `/casarium`:**
|
|
357
|
+
|
|
358
|
+
```
|
|
359
|
+
1. INIT — Создать researches/<slug>/, проверить структуру
|
|
360
|
+
2. HEALTH — Проверить наличие всех скиллов и зависимостей
|
|
361
|
+
3. LOAD — Загрузить паттерны из прошлых кейсов (если есть brain)
|
|
362
|
+
4. DETECT — Определить домен (banking/retail/enterprise/healthcare)
|
|
363
|
+
5. SHARD — Загрузить domain-specific shard
|
|
364
|
+
6. ORCHESTRATE — Запустить фазы с правильной топологией
|
|
365
|
+
7. MONITOR — Checkpoint после каждой фазы
|
|
366
|
+
8. COLLECT — Собрать все артефакты
|
|
367
|
+
9. STORE — Сохранить паттерны в brain
|
|
368
|
+
10. REPORT — Финальный отчёт + packaging
|
|
369
|
+
```
|
|
370
|
+
|
|
371
|
+
### 5.2. 3-Tier Model Routing (формализация)
|
|
372
|
+
|
|
373
|
+
| | |
|
|
374
|
+
|---|---|
|
|
375
|
+
| **Источник** | Ruflo (WASM/Haiku/Sonnet-Opus), AQE (TinyDancer ADR-026) |
|
|
376
|
+
| **Проблема** | В `agent-swarm.md` есть haiku/sonnet/opus рекомендации, но это advisory |
|
|
377
|
+
| **Решение** | Формализовать model routing в enforcement rules |
|
|
378
|
+
|
|
379
|
+
| Tier | Модель | Latency | Cost | Когда использовать |
|
|
380
|
+
|------|--------|---------|------|--------------------|
|
|
381
|
+
| Tier 1 | Haiku | ~500ms | $0.0002 | Layer 0 checks, file formatting, simple transforms |
|
|
382
|
+
| Tier 2 | Sonnet | ~2s | $0.003 | Research synthesis, analysis, BTO judge panel |
|
|
383
|
+
| Tier 3 | Opus | ~5s | $0.015 | Creative CJM design, presentation storytelling, BTO crossover |
|
|
384
|
+
|
|
385
|
+
AQE дополнительно использует **Agent Booster (WASM)** — skip LLM entirely для простых трансформов (<1ms, $0). Это даёт **87% cost reduction**.
|
|
386
|
+
|
|
387
|
+
**Enforcement rule:**
|
|
388
|
+
```markdown
|
|
389
|
+
# Model Routing Enforcement
|
|
390
|
+
- Layer 0 checks: model="haiku" ALWAYS — no exceptions
|
|
391
|
+
- File formatting agents: model="haiku"
|
|
392
|
+
- Research synthesis: model="sonnet" minimum
|
|
393
|
+
- Creative work (CJM, storytelling): model="opus" or default
|
|
394
|
+
- BTO judges: model="sonnet" — NEVER haiku for Layer 2
|
|
395
|
+
- BTO optimization crossover: model="opus" — creative synthesis
|
|
396
|
+
```
|
|
397
|
+
|
|
398
|
+
### 5.3. Background Workers
|
|
399
|
+
|
|
400
|
+
| | |
|
|
401
|
+
|---|---|
|
|
402
|
+
| **Источник** | Ruflo (12 worker types), AQE (dream cycle workers) |
|
|
403
|
+
| **Проблема** | Вся обработка synchronous, блокирует foreground |
|
|
404
|
+
| **Решение** | Фоновые воркеры для non-blocking операций |
|
|
405
|
+
|
|
406
|
+
Ruflo использует 12 типов background workers:
|
|
407
|
+
- State checkpointing
|
|
408
|
+
- Brain export/import
|
|
409
|
+
- Pattern consolidation
|
|
410
|
+
- Metrics collection
|
|
411
|
+
- Hook processing
|
|
412
|
+
|
|
413
|
+
**Применение к Keysarium:**
|
|
414
|
+
```bash
|
|
415
|
+
keysarium daemon consolidate # Фоновый анализ паттернов
|
|
416
|
+
keysarium daemon export-brain # Фоновый brain export
|
|
417
|
+
keysarium daemon health-check # Периодическая проверка здоровья скиллов
|
|
418
|
+
```
|
|
419
|
+
|
|
420
|
+
### 5.4. Topology Selection
|
|
421
|
+
|
|
422
|
+
| | |
|
|
423
|
+
|---|---|
|
|
424
|
+
| **Источник** | Ruflo (6 topologies: hierarchical, mesh, ring, star, hybrid, adaptive) |
|
|
425
|
+
| **Проблема** | Один тип параллелизма для всех фаз |
|
|
426
|
+
| **Решение** | Выбор топологии в зависимости от фазы |
|
|
427
|
+
|
|
428
|
+
| Фаза | Топология | Обоснование |
|
|
429
|
+
|------|-----------|-------------|
|
|
430
|
+
| Phase 0 (Discovery) | **Star** — coordinator + 2 workers | Простая параллелизация, coordinator агрегирует |
|
|
431
|
+
| Phase 2 (Research) | **Mesh** — 3 independent agents | Fault-tolerant, каждый агент автономен |
|
|
432
|
+
| Phase 2.5 (CJM) | **Hierarchical** — queen + 3 variant workers | Queen выбирает лучший вариант |
|
|
433
|
+
| Phase 5 (Presentation) | **Hierarchical** — storyteller orchestrates | Storyteller координирует script + Q&A |
|
|
434
|
+
| BTO Test | **Star** — 3 isolated judges | Judges ОБЯЗАНЫ быть изолированы |
|
|
435
|
+
| BTO Optimize | **Mesh** — N mutation workers | Независимые мутации, convergence check |
|
|
436
|
+
|
|
437
|
+
---
|
|
438
|
+
|
|
439
|
+
## 6. Multi-Platform Support
|
|
440
|
+
|
|
441
|
+
**Текущее состояние:** Только Claude Code. Один формат (`.claude/` directory).
|
|
442
|
+
|
|
443
|
+
### Поддерживаемые платформы (из AQE)
|
|
444
|
+
|
|
445
|
+
AQE поддерживает **11 платформ** через `aqe platform setup [platform]`:
|
|
446
|
+
|
|
447
|
+
| Платформа | Конфигурация | Сложность внедрения | Ценность |
|
|
448
|
+
|-----------|-------------|---------------------|----------|
|
|
449
|
+
| Claude Code | `.claude/` (native) | Есть | Базовая |
|
|
450
|
+
| **Cursor** | TOML rules | Низкая | Высокая (самый популярный AI-IDE) |
|
|
451
|
+
| **OpenCode** | `.opencode/` directory | Низкая | Высокая (open-source) |
|
|
452
|
+
| **GitHub Copilot** | JSON config | Средняя | Высокая (enterprise) |
|
|
453
|
+
| **AWS Kiro** | `.kiro/` assets | Средняя | Средняя (AWS ecosystem) |
|
|
454
|
+
| Cline | YAML config | Средняя | Средняя |
|
|
455
|
+
| Windsurf | Config file | Средняя | Средняя |
|
|
456
|
+
| Roo Code | Config file | Средняя | Низкая |
|
|
457
|
+
| Kilo Code | Config file | Средняя | Низкая |
|
|
458
|
+
| Continue.dev | Config file | Средняя | Низкая |
|
|
459
|
+
| OpenAI Codex CLI | Config file | Высокая | Средняя |
|
|
460
|
+
|
|
461
|
+
**Реализация для Keysarium:**
|
|
462
|
+
|
|
463
|
+
```bash
|
|
464
|
+
npx @dzhechkov/keysarium init # Claude Code (default)
|
|
465
|
+
npx @dzhechkov/keysarium init --platform cursor # Cursor
|
|
466
|
+
npx @dzhechkov/keysarium init --platform opencode # OpenCode
|
|
467
|
+
npx @dzhechkov/keysarium init --platform copilot # GitHub Copilot
|
|
468
|
+
npx @dzhechkov/keysarium init --platform kiro # AWS Kiro
|
|
469
|
+
npx @dzhechkov/keysarium init --platform all # Все платформы
|
|
470
|
+
```
|
|
471
|
+
|
|
472
|
+
Skills и rules — тот же markdown, меняется только:
|
|
473
|
+
- Способ загрузки (`.claude/skills/` → `.cursor/skills/` → `.opencode/skills/`)
|
|
474
|
+
- Формат конфигурации (JSON → TOML → YAML)
|
|
475
|
+
- Platform-specific hooks
|
|
476
|
+
|
|
477
|
+
**Рекомендация:** Начать с Cursor + OpenCode как первых кандидатов (низкая сложность, высокая ценность). Это резко расширяет аудиторию.
|
|
478
|
+
|
|
479
|
+
---
|
|
480
|
+
|
|
481
|
+
## 7. Cryptographic Verification Upgrade
|
|
482
|
+
|
|
483
|
+
**Текущее состояние:** `goap-research-ed25519` использует Ed25519 для подписи source claims. Остальные скиллы и артефакты без верификации.
|
|
484
|
+
|
|
485
|
+
### 7.1. SHA-256 Witness Chain
|
|
486
|
+
|
|
487
|
+
| | |
|
|
488
|
+
|---|---|
|
|
489
|
+
| **Источник** | Quality Forge (SHA-256 hash-chained audit trail), Ruflo (AttestationLog) |
|
|
490
|
+
| **Решение** | Каждый phase artifact получает hash, chain связывает артефакты |
|
|
491
|
+
|
|
492
|
+
```
|
|
493
|
+
Phase 0: 00_product_discovery.md → SHA-256(content) = hash_0
|
|
494
|
+
Phase 1: 01_case_brief.md → SHA-256(content + hash_0) = hash_1
|
|
495
|
+
Phase 2: 02_research_findings.md → SHA-256(content + hash_1) = hash_2
|
|
496
|
+
...
|
|
497
|
+
```
|
|
498
|
+
|
|
499
|
+
Невозможно подменить промежуточный артефакт без разрыва цепочки.
|
|
500
|
+
|
|
501
|
+
### 7.2. BTO Judge Isolation Proof
|
|
502
|
+
|
|
503
|
+
| | |
|
|
504
|
+
|---|---|
|
|
505
|
+
| **Источник** | AQE (judge isolation enforcement), Ruflo (attestation) |
|
|
506
|
+
| **Решение** | Криптографическое доказательство независимости судей |
|
|
507
|
+
|
|
508
|
+
Каждый judge записывает свою оценку с `timestamp + SHA-256(evaluation)` **ДО** того, как видит оценки других. Это доказуемо верифицирует, что judges не влияли друг на друга.
|
|
509
|
+
|
|
510
|
+
```json
|
|
511
|
+
{
|
|
512
|
+
"judge_id": "domain-expert",
|
|
513
|
+
"artifact_hash": "sha256:abc...",
|
|
514
|
+
"score": 8.2,
|
|
515
|
+
"evaluation_hash": "sha256:def...",
|
|
516
|
+
"timestamp": "2026-03-01T12:00:00Z",
|
|
517
|
+
"previous_chain_hash": "sha256:ghi..."
|
|
518
|
+
}
|
|
519
|
+
```
|
|
520
|
+
|
|
521
|
+
### 7.3. Memory Write Gate
|
|
522
|
+
|
|
523
|
+
| | |
|
|
524
|
+
|---|---|
|
|
525
|
+
| **Источник** | Ruflo (quorum writes), AQE (Byzantine consensus) |
|
|
526
|
+
| **Решение** | Write quorum для критических операций |
|
|
527
|
+
|
|
528
|
+
Для обновления `TOOLKIT_HARVEST.md` — минимум 2 из 3 агентов должны согласиться на запись. Предотвращает случайную порчу накопленных знаний.
|
|
529
|
+
|
|
530
|
+
### 7.4. Ценность для доменов
|
|
531
|
+
|
|
532
|
+
Особенно важно для **банковского домена** (ФЗ-152, аудит ЦБ):
|
|
533
|
+
- Аудиторский trail каждого решения
|
|
534
|
+
- Верификация целостности артефактов
|
|
535
|
+
- Доказательство независимости оценок
|
|
536
|
+
|
|
537
|
+
---
|
|
538
|
+
|
|
539
|
+
## 8. Modular Reuse: keysarium-core extraction
|
|
540
|
+
|
|
541
|
+
**Текущее состояние:** Два пакета (`@dzhechkov/keysarium` и `@dzhechkov/skills-bto`), skills-bto зависит от keysarium templates.
|
|
542
|
+
|
|
543
|
+
### Предлагаемая 3-package архитектура
|
|
544
|
+
|
|
545
|
+
```
|
|
546
|
+
@dzhechkov/keysarium-core ← NEW: общие паттерны (фреймворк)
|
|
547
|
+
├── governance/ ← Constitution + shards + invariants
|
|
548
|
+
├── memory/ ← Learning protocol + reward system
|
|
549
|
+
├── orchestration/ ← Queen protocol + topology selection
|
|
550
|
+
├── verification/ ← Witness chain + audit trail
|
|
551
|
+
├── trust-tiers/ ← Tier classification system
|
|
552
|
+
└── platform/ ← Multi-platform config generators
|
|
553
|
+
|
|
554
|
+
@dzhechkov/keysarium ← Использует keysarium-core
|
|
555
|
+
├── phases/ ← 7-phase pipeline (domain: AI research)
|
|
556
|
+
├── skills/ ← Research-specific skills
|
|
557
|
+
├── shards/ ← Phase-specific governance shards
|
|
558
|
+
└── domain-templates/ ← Banking, Retail, Enterprise, Healthcare
|
|
559
|
+
|
|
560
|
+
@dzhechkov/skills-bto ← Использует keysarium-core
|
|
561
|
+
├── modules/ ← BUILD / TEST / OPTIMIZE
|
|
562
|
+
├── judges/ ← Judge panel + trust tiers
|
|
563
|
+
├── shards/ ← BTO-specific governance shards
|
|
564
|
+
└── optimization/ ← Evolutionary optimization engine
|
|
565
|
+
```
|
|
566
|
+
|
|
567
|
+
**Ценность:** `keysarium-core` становится фреймворком для ЛЮБОГО multi-agent pipeline:
|
|
568
|
+
- QE (Quality Engineering) — подключает свои skills и phases
|
|
569
|
+
- DevOps — подключает deployment pipelines
|
|
570
|
+
- Content Creation — подключает контент-воркеры
|
|
571
|
+
- Data Science — подключает ML pipelines
|
|
572
|
+
|
|
573
|
+
Общие паттерны (governance, memory, orchestration, verification) переиспользуются без дублирования.
|
|
574
|
+
|
|
575
|
+
---
|
|
576
|
+
|
|
577
|
+
## 9. Приоритезация
|
|
578
|
+
|
|
579
|
+
### По Impact / Effort
|
|
580
|
+
|
|
581
|
+
| # | Направление | Impact | Effort | ROI | Пакет |
|
|
582
|
+
|---|-------------|--------|--------|-----|-------|
|
|
583
|
+
| 1 | Trust Tiers для скиллов | High | Low | **Highest** | keysarium + bto |
|
|
584
|
+
| 2 | Semantic Completion Promises | High | Low | **Highest** | keysarium |
|
|
585
|
+
| 3 | 3-Tier Model Routing (формализация) | High | Low | **Highest** | keysarium + bto |
|
|
586
|
+
| 4 | Constitution + Shards | High | Medium | High | keysarium |
|
|
587
|
+
| 5 | Cross-phase Feedback Loops | High | Medium | High | keysarium |
|
|
588
|
+
| 6 | Reward-calibrated Learning | Very High | Medium | High | keysarium-core |
|
|
589
|
+
| 7 | Portable Brain export/import | Very High | Medium | High | keysarium-core |
|
|
590
|
+
| 8 | Multi-platform support (Cursor + OpenCode) | Very High | Medium | High | keysarium + bto |
|
|
591
|
+
| 9 | keysarium-core extraction | Transformative | High | Medium | NEW package |
|
|
592
|
+
| 10 | Witness Chain для BTO judges | Medium | Medium | Medium | bto |
|
|
593
|
+
|
|
594
|
+
### Рекомендуемый порядок реализации
|
|
595
|
+
|
|
596
|
+
**Wave 1 — Quick Wins (1–2 сессии):**
|
|
597
|
+
- Trust Tiers (обновить `doctor` command)
|
|
598
|
+
- Semantic Completion Promises (добавить `<promise>` теги в checkpoint protocol)
|
|
599
|
+
- Model Routing Enforcement (формализовать в rules)
|
|
600
|
+
|
|
601
|
+
**Wave 2 — Core Infrastructure (3–5 сессий):**
|
|
602
|
+
- Constitution + Shards (разбить rules на per-phase shards)
|
|
603
|
+
- Cross-phase Feedback Loops (именованные namespaces)
|
|
604
|
+
- Portable Brain v1 (JSON export/import через CLI)
|
|
605
|
+
|
|
606
|
+
**Wave 3 — Learning System (5–8 сессий):**
|
|
607
|
+
- Reward-calibrated Learning (persistence layer)
|
|
608
|
+
- Dream Cycles (background consolidation)
|
|
609
|
+
- Multi-platform support (Cursor + OpenCode)
|
|
610
|
+
|
|
611
|
+
**Wave 4 — Architecture Evolution (8+ сессий):**
|
|
612
|
+
- keysarium-core extraction (3-package architecture)
|
|
613
|
+
- Witness Chain (cryptographic audit trail)
|
|
614
|
+
- Background Workers (daemon system)
|
|
615
|
+
|
|
616
|
+
---
|
|
617
|
+
|
|
618
|
+
## 10. Источники
|
|
619
|
+
|
|
620
|
+
### Репозитории
|
|
621
|
+
|
|
622
|
+
| Источник | URL | Ключевые паттерны |
|
|
623
|
+
|----------|-----|-------------------|
|
|
624
|
+
| **Ruflo** | [github.com/ruvnet/ruflo](https://github.com/ruvnet/ruflo) | 7-layer governance, 6 topologies, AgentDB, RuVector, 3-tier model routing |
|
|
625
|
+
| **Agentic QE** | [github.com/proffesor-for-testing/agentic-qe](https://github.com/proffesor-for-testing/agentic-qe) | 13 DDD domains, 60 agents, trust tiers, ReasoningBank, dream cycles, PACT principles |
|
|
626
|
+
|
|
627
|
+
### Статьи и публикации
|
|
628
|
+
|
|
629
|
+
| Источник | URL | Ключевые идеи |
|
|
630
|
+
|----------|-----|---------------|
|
|
631
|
+
| **The Portable Orchestra** | [qualityforge.substack.com](https://qualityforge.substack.com/p/the-portable-orchestra) | Portable Brain (.rvf), Witness Chain, MinCut optimization, "Docker for quality intelligence" |
|
|
632
|
+
| **Agentic QE on Ministry of Testing** | [ministryoftesting.com](https://www.ministryoftesting.com/software-testing-tools/agentic-qe-fleet) | PACT framework, fleet architecture |
|
|
633
|
+
| **Evil Tester Podcast #030** | [eviltester.com](https://www.eviltester.com/show/030-agentic-ai-quality-engineering/) | Automation ceiling, coordination vs intelligence |
|
|
634
|
+
| **Xray Blog: AI QA Leadership 2026** | [getxray.app](https://www.getxray.app/blog/how-ai-will-shape-qa-leadership-in-2026-xray-blog) | Industry trends, agentic QE adoption |
|
|
635
|
+
|
|
636
|
+
### Авторы
|
|
637
|
+
|
|
638
|
+
| Автор | Контрибуция |
|
|
639
|
+
|-------|------------|
|
|
640
|
+
| **Dragan Spiridonov** | Agentic QE Fleet, PACT framework, Quality Forge articles |
|
|
641
|
+
| **ruvnet** | Ruflo framework, AgentDB, RuVector format |
|