@dzhechkov/keysarium 1.3.0 → 1.5.0

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (105) hide show
  1. package/README.md +70 -10
  2. package/bin/cli.js +0 -0
  3. package/package.json +5 -3
  4. package/src/utils.js +1 -1
  5. package/templates/.claude/commands/analyst-manual.md +38 -0
  6. package/templates/.claude/commands/brain-export.md +2 -0
  7. package/templates/.claude/commands/bto-benchmark.md +302 -0
  8. package/templates/.claude/commands/casarium.md +55 -4
  9. package/templates/.claude/commands/feature-adr.md +8 -0
  10. package/templates/.claude/commands/harvest.md +28 -46
  11. package/templates/.claude/rules/trust-tiers.md +6 -0
  12. package/templates/.claude/shards/feature-adr.shard.md +64 -10
  13. package/templates/.claude/shards/phase-ai-factory.shard.md +109 -0
  14. package/templates/.claude/skills/ai-factory-mapper/README.md +90 -0
  15. package/templates/.claude/skills/ai-factory-mapper/SKILL.md +309 -0
  16. package/templates/.claude/skills/ai-factory-mapper/assets/report-template.md +123 -0
  17. package/templates/.claude/skills/ai-factory-mapper/references/catalog.md +230 -0
  18. package/templates/.claude/skills/ai-factory-mapper/references/coverage-formula.md +219 -0
  19. package/templates/.claude/skills/ai-factory-mapper/references/decomposition-checklist.md +183 -0
  20. package/templates/.claude/skills/ai-factory-mapper/references/pattern-library.md +312 -0
  21. package/templates/.claude/skills/ai-factory-mapper/scripts/build_docx_report.js +423 -0
  22. package/templates/.claude/skills/analyst-manual-full/SKILL.md +286 -0
  23. package/templates/.claude/skills/edu-site-generator/SKILL.md +254 -0
  24. package/templates/.claude/skills/edu-site-generator/examples/sample-course-structure.md +116 -0
  25. package/templates/.claude/skills/edu-site-generator/modules/00-content-analysis.md +84 -0
  26. package/templates/.claude/skills/edu-site-generator/modules/01-course-structure.md +75 -0
  27. package/templates/.claude/skills/edu-site-generator/modules/02-data-generation.md +186 -0
  28. package/templates/.claude/skills/edu-site-generator/modules/03-scaffold.md +249 -0
  29. package/templates/.claude/skills/edu-site-generator/modules/04-components.md +130 -0
  30. package/templates/.claude/skills/edu-site-generator/modules/05-gamification.md +163 -0
  31. package/templates/.claude/skills/edu-site-generator/modules/06-deploy.md +88 -0
  32. package/templates/.claude/skills/edu-site-generator/modules/07-verification.md +97 -0
  33. package/templates/.claude/skills/edu-site-generator/references/component-templates.md +436 -0
  34. package/templates/.claude/skills/edu-site-generator/references/data-schemas.md +164 -0
  35. package/templates/.claude/skills/edu-site-generator/references/exercise-catalog.md +110 -0
  36. package/templates/.claude/skills/edu-site-generator/references/tech-stack.md +69 -0
  37. package/templates/.claude/skills/feature-adr/SKILL.md +245 -59
  38. package/templates/.claude/skills/feature-adr/modules/03-adr.md +43 -0
  39. package/templates/.claude/skills/feature-adr/modules/03.5-ideation-swarm.md +180 -0
  40. package/templates/.claude/skills/feature-adr/modules/06-implementation-plan.md +56 -7
  41. package/templates/.claude/skills/feature-adr/modules/08-qe.md +87 -23
  42. package/templates/.claude/skills/feature-adr/modules/09-fleet-qe.md +305 -0
  43. package/templates/.claude/skills/feature-adr/references/agentic-qe/README.md +143 -0
  44. package/templates/.claude/skills/feature-adr/references/agentic-qe/brutal-honesty-review.md +240 -0
  45. package/templates/.claude/skills/feature-adr/references/agentic-qe/chaos-engineering-resilience.md +163 -0
  46. package/templates/.claude/skills/feature-adr/references/agentic-qe/code-goal-planner.md +446 -0
  47. package/templates/.claude/skills/feature-adr/references/agentic-qe/enterprise-integration-testing.md +111 -0
  48. package/templates/.claude/skills/feature-adr/references/agentic-qe/mutation-testing.md +236 -0
  49. package/templates/.claude/skills/feature-adr/references/agentic-qe/performance-testing.md +315 -0
  50. package/templates/.claude/skills/feature-adr/references/agentic-qe/qcsd-ideation-swarm.md +126 -0
  51. package/templates/.claude/skills/feature-adr/references/agentic-qe/qcsd-production-swarm.md +108 -0
  52. package/templates/.claude/skills/feature-adr/references/agentic-qe/qe-coverage-analysis.md +193 -0
  53. package/templates/.claude/skills/feature-adr/references/agentic-qe/qe-requirements-validation.md +254 -0
  54. package/templates/.claude/skills/feature-adr/references/agentic-qe/regression-testing.md +233 -0
  55. package/templates/.claude/skills/feature-adr/references/agentic-qe/risk-based-testing.md +212 -0
  56. package/templates/.claude/skills/feature-adr/references/agentic-qe/security-testing.md +311 -0
  57. package/templates/.claude/skills/feature-adr/references/agentic-qe/shift-left-testing.md +231 -0
  58. package/templates/.claude/skills/feature-adr/references/agentic-qe/tdd-london-chicago.md +249 -0
  59. package/templates/.claude/skills/knowledge-extractor/SKILL.md +254 -0
  60. package/templates/.claude/skills/knowledge-extractor/modules/01-extract.md +188 -0
  61. package/templates/.claude/skills/knowledge-extractor/modules/02-classify.md +99 -0
  62. package/templates/.claude/skills/knowledge-extractor/modules/03-gate.md +150 -0
  63. package/templates/.claude/skills/knowledge-extractor/modules/04-integrate.md +159 -0
  64. package/templates/.claude/skills/knowledge-extractor/references/artifact-categories.md +100 -0
  65. package/templates/.claude/skills/knowledge-extractor/references/maturity-model.md +94 -0
  66. package/templates/.claude/skills/knowledge-extractor/references/quality-gates.md +98 -0
  67. package/templates/.claude/skills/knowledge-extractor/templates/artifact-card.md +63 -0
  68. package/templates/.claude/skills/knowledge-extractor/templates/harvest-report.md +102 -0
  69. package/templates/.claude/skills/transcript-site-generator/SKILL.md +287 -0
  70. package/templates/.claude/skills/transcript-site-generator/examples/sample-text-only-site.md +123 -0
  71. package/templates/.claude/skills/transcript-site-generator/examples/sample-transcript-site.md +134 -0
  72. package/templates/.claude/skills/transcript-site-generator/modules/00-input-analysis.md +132 -0
  73. package/templates/.claude/skills/transcript-site-generator/modules/01-content-parsing.md +117 -0
  74. package/templates/.claude/skills/transcript-site-generator/modules/02-site-generation.md +293 -0
  75. package/templates/.claude/skills/transcript-site-generator/modules/03-interactivity.md +406 -0
  76. package/templates/.claude/skills/transcript-site-generator/modules/04-deploy.md +130 -0
  77. package/templates/.claude/skills/transcript-site-generator/modules/05-verification.md +155 -0
  78. package/templates/.claude/skills/transcript-site-generator/references/component-catalog.md +86 -0
  79. package/templates/.claude/skills/transcript-site-generator/references/data-schemas.md +123 -0
  80. package/templates/.claude/skills/transcript-site-generator/references/tech-stack.md +132 -0
  81. package/templates/CLAUDE.md +30 -9
  82. package/templates/docs/continuous-learning-guide.md +622 -0
  83. package/templates/docs/edu-site-generator/01-deployment-guide.md +911 -0
  84. package/templates/docs/edu-site-generator/02-admin-guide.md +901 -0
  85. package/templates/docs/edu-site-generator/03-user-guide.md +1008 -0
  86. package/templates/docs/edu-site-generator/04-infrastructure-requirements.md +489 -0
  87. package/templates/docs/edu-site-generator/05-architecture.md +902 -0
  88. package/templates/docs/edu-site-generator/06-user-flows.md +759 -0
  89. package/templates/docs/improvement-directions.md +8 -4
  90. package/templates/docs/keysarium-core/02-functionality.md +3 -1
  91. package/templates/docs/skills-bto/01-deployment-guide.md +1 -1
  92. package/templates/docs/skills-bto/02-admin-guide.md +4 -1
  93. package/templates/docs/skills-bto/03-user-guide.md +4 -3
  94. package/templates/docs/skills-bto/04-infrastructure-requirements.md +2 -1
  95. package/templates/docs/skills-bto/05-architecture.md +11 -11
  96. package/templates/docs/skills-bto/06-user-flows.md +2 -1
  97. package/templates/docs/transcript-site-generator/01-deployment-guide.md +1042 -0
  98. package/templates/docs/transcript-site-generator/02-admin-guide.md +918 -0
  99. package/templates/docs/transcript-site-generator/03-user-guide.md +925 -0
  100. package/templates/docs/transcript-site-generator/04-infrastructure-requirements.md +482 -0
  101. package/templates/docs/transcript-site-generator/05-architecture.md +1068 -0
  102. package/templates/docs/transcript-site-generator/06-user-flows.md +855 -0
  103. package/templates/lib/dream-engine.md +1 -1
  104. package/templates/lib/memory-protocol.md +6 -2
  105. package/templates/lib/reward-tracker.md +6 -3
@@ -0,0 +1,230 @@
1
+ # Каталог Cloud.ru Evolution AI Factory — справочник
2
+
3
+ > **Последнее обновление:** апрель 2026
4
+ > **Источник:** cloud.ru/products/evolution-ai-factory + Evolution Agents Marketplace
5
+ > **Как использовать:** это базовый справочник. Перед каждым анализом ОБЯЗАТЕЛЬНО делай `web_search` для проверки свежих анонсов — каталог обновляется ежемесячно.
6
+
7
+ ---
8
+
9
+ ## Содержание
10
+
11
+ 1. [Платформенные сервисы (Core)](#1-платформенные-сервисы-core)
12
+ 2. [Готовые AI-агенты](#2-готовые-ai-агенты)
13
+ 3. [MCP-серверы](#3-mcp-серверы)
14
+ 4. [Что AI Factory точно НЕ покрывает (типовые gap'ы)](#4-что-ai-factory-точно-не-покрывает-типовые-gapы)
15
+
16
+ ---
17
+
18
+ ## 1. Платформенные сервисы (Core)
19
+
20
+ Фундаментальный слой — на эти сервисы опирается всё остальное.
21
+
22
+ ### Evolution Foundation Models (FM)
23
+ - **Что это:** LLM по API без развёртывания
24
+ - **Доступные модели:** GigaChat, Qwen, DeepSeek, LLaMA, GLM, OpenAI (через прокси)
25
+ - **Для чего использовать:** генерация текста, классификация, NER, reasoning, structured output, простой OCR через мультимодальные модели (Qwen-VL, GLM-4V)
26
+ - **Ограничения:** для узких доменов может понадобиться ML Finetuning
27
+
28
+ ### Evolution ML Inference
29
+ - **Что это:** сервис для деплоя моделей из Hugging Face в кастомных Docker-образах на GPU
30
+ - **Для чего использовать:** когда нужна модель, которой нет в FM (специализированные OCR, STT, image-gen, embeddings, классификаторы)
31
+ - **Паттерн:** «нашли модель на HF → обернули в MCP → вызываем из AI Workflows»
32
+
33
+ ### Evolution Managed RAG
34
+ - **Что это:** готовый RAG-сервис для работы с корпоративными данными
35
+ - **Для чего использовать:** база знаний, поиск по документации, семантический поиск, grounding ответов LLM
36
+ - **Интеграция:** есть MCP-клиент, можно подключить из AI Agents / AI Workflows
37
+
38
+ ### Evolution ML Finetuning
39
+ - **Что это:** дообучение LLM под специфику домена
40
+ - **Для чего использовать:** специализированные классификаторы, стиль, узкие жаргоны
41
+ - **Когда нужно:** если RAG + prompting не дают нужной точности
42
+
43
+ ### Evolution Notebooks
44
+ - **Что это:** Jupyter как сервис на GPU
45
+ - **Для чего использовать:** data science, аналитика, прототипирование, кастомные ETL-пайплайны, обучение моделей
46
+
47
+ ### Evolution AI Agents
48
+ - **Что это:** визуальный low-code конструктор агентов
49
+ - **Для чего использовать:** создание агентов с инструментами (MCP), маршрутизация, conditional logic
50
+ - **Идеально для:** multi-step reasoning агентов с доступом к tools
51
+
52
+ ### Evolution AI Workflows (GA апрель 2026)
53
+ - **Что это:** low-code оркестратор бизнес-процессов, n8n-like
54
+ - **Встроенные коннекторы:** Jira, 1С (частично), Confluence, PostgreSQL, SMTP/IMAP почта, мессенджеры (Max и др.), любые HTTP-API через generic-узел
55
+ - **Интеграция с AI Factory:** FM, ML Inference, AI Agents, Managed RAG — как нативные узлы
56
+ - **Для чего использовать:** детерминированные пайплайны без сложного reasoning (ETL, routing, scheduled jobs)
57
+
58
+ ---
59
+
60
+ ## 2. Готовые AI-агенты
61
+
62
+ Все на базе MiniMax-M2. Цены от 1.92 ₽/час.
63
+
64
+ ### Поиск и данные
65
+ - **Агент для поиска информации** — web search, простой Q&A
66
+ - **Агент метеоролог** — погодные знания
67
+ - **Архивариус** — работа с базой знаний (BZ RAG)
68
+
69
+ ### Бизнес и торговля
70
+ - **Агент бизнес-аналитик** — мониторинг контрагентов, оценка рисков, раннее предупреждение
71
+ - **Консультант по контрагентам** — due diligence перед заключением договоров
72
+ - **Агент для анализа компаний** — комплексный стратегический анализ, market research
73
+ - **Агент для работы с контрагентами** — проверка поставщиков, закупочная активность
74
+ - **Комплаенс агент** — юридическая проверка, проверка соответствия законодательству
75
+ - **Binance агент** — работа с Binance API (торговля крипто)
76
+ - **Агент - Python разработчик (Торговля)** — финансовый анализ, инвестиционная привлекательность
77
+
78
+ ### DevOps / Infrastructure
79
+ - **SRE Агент** — сетевая диагностика, мониторинг инфраструктуры
80
+ - **IP Агент** — работа с IP-адресами
81
+ - **Managed Spark Agent** — управление Spark-инфраструктурой
82
+ - **Apache Spark аналитик** — работа с Spark-данными
83
+ - **Агент Postgres DBA** — бизнес- и теханалитика БД
84
+ - **Агент - Python разработчик (Evolution)** — динамическое выполнение Python-кода
85
+
86
+ ### CRM / Офис
87
+ - **amoCRM ассистент** — автоматизация CRM-процессов
88
+ - **Figma ассистент** — работа с дизайн-файлами
89
+ - **Агент для Miro** — визуальные доски
90
+ - **Агент рекрутер** — анализ рынка труда, вакансии, зарплаты
91
+
92
+ ---
93
+
94
+ ## 3. MCP-серверы
95
+
96
+ > 50+ серверов в каталоге. Сгруппированы по категориям. Все от 1.92 ₽/час.
97
+
98
+ ### Корпоративные системы (управление)
99
+ - **Confluence MCP** — управление пространствами, страницами, комментариями, метками
100
+ - **Jira MCP** — задачи, эпики, спринты, проекты
101
+ - **Trello MCP** — доски, списки, карточки
102
+ - **Miro MCP** — доски, элементы, теги, участники
103
+ - **amoCRM MCP** — полная интеграция с amoCRM (FastMCP)
104
+ - **HeadHunter MCP** — вакансии, резюме, рынок труда (от Союзтелеком)
105
+ - **Мессенджер Max MCP** — сообщения, чаты, файлы, автоматизация коммуникаций
106
+ - **Figma MCP** — работа с дизайн-файлами
107
+
108
+ ### Данные и базы
109
+ - **Postgres MCP** — SQL, анализ, планы выполнения, советы по индексам (HypoPG)
110
+ - **MongoDB MCP** — базы, коллекции, документы
111
+ - **Apache Spark History MCP** — анализ Spark-задач
112
+ - **Cloud.ru Managed Spark MCP** — управление Spark-кластерами
113
+ - **Managed RAG MCP** — интеграция с Managed RAG
114
+ - **Росстат MCP** — федеральная статистика РФ (экономика, демография, регионы)
115
+ - **MOEX MCP** — Московская биржа (ценные бумаги, котировки)
116
+ - **Binance MCP** — Binance API (крипто)
117
+ - **EVM Universal MCP** — EVM-совместимые блокчейны
118
+ - **Валютные курсы MCP** — ЦБ РФ, конвертация
119
+ - **Kinopoisk MCP** — API Кинопоиска (kinopoisk.dev)
120
+
121
+ ### Файлы и документы (офисный пакет)
122
+ - **FileSystem S3 MCP** — S3/Object Storage (AWS + Evolution): чтение, запись, управление объектами
123
+ - **DOCX MCP** — создание, редактирование .docx
124
+ - **Excel MCP** — xlsx через openpyxl + pandas
125
+ - **PowerPoint MCP** — создание/редактирование .pptx
126
+ - **Mermaid MCP** — генерация диаграмм (PNG/SVG из Mermaid-кода)
127
+
128
+ ### Инфраструктура
129
+ - **Evolution IAM MCP** — пользователи, роли, разрешения, проекты, сервисные аккаунты
130
+ - **Evolution DNS MCP** — DNS-серверы, приватные/публичные зоны, VPC
131
+ - **Managed Kubernetes MCP** — кластеры, группы узлов, плагины, квоты, биллинг
132
+ - **Artifact Registry MCP** — образы и артефакты
133
+ - **Network Tools MCP** — сетевая диагностика (8 инструментов)
134
+ - **Grafana MCP** — доступ к Grafana и экосистеме
135
+
136
+ ### Верификация и data enrichment
137
+ - **Контур.Фокус MCP** — ЕГРЮЛ/ЕГРИП, юрлица и ИП
138
+ - **Mermaid MCP** — диаграммы как сервис
139
+
140
+ ### Поиск и внешние API
141
+ - **Web Searcher MCP** — поиск в интернете с аналитикой
142
+ - **Weather MCP** — Open-Meteo API
143
+ - **IP Location MCP** — геолокация по IP
144
+ - **Parking Moscow MCP** — парковки Москвы
145
+ - **Astronomy MCP** — астрономические данные
146
+
147
+ ### Утилиты
148
+ - **Math MCP** — математические, бухгалтерские, статистические расчёты
149
+ - **Python Code Executor MCP** — безопасное выполнение Python-кода
150
+
151
+ ### Наука
152
+ - **Medical Literature MCP** — медицинская/биологическая литература (FastMCP)
153
+ - **Научные БД MCP** — eLibrary, КиберЛенинка, РИНЦ, гранты
154
+
155
+ ### Маркетплейсы
156
+ - **Avito Autoteka MCP** — проверка автомобилей с пробегом
157
+ - **Avito Messaging MCP** — автоматизация общения на Avito
158
+
159
+ ---
160
+
161
+ ## 4. Что AI Factory точно НЕ покрывает (типовые gap'ы)
162
+
163
+ Эти пробелы встречаются в большинстве enterprise-сценариев. Используй как чек-лист при поиске gap'ов.
164
+
165
+ ### Нетекстовые модальности
166
+ - ❌ **OCR сканов** (печати, таблицы) — деплой PaddleOCR/docTR/TrOCR/Surya через ML Inference
167
+ - ❌ **STT / распознавание речи** — деплой Whisper/GigaAM через ML Inference или внешний API (Yandex SpeechKit)
168
+ - ❌ **TTS / синтез речи** — деплой XTTS/VITS или внешний API
169
+ - ❌ **Image generation** — деплой Flux/SDXL/Kandinsky через ML Inference или внешний API
170
+ - ❌ **Video generation** — out-of-scope для AI Factory (пока), только через внешние сервисы
171
+ - ❌ **Видео-аналитика / CV** — деплой через ML Inference
172
+
173
+ ### Российские бизнес-системы
174
+ - ❌ **1С:Бухгалтерия / 1С:ERP / 1С:Документооборот** — нет MCP; через OData/COM-шлюз кастомом
175
+ - ❌ **SAP** — нет MCP; через RFC/OData
176
+ - ❌ **Битрикс24** — нет MCP; через REST API кастомом
177
+ - ❌ **ЭДО (Диадок / СБИС / Тензор / Такском)** — нет MCP; кастомные коннекторы к API ЭДО
178
+ - ❌ **ЭЦП (КриптоПро CSP / VipNet / VSign)** — out-of-scope, отдельный криптостек
179
+
180
+ ### Helpdesk / Service Desk
181
+ - ❌ **Naumen Service Desk** — нет MCP
182
+ - ❌ **BPMSoft / ELMA / Omnidesk / Teamly / OTRS / Zendesk** — нет MCP; кастом через REST
183
+ - ❌ **Omnichannel ingest (звонки / SIP)** — нет коннектора, нужна телефония (Asterisk, FreeSWITCH) + STT
184
+
185
+ ### Разработка
186
+ - ❌ **Git-хостинги** — ни GitLab, ни GitHub, ни GitVerse, ни Gitea, ни Bitbucket не имеют MCP; кастом через API
187
+ - ❌ **CI/CD системы** — GitLab CI, Jenkins, TeamCity, Argo CD, Tekton — нет MCP
188
+ - ❌ **SAST/DAST** — SonarQube, CodeQL, Semgrep, Snyk, Svace, AppScreener — нет MCP
189
+ - ❌ **Code coverage analytics** — нет MCP
190
+
191
+ ### Маркетинг / Реклама
192
+ - ❌ **Рекламные кабинеты** — VK Ads, Yandex Direct, MyTarget, Telegram Ads — нет MCP
193
+ - ❌ **CDP / ESP** — Mindbox, SendPulse, Unisender, Enkod, DashaMail — нет MCP
194
+ - ❌ **Аналитика посещаемости** — Яндекс.Метрика, Google Analytics — нет MCP
195
+ - ❌ **ОРД (оператор рекламных данных)** — out-of-scope
196
+ - ❌ **A/B тестинг как сервис** — уровень Optimizely/VWO отсутствует
197
+
198
+ ### Соцсети и контент
199
+ - ❌ **VK API / Telegram API (нативный)** — нет специализированных MCP (есть только Max)
200
+ - ❌ **X / LinkedIn / Instagram** — нет MCP
201
+ - ❌ **YouTube / Rutube / VK Video** — нет MCP
202
+
203
+ ### Опросы и исследования
204
+ - ❌ **SurveyMonkey / Typeform / Testograf / Анкетолог / Яндекс.Формы** — нет MCP
205
+ - ❌ **Патентные базы** (Rospatent, Google Patents) — нет MCP
206
+ - ❌ **Платные data-provider'ы** (SimilarWeb, Statista, Bloomberg, Crunchbase, PitchBook, СПАРК премиум) — нет MCP, лицензионные ограничения
207
+
208
+ ### Финансы (дополнительно)
209
+ - ❌ **ERP / MRP** (SAP, Oracle EBS, Microsoft Dynamics, Галактика) — нет MCP
210
+ - ❌ **Casino/банк-клиенты** — нет MCP
211
+ - ❌ **3-way matching** (счёт ↔ заказ ↔ акт) — не сервис, а детерминированная бизнес-логика; LLM-only подход рискован для финансов
212
+
213
+ ---
214
+
215
+ ## Как быстро найти подходящий сервис
216
+
217
+ 1. **Нужна LLM?** → Foundation Models
218
+ 2. **Нужна специфичная модель?** → ML Inference + HF
219
+ 3. **Нужна база знаний / RAG?** → Managed RAG
220
+ 4. **Нужно подключиться к трекеру задач?** → Jira/Trello MCP
221
+ 5. **Нужны корпоративные документы/вики?** → Confluence MCP
222
+ 6. **Нужны файлы в S3?** → FileSystem S3 MCP
223
+ 7. **Нужна работа с Office-файлами?** → DOCX/Excel/PowerPoint MCP
224
+ 8. **Нужно проверить контрагента?** → Контур.Фокус MCP + Бизнес-аналитик
225
+ 9. **Нужны данные о рынке труда?** → HeadHunter MCP + Рекрутер
226
+ 10. **Нужна статистика РФ?** → Росстат MCP
227
+ 11. **Нужен мониторинг infra?** → Grafana MCP + SRE агент + Network Tools MCP
228
+ 12. **Нужно оркестрировать несколько шагов?** → AI Workflows (low-code) или AI Agents (reasoning)
229
+
230
+ Если ничего не подходит из пунктов 1–12 — вероятно, это **gap**, и нужен кастомный MCP или деплой в ML Inference.
@@ -0,0 +1,219 @@
1
+ # Coverage Formula — как считать % покрытия
2
+
3
+ > **Цель:** сделать оценку покрытия воспроизводимой и сопоставимой между запусками скилла. Два разных анализа одного и того же сценария должны давать близкий %.
4
+
5
+ ---
6
+
7
+ ## Базовая формула
8
+
9
+ ```
10
+ coverage_raw = (N_full × 1.0 + N_partial × 0.5 + N_none × 0.0) / N_total
11
+ coverage_pct = round(coverage_raw × 100 / 5) × 5
12
+ ```
13
+
14
+ Где:
15
+ - `N_full` — число **строк маппинга** с оценкой ✅ **Полное**
16
+ - `N_partial` — число **строк маппинга** с оценкой ⚠️ **Частичное**
17
+ - `N_none` — число **строк маппинга** с оценкой ❌ **Нет**
18
+ - `N_total = N_full + N_partial + N_none` — общее число строк маппинга
19
+
20
+ **Важно про под-шаги.** Если один логический шаг разделяется на несколько под-шагов (например, «Validate: 4a. ИНН через Контур.Фокус ✅ / 4b. ЭЦП ❌») — каждый под-шаг считается отдельной строкой маппинга. Это правильно, потому что под-шаги реально имеют разное покрытие и должны влиять на итоговый %. Правило «7–12 логических шагов» в SKILL.md касается фазы **декомпозиции** (Phase 2); после маппинга (Phase 3) итоговое `N_total` может быть больше — типично 10–18 строк.
21
+
22
+ **Округление до 5%** — принципиально. Точность оценки не больше этого в силу субъективности присвоения категорий. Никаких «73.4%» — только 70%, 75%, 80%.
23
+
24
+ ---
25
+
26
+ ## Определения категорий (однозначные)
27
+
28
+ ### ✅ Полное (вес 1.0)
29
+
30
+ Шаг закрывается **готовым сервисом или комбинацией сервисов AI Factory** без:
31
+ - написания кастомных коннекторов
32
+ - развёртывания собственных моделей
33
+ - fine-tuning
34
+ - внешних non-AI-Factory API
35
+
36
+ **Примеры ✅:**
37
+ - «Отправить сообщение в Max» → MCP Мессенджер Max
38
+ - «Поиск в корпоративной БЗ» → Managed RAG
39
+ - «Классификация обращения» → FM (GigaChat) с промптом
40
+ - «Создать тикет в Jira» → MCP Jira
41
+ - «Выгрузить данные в Excel» → MCP Excel
42
+
43
+ ### ⚠️ Частичное (вес 0.5)
44
+
45
+ Платформа закрывает **50–80% шага**, но требуется **одно из**:
46
+ - Разворачивание готовой open-source модели в ML Inference (без fine-tuning)
47
+ - Написание кастомного промпта для FM под специфичную задачу
48
+ - Small custom node (HTTP-call) в AI Workflows
49
+ - Light customization / сложная настройка
50
+
51
+ **Примеры ⚠️:**
52
+ - «Распознавание изображений в документах» → мультимодальная FM (Qwen-VL) справится с простыми, но не с плохими сканами
53
+ - «A/B тестирование» → AI Workflows умеет ветвление, но нет statistical framework
54
+ - «Push-уведомления» → нет MCP, но можно добавить через HTTP-узел
55
+ - «Генерация изображений» → нет MCP для image-gen, но можно деплоить SDXL через ML Inference
56
+ - «Генерация кода» → FM генерирует, но нет MCP к Git для ревью PR
57
+
58
+ ### ❌ Нет (вес 0.0)
59
+
60
+ Один или несколько пунктов из списка:
61
+ - Нет MCP к нужной внешней системе, и она критична для шага
62
+ - Нужен fine-tuning на корпоративных данных (а не только prompting)
63
+ - Нужна модальность, для которой нет модели в FM и нужен деплой **со значительной кастомизацией** (не просто «развернуть HF»)
64
+ - Нужна детерминированная бизнес-логика, которую LLM-only не обеспечит с приемлемым risk-level
65
+ - Out-of-scope для AI/ML-стека (криптография, low-level system tooling)
66
+
67
+ **Примеры ❌:**
68
+ - «Интеграция с 1С:Бухгалтерия» — нет MCP, нужен кастомный шлюз
69
+ - «Загрузка в рекламный кабинет VK Ads» — нет MCP
70
+ - «Проверка ЭЦП» — out-of-scope
71
+ - «OCR сложных сканов с печатями» — нужен специализированный OCR, деплой + обёртка в MCP — это уже кастом
72
+ - «3-way match счёт/заказ/акт с финансовыми последствиями» — LLM-only рискован
73
+
74
+ ---
75
+
76
+ ## Правила однозначности (при сомнении)
77
+
78
+ 1. **Колеблешься между ✅ и ⚠️?** → выбирай **⚠️**.
79
+ 2. **Колеблешься между ⚠️ и ❌?** → выбирай **❌**.
80
+ 3. **Honest assessment beats optimistic.** Пользователь заплатит за оптимизм в продакшне.
81
+
82
+ ---
83
+
84
+ ## Modifiers (опциональные коррекции)
85
+
86
+ После расчёта базовой формулы можно применить модификаторы, если есть особые обстоятельства:
87
+
88
+ ### Modifier A: критичность gap'а
89
+
90
+ Если хотя бы один ❌-шаг является **критическим** (без него сценарий не работает вообще — например, OCR для обработки сканов), применяется:
91
+ ```
92
+ coverage_pct_adjusted = min(coverage_pct, 65%)
93
+ ```
94
+
95
+ Это отражает реальность: если критический шаг не покрыт, итоговое «high coverage» вводит в заблуждение.
96
+
97
+ **Пример:** сценарий «Обработка счетов». Даже если 9 из 10 шагов на ✅, но OCR сканов (шаг 2) — ❌ и это критично (без него не работают 90% счетов), то coverage ограничивается 65%, а не считается как 90%.
98
+
99
+ ### Modifier B: зрелость интеграций
100
+
101
+ Если в сценарии **более 3 шагов** требуют кастомных MCP-разработок, применяется:
102
+ ```
103
+ coverage_pct_adjusted = coverage_pct - 5%
104
+ ```
105
+
106
+ Это отражает стоимость и риски интеграционной работы.
107
+
108
+ ### Modifier C: compliance-критичность
109
+
110
+ Если сценарий подпадает под обязательный compliance (ФЗ-152 ПДн, маркировка рекламы ОРД, финансовое законодательство) и нет явного Validate-шага на ✅:
111
+ ```
112
+ coverage_pct_adjusted = coverage_pct - 10%
113
+ ```
114
+
115
+ ### Правило применения модификаторов
116
+
117
+ Модификаторы применяются **последовательно**, но **итоговое значение также округляется до 5%**.
118
+
119
+ ```
120
+ final = round(coverage_pct_after_modifiers / 5) × 5
121
+ ```
122
+
123
+ ---
124
+
125
+ ## Примеры расчёта
126
+
127
+ ### Пример 1: Агент поддержки
128
+
129
+ | Шаг | Оценка |
130
+ |---|---|
131
+ | 1. Ingest | ✅ |
132
+ | 2. Normalize PII | ✅ |
133
+ | 3. Classify | ✅ |
134
+ | 4. Retrieve | ✅ |
135
+ | 5. Generate | ✅ |
136
+ | 6. Decide routing | ✅ |
137
+ | 7. Create ticket | ✅ |
138
+ | 8. Notify | ✅ |
139
+ | 9. Log | ✅ |
140
+ | 10. Feedback loop | ✅ |
141
+
142
+ - N_full = 10, N_partial = 0, N_none = 0
143
+ - coverage_raw = (10 × 1.0) / 10 = 1.0 → 100%
144
+ - round(100/5) × 5 = 100%
145
+
146
+ Но если в реальности, например, ingest из IP-телефонии и нет STT — шаг 1 становится ⚠️, и:
147
+ - N_full = 9, N_partial = 1 → (9 + 0.5) / 10 = 0.95 → 95%
148
+
149
+ ### Пример 2: Обработка счетов
150
+
151
+ | Шаг | Оценка |
152
+ |---|---|
153
+ | 1. Ingest | ✅ |
154
+ | 2. OCR сканов | ❌ (критический!) |
155
+ | 3. Extract fields | ✅ |
156
+ | 4a. Validate ИНН | ✅ |
157
+ | 4b. Validate ЭЦП | ❌ |
158
+ | 5. Match с договором | ⚠️ |
159
+ | 6. Detect exceptions | ✅ |
160
+ | 7. Prepare package | ✅ |
161
+ | 8. Route to 1С | ❌ |
162
+ | 9. Log | ✅ |
163
+
164
+ - N_full = 6, N_partial = 1, N_none = 3, N_total = 10
165
+ - coverage_raw = (6 + 0.5) / 10 = 0.65 → 65%
166
+ - round(65/5) × 5 = 65%
167
+ - Применяется **Modifier A** (критический OCR) → min(65%, 65%) = 65%
168
+ - Применяется **Modifier B** (3 шага требуют кастома — 4b, 5, 8) → 65% - 5% = 60%
169
+ - Итог: **60%**
170
+
171
+ ### Пример 3: Маркетинговые кампании
172
+
173
+ | Шаг | Оценка |
174
+ |---|---|
175
+ | 1. Segment | ✅ |
176
+ | 2. Research | ✅ |
177
+ | 3. Plan | ✅ |
178
+ | 4a. Create text | ✅ |
179
+ | 4b. Create images | ⚠️ |
180
+ | 5. Personalize | ✅ |
181
+ | 6. A/B setup | ⚠️ |
182
+ | 7a. Launch email | ✅ |
183
+ | 7b. Launch push | ⚠️ |
184
+ | 7c. Launch рекламные кабинеты | ❌ |
185
+ | 8. Monitor | ✅ |
186
+ | 9. Optimize | ✅ |
187
+ | 10. Report | ✅ |
188
+
189
+ - N_full = 9, N_partial = 3, N_none = 1, N_total = 13
190
+ - coverage_raw = (9 + 1.5) / 13 = 0.808 → 80.8%
191
+ - round(80.8/5) × 5 = 80%
192
+ - **Modifier C** применяется если есть маркировка ОРД без явного ✅-шага валидации → 80% - 10% = 70%
193
+ - Итог: **70%** (или 65% при активных модификаторах)
194
+
195
+ ---
196
+
197
+ ## Интерпретация итоговых значений
198
+
199
+ | % покрытия | Интерпретация | Рекомендация |
200
+ |---|---|---|
201
+ | 90–100% | Почти идеально покрывается | Реализация = сборка из готовых блоков, минимум кастома |
202
+ | 75–90% | Хорошее покрытие | Гибридная архитектура: AI Factory + 1–2 кастомных коннектора |
203
+ | 60–75% | Среднее покрытие | Стоит трезво оценить ROI: 30–40% работы — кастомная разработка |
204
+ | 45–60% | Слабое покрытие | AI Factory — лишь часть решения. Нужен серьёзный кастом-стек |
205
+ | < 45% | Неподходящий кейс | Пересмотреть выбор платформы или разбить сценарий на подсценарии |
206
+
207
+ ---
208
+
209
+ ## Reproducibility checklist
210
+
211
+ Чтобы два запуска на одном и том же сценарии давали согласованный результат:
212
+
213
+ - [ ] Использован один и тот же каталог (фиксировать версию/дату каталога)
214
+ - [ ] Декомпозиция на одно и то же число шагов (используй decomposition-checklist — она даёт стабильные 10 пунктов)
215
+ - [ ] Использованы правила однозначности при сомнении
216
+ - [ ] Округлено до 5%
217
+ - [ ] Применены (или не применены) одни и те же модификаторы
218
+
219
+ В итоговом отчёте **всегда показывай таблицу с N_full / N_partial / N_none** и применёнными модификаторами — это делает оценку проверяемой.
@@ -0,0 +1,183 @@
1
+ # Decomposition Checklist — 10 пунктов для любого сценария
2
+
3
+ > **Цель:** ни один шаг workflow не должен быть забыт. Пройди по всем 10 пунктам для каждого сценария. Если пункт не применяется — честно напиши «N/A», не пропускай молча.
4
+
5
+ ---
6
+
7
+ ## Чек-лист
8
+
9
+ ### 1. Ingest — откуда приходит вход?
10
+
11
+ Варианты, которые часто забывают:
12
+ - Email (SMTP/IMAP)
13
+ - Мессенджеры (Max, Telegram, WhatsApp, VK)
14
+ - Веб-формы / чат на сайте
15
+ - API от клиентского приложения
16
+ - Watcher папки в S3 / FileSystem
17
+ - Запросы из тикет-системы (Jira/Trello/Service Desk)
18
+ - IP-телефония / SIP (если есть звонки)
19
+ - Upload пользователем (PDF/DOCX/XLSX/изображения)
20
+ - CDC из БД
21
+ - Очереди (Kafka/RabbitMQ)
22
+ - Scheduled (cron, time-based triggers)
23
+
24
+ **Вопросы для Claude:**
25
+ - Один канал или омниканально?
26
+ - Формат: текст, файл, изображение, аудио?
27
+ - Нужна ли буферизация/очередь?
28
+
29
+ ### 2. Normalize — что нужно сделать перед основной логикой?
30
+
31
+ - Детекция языка
32
+ - Приведение к единому формату (plain text, markdown)
33
+ - PII-маскирование (ПДн, карты, СНИЛС, ИНН физлиц)
34
+ - NER (Named Entity Recognition)
35
+ - OCR если на входе скан/фото
36
+ - STT если на входе аудио
37
+ - Удаление разметки HTML/markdown
38
+ - Deduplication
39
+
40
+ **Вопросы:**
41
+ - Есть ли compliance-требования (ФЗ-152 ПДн)?
42
+ - Нужен ли audit-log до обработки?
43
+
44
+ ### 3. Classify / Route — нужна ли категоризация?
45
+
46
+ - Тип обращения (вопрос/жалоба/запрос/baкансия)
47
+ - Тематика / категория
48
+ - Приоритет
49
+ - Тональность (sentiment)
50
+ - Intent detection
51
+ - Язык
52
+ - Маршрут обработки (кто ответит: бот/оператор/эксперт/менеджер)
53
+
54
+ **Вопросы:**
55
+ - Многоклассовая классификация или бинарная?
56
+ - Нужна ли confidence score и пороги?
57
+
58
+ ### 4. Retrieve — нужен ли поиск корпоративных данных?
59
+
60
+ - Поиск в базе знаний
61
+ - Поиск по прошлым похожим кейсам (case-based reasoning)
62
+ - Поиск в документации, регламентах, политиках
63
+ - Поиск в договорах / актах
64
+ - Поиск в CRM / ERP
65
+ - Поиск в Confluence / вики
66
+
67
+ **Вопросы:**
68
+ - Насколько часто меняется корпус? (ежедневно / раз в месяц)
69
+ - Нужен ли гибридный поиск (semantic + keyword)?
70
+ - Какой размер корпуса?
71
+
72
+ ### 5. Reason / Generate — какая основная LLM-логика?
73
+
74
+ - Ответ пользователю
75
+ - Резюмирование
76
+ - Извлечение структурированных данных (JSON extraction)
77
+ - Сравнение / matching
78
+ - Генерация черновика документа
79
+ - Reasoning с tool use
80
+ - Планирование
81
+ - Генерация кода / SQL / регулярки
82
+ - Генерация креативов (текст/изображение)
83
+
84
+ **Вопросы:**
85
+ - Нужно ли reasoning, или достаточно single-shot?
86
+ - Какой размер контекста нужен?
87
+ - Нужна ли цепочка агентов (multi-agent)?
88
+
89
+ ### 6. Validate — какие проверки корректности?
90
+
91
+ - Проверка структуры ответа (schema)
92
+ - Бизнес-правила (суммы, даты, лимиты)
93
+ - Compliance (ПДн, маркировка рекламы, санкции)
94
+ - Сверка с мастер-данными (контрагенты, договоры, номенклатура)
95
+ - Проверка подписи (ЭЦП)
96
+ - Проверка дубликатов
97
+ - Safety checks (не пропустить токсичный контент в коммуникацию)
98
+
99
+ **Вопросы:**
100
+ - Что делать при fail? (retry/escalate/drop)
101
+ - Human-in-the-loop обязателен?
102
+
103
+ ### 7. Act — что делаем во внешних системах?
104
+
105
+ - Создание тикета в Jira/Trello
106
+ - Обновление записи в CRM (amoCRM)
107
+ - Запись в БД (PostgreSQL, MongoDB)
108
+ - Сохранение файла в S3
109
+ - Вызов API внешней системы
110
+ - Отправка сообщения в чат/email
111
+ - Планирование follow-up
112
+ - Триггер в CI/CD
113
+ - Операция в Kubernetes / облаке
114
+
115
+ **Вопросы:**
116
+ - Идемпотентно ли действие?
117
+ - Нужны ли compensation-транзакции при ошибке?
118
+
119
+ ### 8. Notify — как коммуницируем с людьми?
120
+
121
+ - Уведомление клиента (email / мессенджер / push / SMS)
122
+ - Уведомление оператора / эксперта
123
+ - Уведомление руководителя при эскалации
124
+ - Запрос подтверждения (approval flow)
125
+ - Статус-апдейты по ходу обработки
126
+
127
+ **Вопросы:**
128
+ - Какие SLA на уведомление?
129
+ - Есть ли quiet hours?
130
+
131
+ ### 9. Log / Audit — что фиксируем?
132
+
133
+ - Все входящие запросы
134
+ - Все принятые решения (с обоснованием от LLM)
135
+ - Все действия во внешних системах
136
+ - Метрики качества (confidence, retries, escalations)
137
+ - Токены / стоимость
138
+ - Feedback от пользователей
139
+
140
+ **Вопросы:**
141
+ - Требуется ли иммутабельный лог (для compliance)?
142
+ - Нужен ли PII-redaction в логах?
143
+ - Где храним: PostgreSQL / S3 / специализированная система?
144
+
145
+ ### 10. Feedback / Learn — как улучшается система?
146
+
147
+ - Сбор явного фидбэка (👍/👎)
148
+ - Сбор неявного (resolved/escalated, time-to-close)
149
+ - Периодическая ре-классификация ошибок
150
+ - A/B-тестирование промптов / моделей
151
+ - Fine-tuning на собранных данных
152
+ - Обновление базы знаний
153
+ - Дашборды качества
154
+
155
+ **Вопросы:**
156
+ - Есть ли цикл regular review?
157
+ - Кто отвечает за улучшения?
158
+
159
+ ---
160
+
161
+ ## Как использовать
162
+
163
+ 1. Прочитай описание сценария от пользователя
164
+ 2. Пройди по 10 пунктам и заполни применимые
165
+ 3. Получишь список 7–12 шагов workflow
166
+ 4. Переходи к Phase 3 (Mapping) из основного SKILL.md
167
+
168
+ ## Пример применения (на сценарии «Агент поддержки»)
169
+
170
+ | # | Пункт | Применим? | Что конкретно |
171
+ |---|---|---|---|
172
+ | 1 | Ingest | ✅ | email + мессенджер + веб-чат |
173
+ | 2 | Normalize | ✅ | PII-маска, детекция языка |
174
+ | 3 | Classify | ✅ | тип (вопрос/жалоба), тематика, приоритет |
175
+ | 4 | Retrieve | ✅ | поиск в FAQ + регламенты |
176
+ | 5 | Reason/Generate | ✅ | черновик ответа с цитатами |
177
+ | 6 | Validate | ✅ | проверка что не раскрыты ПДн, тональность |
178
+ | 7 | Act | ✅ | создание тикета в Jira |
179
+ | 8 | Notify | ✅ | ответ клиенту, уведомление оператора |
180
+ | 9 | Log | ✅ | запись всех обращений + решений в PostgreSQL |
181
+ | 10 | Feedback | ✅ | 👍/👎 от клиента + time-to-resolve |
182
+
183
+ Итого: 10 шагов workflow для маппинга.