@ykurilov/agent-chat-reply-check 0.105.0 → 0.106.0

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
package/CHANGELOG.md CHANGED
@@ -1,5 +1,27 @@
1
1
  # @ykurilov/agent-chat-reply-check
2
2
 
3
+ ## 0.106.0
4
+
5
+ ### Patch Changes
6
+
7
+ - Updated dependencies [4d9f052]
8
+ - Updated dependencies [8a2dd8b]
9
+ - Updated dependencies [6868584]
10
+ - Updated dependencies [78c4f81]
11
+ - Updated dependencies [dd25986]
12
+ - Updated dependencies [2bdba0e]
13
+ - Updated dependencies [4d9f052]
14
+ - Updated dependencies [7a51a46]
15
+ - Updated dependencies [87b7077]
16
+ - Updated dependencies [44c83ff]
17
+ - @ykurilov/agent-chat-core@0.106.0
18
+
19
+ ## 0.105.1
20
+
21
+ ### Patch Changes
22
+
23
+ - @ykurilov/agent-chat-core@0.105.1
24
+
3
25
  ## 0.105.0
4
26
 
5
27
  ### Patch Changes
package/README.md CHANGED
@@ -8,7 +8,7 @@ import { foreignWords, unknownLinks } from "@ykurilov/agent-chat-reply-check";
8
8
  createChatService({
9
9
  replyChecks: [
10
10
  foreignWords({ script: "cyrillic", knownNames: ["Excel", "Telegram"] }),
11
- unknownLinks({ appDomains: ["ykapp.ru"] }),
11
+ unknownLinks({ appDomains: ["apps.example.com"] }),
12
12
  ],
13
13
  });
14
14
  ```
@@ -30,8 +30,8 @@ createChatService({
30
30
  ## `unknownLinks({ appDomains?, labels? })`
31
31
 
32
32
  Находит адреса (`http(s)://`, `www.`, домен с путём), которых нет в `seenTexts`. Законны и голые адреса из них, и короткое
33
- имя на домене приложений, если человек назвал это имя (`sveta-nails` → `sveta-nails.ykapp.ru`). Домен приложений
34
- задаёт `appDomains` или шаблон в знакомых текстах («адрес.ykapp.ru»). Одна переписка, остаток вырезается кодом.
33
+ имя на домене приложений, если человек назвал это имя (`sveta-nails` → `sveta-nails.apps.example.com`). Домен приложений
34
+ задаёт `appDomains` или шаблон в знакомых текстах («адрес.apps.example.com»). Одна переписка, остаток вырезается кодом.
35
35
 
36
36
  Ответ был целиком выдуманной ссылкой — уходит запасная фраза `labels.linkOnlyReply`, в `note` — «запасная фраза».
37
37
  Слова: `russianReplyCheckLabels` (по умолчанию), `englishReplyCheckLabels` или свои (`Partial<ReplyCheckLabels>`).
package/dist/index.js.map CHANGED
@@ -1 +1 @@
1
- {"version":3,"sources":["../src/rewrite-notes.ts","../src/accepted-rewrite.ts","../src/found-foreign-words.ts","../src/foreign-words.ts","../src/app-domains.ts","../src/links-in-text.ts","../src/labels.ts","../src/unknown-links.ts"],"sourcesContent":["// Служебные строки запроса на переписывание: человеку их показывать нельзя, а модель иногда повторяет их в ответе.\n\n/** Строка перед списком чужих слов. */\nexport const FOREIGN_WORDS_NOTE = \"Чужие слова:\";\n\n/** Строка перед списком ссылок не из знакомых текстов. */\nexport const UNKNOWN_LINKS_NOTE = \"Ссылки не из инструкции:\";\n","import { FOREIGN_WORDS_NOTE, UNKNOWN_LINKS_NOTE } from \"./rewrite-notes\";\n\n/** Переписанный ответ короче этой доли исходного — смысл мог уйти. */\nconst MIN_LENGTH_RATIO = 0.6;\n\n/** Во сколько раз переписанный ответ может быть длиннее исходного, если приложение не задало своё. */\nexport const DEFAULT_MAX_LENGTH_RATIO = 1.5;\n\n/**\n * Переписанный текст, который можно отдать человеку; иначе пусто — и уходит исходный. Отбрасывается ответ со служебной\n * строкой запроса (модель повторила её) и, если длина важна, ответ, который сильно поменял длину.\n */\nexport function acceptedRewrite(original: string, rewritten: string, options: { sameLength?: { maxRatio: number } } = {}): string {\n const text = rewritten.trim();\n if (!text || text.includes(FOREIGN_WORDS_NOTE) || text.includes(UNKNOWN_LINKS_NOTE)) return \"\";\n if (options.sameLength) {\n const ratio = text.length / Math.max(original.trim().length, 1);\n if (ratio < MIN_LENGTH_RATIO || ratio > options.sameLength.maxRatio) return \"\";\n }\n return text;\n}\n","// Чужие слова в ответе. Слова не латиницы и не кириллицы — чужие всегда. Слово «соседней» письменности (латиница в\n// русском ответе, кириллица в английском) — чужое, только если его нет в знакомых текстах и это не название.\n// Так у преподавателя английского его термины законны, а «Actually» посреди русской речи — нет.\n\nexport type ReplyScript = \"cyrillic\" | \"latin\";\n\n/** Ссылки, почта, @имена, домены вида слово.слово/путь: их не трогаем. */\nconst UNTOUCHABLE =\n /(?:https?:\\/\\/|www\\.)\\S+|[\\w.+-]+@[\\w-]+(?:\\.[\\w-]+)+|@[\\w.]+|[\\p{L}\\d-]+(?:\\.[\\p{L}\\d-]+)*\\.(?:[a-z]{2,6}|рф)(?!\\p{L})(?:\\/\\S*)?/gu;\n\n/** Слово, где кириллица и латиница вперемешку: латинская буква вместо русской. */\nconst MIXED_WORD = /\\p{L}*(?:\\p{Script=Cyrillic}\\p{L}*\\p{Script=Latin}|\\p{Script=Latin}\\p{L}*\\p{Script=Cyrillic})\\p{L}*/gu;\n\n/** Слово не латиницы и не кириллицы: иероглифы, кана, хангыль, арабское, греческое письмо… */\nconst OTHER_SCRIPT_WORD = /(?:(?![\\p{Script=Latin}\\p{Script=Cyrillic}])\\p{L}[\\p{M}]*)+/gu;\n\nconst LATIN_WORD = /\\p{Script=Latin}+(?:['’-]\\p{Script=Latin}+)*/gu;\nconst CYRILLIC_WORD = /\\p{Script=Cyrillic}+(?:['’-]\\p{Script=Cyrillic}+)*/gu;\n\n/** Сервисы, которые в русской речи пишут латиницей и с маленькой буквы, и в начале фразы. */\nconst COMMON_SERVICES = new Set([\"zoom\", \"telegram\", \"instagram\", \"youtube\", \"whatsapp\", \"google\", \"skype\", \"excel\", \"notion\", \"viber\", \"facebook\", \"tiktok\"]);\n\nconst ROMAN_NUMERAL = /^[IVXLCDM]+$/;\n\n/** Слова соседней письменности: у русского ответа это латиница, у английского — кириллица. */\nfunction neighborWordsOf(text: string, script: ReplyScript): string[] {\n const words = text.match(script === \"cyrillic\" ? LATIN_WORD : CYRILLIC_WORD) ?? [];\n return words.filter((word) => word.length > 1 && !(script === \"cyrillic\" && ROMAN_NUMERAL.test(word)));\n}\n\n/** Сокращение из заглавных (PDF), большая буква внутри (WhatsApp), большая буква посреди фразы (в Calendly) — название. */\nfunction isName(word: string, before: string, script: ReplyScript): boolean {\n if (script === \"cyrillic\" && COMMON_SERVICES.has(word.toLowerCase())) return true;\n if (/^\\p{Lu}+$/u.test(word) || /\\p{Lu}/u.test(word.slice(1))) return true;\n return /^\\p{Lu}/u.test(word) && !/(?:^|[.!?…:\\n])[\\s«\"„“(—-]*$/u.test(before);\n}\n\n/**\n * Чужие слова ответа по порядку появления. `known` — тексты, слова соседней письменности из которых законны;\n * `knownNames` — названия, которые пишутся другой письменностью, чем ответ.\n */\nexport function foreignWordsIn(text: string, known: readonly string[], script: ReplyScript, knownNames: readonly string[] = []): string[] {\n const knownWords = new Set(\n [...known, ...knownNames].flatMap((source) => neighborWordsOf(source.replace(UNTOUCHABLE, \" \"), script).map((word) => word.toLowerCase())),\n );\n const found: Array<{ at: number; word: string }> = [];\n const clean = text\n .replace(UNTOUCHABLE, (link) => \" \".repeat(link.length))\n .replace(MIXED_WORD, (word, at: number) => {\n found.push({ at, word });\n return \" \".repeat(word.length);\n });\n for (const match of clean.matchAll(OTHER_SCRIPT_WORD)) found.push({ at: match.index, word: match[0] });\n for (const match of clean.matchAll(script === \"cyrillic\" ? LATIN_WORD : CYRILLIC_WORD)) {\n const [word] = neighborWordsOf(match[0], script);\n if (word && !knownWords.has(word.toLowerCase()) && !isName(word, clean.slice(0, match.index), script)) found.push({ at: match.index, word });\n }\n return found.sort((a, b) => a.at - b.at).map((item) => item.word);\n}\n","import type { ReplyCheck } from \"@ykurilov/agent-chat-core\";\nimport { DEFAULT_MAX_LENGTH_RATIO, acceptedRewrite } from \"./accepted-rewrite\";\nimport { foreignWordsIn, type ReplyScript } from \"./found-foreign-words\";\nimport { FOREIGN_WORDS_NOTE } from \"./rewrite-notes\";\n\nexport { FOREIGN_WORDS_NOTE };\n\nexport interface ForeignWordsOptions {\n /** Письменность ответа: слова другой письменности — чужие. */\n script: ReplyScript;\n /** Язык ответа для инструкции переписки, в виде «по-русски». По умолчанию: кириллица — «по-русски», латиница — «по-английски». */\n language?: string;\n /** Имена, которые пишутся другой письменностью и чужими не считаются (Excel, Telegram). */\n knownNames?: readonly string[];\n /** Насколько длиннее исходного может быть переписанный ответ (во сколько раз). По умолчанию 1.5. */\n maxLengthRatio?: number;\n}\n\nconst DEFAULT_LANGUAGE: Record<ReplyScript, string> = { cyrillic: \"по-русски\", latin: \"по-английски\" };\n\n/** Неизменное начало запроса: одно на все переписки одного языка, из кэша модели. */\nexport function foreignWordsInstruction(language: string): string {\n return (\n `Ты редактор. Перепиши этот ответ ${language}, смысл не меняй. ` +\n \"Иностранные слова и иероглифы замени словами языка ответа. Ссылки, почту, @имена и названия оставь как есть. \" +\n \"Ничего не добавляй и не убирай. В ответе только переписанный текст.\"\n );\n}\n\nexport const FOREIGN_WORDS_INSTRUCTION_CYRILLIC = foreignWordsInstruction(DEFAULT_LANGUAGE.cyrillic);\n\ntype Outcome = \"переписан\" | \"ушёл лучший из двух\" | \"не переписан\";\n\n/** Строка журнала: по ней считается, как часто срабатывает проверка. */\nfunction noteOf(outcome: Outcome, foreign: readonly string[], left: readonly string[]): string {\n const rest = left.length > 0 ? ` осталось=${left.join(\",\")}` : \"\";\n return `чужие слова: итог=${outcome} было=${foreign.join(\",\")}${rest}`;\n}\n\n/** Чужие слова в ответе: одна переписка моделью, иначе уходит вариант с меньшим числом чужих слов. */\nexport function foreignWords(options: ForeignWordsOptions): ReplyCheck {\n const { script, knownNames = [], maxLengthRatio = DEFAULT_MAX_LENGTH_RATIO } = options;\n const system = foreignWordsInstruction(options.language ?? DEFAULT_LANGUAGE[script]);\n\n return async ({ text, seenTexts, rewrite }) => {\n const foreign = foreignWordsIn(text, seenTexts, script, knownNames);\n if (foreign.length === 0) return;\n\n let rewritten = \"\";\n try {\n rewritten = acceptedRewrite(text, await rewrite(system, `${text}\\n\\n${FOREIGN_WORDS_NOTE} ${foreign.join(\", \")}`), {\n sameLength: { maxRatio: maxLengthRatio },\n });\n } catch {\n // Модель не ответила — уходит исходный ответ\n }\n if (!rewritten) return { text, note: noteOf(\"не переписан\", foreign, foreign) };\n\n const left = foreignWordsIn(rewritten, seenTexts, script, knownNames);\n if (left.length === 0) return { text: rewritten, note: noteOf(\"переписан\", foreign, left) };\n return left.length < foreign.length\n ? { text: rewritten, note: noteOf(\"ушёл лучший из двух\", foreign, left) }\n : { text, note: noteOf(\"ушёл лучший из двух\", foreign, foreign) };\n };\n}\n","// Короткий адрес приложения человека. Когда у приложений общий домен, человек часто пишет только имя — «sveta-nails»,\n// и адрес «sveta-nails.ykapp.ru» однозначен. Домен задаёт настройка или шаблон в знакомых текстах — «адрес.ykapp.ru».\n\n// «адрес.ykapp.ru», «имя.site.ru»: русское слово-заготовка перед доменом\nconst APP_DOMAIN_TEMPLATE = /(?<![\\p{L}\\p{N}.-])[а-яё]+\\.((?:[a-z0-9-]+\\.)+[a-z]{2,})/giu;\n\n/** Домены приложений: заданные настройкой и описанные шаблоном в знакомых текстах. */\nexport function appDomainsOf(texts: readonly string[], configured: readonly string[] = []): string[] {\n const domains = new Set(configured.map((domain) => domain.toLowerCase()));\n for (const text of texts) for (const found of text.matchAll(APP_DOMAIN_TEMPLATE)) domains.add(found[1]!.toLowerCase());\n return [...domains];\n}\n\n/**\n * Хост — «имя.домен приложений», а имя человек написал отдельным словом: «адрес sveta-nails» → sveta-nails.ykapp.ru.\n * Имя — одно латинское слово с цифрами и дефисами; с точкой после него это уже другой адрес.\n */\nexport function isAppNameHost(host: string, appDomains: readonly string[], texts: readonly string[]): boolean {\n const domain = appDomains.find((candidate) => host.endsWith(`.${candidate}`));\n if (!domain) return false;\n const name = host.slice(0, -domain.length - 1);\n // Только латиница, цифры и дефис: имя вставляется в выражение как есть\n if (!/^[a-z0-9][a-z0-9-]*$/.test(name)) return false;\n const word = new RegExp(`(?<![\\\\p{L}\\\\p{N}./@-])${name}(?![\\\\p{L}\\\\p{N}-]|\\\\.[\\\\p{L}\\\\p{N}])`, \"iu\");\n return texts.some((text) => word.test(text));\n}\n","import { appDomainsOf, isAppNameHost } from \"./app-domains\";\n\n// Ссылки в ответе. Давать можно только те, что есть в знакомых текстах (инструкция, сценарий, реплики человека).\n// Выдуманный или изменённый адрес уводит человека в никуда.\n\n/** http(s)://, www.…, домен с путём (t.me/…, bit.ly/…). Почта и @имена — не ссылки: перед доменом нет «@». */\nconst LINK = /(?:https?:\\/\\/|(?<![\\p{L}\\d@.\\/-])www\\.)[^\\s<>«»\"'()]+|(?<![\\p{L}\\d@.\\/-])(?:[\\p{L}\\d-]+\\.)+(?:[a-z]{2,6}|рф)\\/[^\\s<>«»\"'()]*/giu;\n\n/** Знаки препинания в конце — от фразы, а не от ссылки. */\nconst TRAILING = /[.,!?;:…]+$/u;\n\n/** Ссылки текста по порядку появления. */\nexport function linksIn(text: string): string[] {\n return (text.match(LINK) ?? []).map((link) => link.replace(TRAILING, \"\")).filter(Boolean);\n}\n\n/** Адрес без схемы, «www.» и косой черты в конце; домен — без учёта регистра: «https://A.ru/x» и «a.ru/x» — одна ссылка. */\nfunction sameAddress(link: string): string {\n const bare = link.replace(/^https?:\\/\\//i, \"\").replace(/^www\\./i, \"\").replace(/\\/+$/, \"\");\n const slash = bare.indexOf(\"/\");\n return slash < 0 ? bare.toLowerCase() : bare.slice(0, slash).toLowerCase() + bare.slice(slash);\n}\n\n// Голый адрес в знакомом тексте: человек пишет «sveta-nails.ykapp.ru» без https:// и без пути\nconst BARE_HOST = /(?<![\\p{L}\\p{N}@./-])(?:[\\p{L}\\p{N}-]+\\.)+[\\p{L}]{2,}(?![\\p{L}\\p{N}/-])/giu;\n\n/**\n * Ссылки ответа, которых нет в знакомых текстах. Законны и голые адреса из них, и короткий адрес приложения:\n * имя из знакомых текстов на домене приложений (заданном настройкой или описанном шаблоном «адрес.ykapp.ru»).\n */\nexport function unknownLinksIn(text: string, known: readonly string[], appDomains: readonly string[] = []): string[] {\n const allowed = new Set([...known.flatMap(linksIn), ...known.flatMap((one) => one.match(BARE_HOST) ?? [])].map(sameAddress));\n const domains = appDomainsOf(known, appDomains);\n return linksIn(text).filter((link) => {\n const address = sameAddress(link);\n return !allowed.has(address) && !(!address.includes(\"/\") && isAppNameHost(address, domains, known));\n });\n}\n\n/** Ссылки вырезаются вместе с подводкой «: » перед ними; лишние пробелы перед знаками убираются. */\nexport function withoutLinks(text: string, links: readonly string[]): string {\n let result = text;\n for (const link of links) result = result.split(link).join(\"\\u0000\");\n return result\n .replace(/\\s*:?\\s*\\u0000/g, \"\")\n .replace(/[ \\t]{2,}/g, \" \")\n .replace(/ +([.,!?;:…])/g, \"$1\")\n .trim();\n}\n","/** Слова, которые проверки ответа сами вставляют в ответ агента. */\nexport interface ReplyCheckLabels {\n /** Ответ был целиком из выдуманной ссылки: после вырезания ничего не осталось — уходит эта фраза. */\n linkOnlyReply: string;\n}\n\nexport const russianReplyCheckLabels: ReplyCheckLabels = {\n linkOnlyReply: \"Ссылку здесь дать не могу. Расскажите, что вы ищете, и я подскажу.\",\n};\n\nexport const englishReplyCheckLabels: ReplyCheckLabels = {\n linkOnlyReply: \"I can't share a link here. Tell me what you're looking for and I'll help.\",\n};\n","import type { ReplyCheck } from \"@ykurilov/agent-chat-core\";\nimport { acceptedRewrite } from \"./accepted-rewrite\";\nimport { UNKNOWN_LINKS_NOTE } from \"./rewrite-notes\";\nimport { unknownLinksIn, withoutLinks } from \"./links-in-text\";\nimport { russianReplyCheckLabels, type ReplyCheckLabels } from \"./labels\";\n\nexport { UNKNOWN_LINKS_NOTE };\n\nexport interface UnknownLinksOptions {\n /** Домены приложений: короткие имена на них разрешены, если человек назвал имя (`ivan` → `ivan.ykapp.ru`). */\n appDomains?: readonly string[];\n /** Свои слова вместо русских по умолчанию (`englishReplyCheckLabels` или часть). */\n labels?: Partial<ReplyCheckLabels>;\n}\n\n/** Неизменное начало запроса: одно на все переписки, из кэша модели. */\nexport const LINK_REWRITE_INSTRUCTION =\n \"Ты редактор. Ссылки, перечисленные ниже, — не из инструкции: убери их из ответа. \" +\n \"Если без ссылки фраза теряет смысл, перестрой её, ничего не обещая. Других ссылок не добавляй, остальное не меняй. \" +\n \"В ответе только переписанный текст.\";\n\ntype Outcome = \"переписан\" | \"ссылки вырезаны\" | \"запасная фраза\";\n\n/** Строка журнала: по ней считается, как часто срабатывает проверка. */\nfunction noteOf(outcome: Outcome, links: readonly string[], left: readonly string[]): string {\n const rest = left.length > 0 ? ` вырезано=${left.join(\",\")}` : \"\";\n return `ссылки не из инструкции: итог=${outcome} было=${links.join(\",\")}${rest}`;\n}\n\n/** Выдуманные ссылки: разрешены адреса из `seenTexts`; лишние — одна переписка, остаток вырезается кодом. */\nexport function unknownLinks(options: UnknownLinksOptions = {}): ReplyCheck {\n const { appDomains = [] } = options;\n const labels = { ...russianReplyCheckLabels, ...options.labels };\n\n return async ({ text, seenTexts, rewrite }) => {\n const links = unknownLinksIn(text, seenTexts, appDomains);\n if (links.length === 0) return;\n\n let rewritten = \"\";\n try {\n rewritten = acceptedRewrite(text, await rewrite(LINK_REWRITE_INSTRUCTION, `${text}\\n\\n${UNKNOWN_LINKS_NOTE} ${links.join(\", \")}`));\n } catch {\n // Модель не ответила — ссылки вырежет код\n }\n const base = rewritten || text;\n const left = unknownLinksIn(base, seenTexts, appDomains);\n if (rewritten && left.length === 0) return { text: rewritten, note: noteOf(\"переписан\", links, left) };\n const cut = withoutLinks(base, left);\n // Ответ был одной ссылкой: пустой текст служба заменила бы прежним — со ссылкой. Уходит запасная фраза.\n if (!/[\\p{L}\\p{N}]/u.test(cut)) return { text: labels.linkOnlyReply, note: noteOf(\"запасная фраза\", links, left) };\n return { text: cut, note: noteOf(\"ссылки вырезаны\", links, left) };\n };\n}\n"],"mappings":";AAGO,IAAM,qBAAqB;AAG3B,IAAM,qBAAqB;;;ACHlC,IAAM,mBAAmB;AAGlB,IAAM,2BAA2B;AAMjC,SAAS,gBAAgB,UAAkB,WAAmB,UAAiD,CAAC,GAAW;AAChI,QAAM,OAAO,UAAU,KAAK;AAC5B,MAAI,CAAC,QAAQ,KAAK,SAAS,kBAAkB,KAAK,KAAK,SAAS,kBAAkB,EAAG,QAAO;AAC5F,MAAI,QAAQ,YAAY;AACtB,UAAM,QAAQ,KAAK,SAAS,KAAK,IAAI,SAAS,KAAK,EAAE,QAAQ,CAAC;AAC9D,QAAI,QAAQ,oBAAoB,QAAQ,QAAQ,WAAW,SAAU,QAAO;AAAA,EAC9E;AACA,SAAO;AACT;;;ACbA,IAAM,cACJ;AAGF,IAAM,aAAa;AAGnB,IAAM,oBAAoB;AAE1B,IAAM,aAAa;AACnB,IAAM,gBAAgB;AAGtB,IAAM,kBAAkB,oBAAI,IAAI,CAAC,QAAQ,YAAY,aAAa,WAAW,YAAY,UAAU,SAAS,SAAS,UAAU,SAAS,YAAY,QAAQ,CAAC;AAE7J,IAAM,gBAAgB;AAGtB,SAAS,gBAAgB,MAAc,QAA+B;AACpE,QAAM,QAAQ,KAAK,MAAM,WAAW,aAAa,aAAa,aAAa,KAAK,CAAC;AACjF,SAAO,MAAM,OAAO,CAAC,SAAS,KAAK,SAAS,KAAK,EAAE,WAAW,cAAc,cAAc,KAAK,IAAI,EAAE;AACvG;AAGA,SAAS,OAAO,MAAc,QAAgB,QAA8B;AAC1E,MAAI,WAAW,cAAc,gBAAgB,IAAI,KAAK,YAAY,CAAC,EAAG,QAAO;AAC7E,MAAI,aAAa,KAAK,IAAI,KAAK,UAAU,KAAK,KAAK,MAAM,CAAC,CAAC,EAAG,QAAO;AACrE,SAAO,WAAW,KAAK,IAAI,KAAK,CAAC,gCAAgC,KAAK,MAAM;AAC9E;AAMO,SAAS,eAAe,MAAc,OAA0B,QAAqB,aAAgC,CAAC,GAAa;AACxI,QAAM,aAAa,IAAI;AAAA,IACrB,CAAC,GAAG,OAAO,GAAG,UAAU,EAAE,QAAQ,CAAC,WAAW,gBAAgB,OAAO,QAAQ,aAAa,GAAG,GAAG,MAAM,EAAE,IAAI,CAAC,SAAS,KAAK,YAAY,CAAC,CAAC;AAAA,EAC3I;AACA,QAAM,QAA6C,CAAC;AACpD,QAAM,QAAQ,KACX,QAAQ,aAAa,CAAC,SAAS,IAAI,OAAO,KAAK,MAAM,CAAC,EACtD,QAAQ,YAAY,CAAC,MAAM,OAAe;AACzC,UAAM,KAAK,EAAE,IAAI,KAAK,CAAC;AACvB,WAAO,IAAI,OAAO,KAAK,MAAM;AAAA,EAC/B,CAAC;AACH,aAAW,SAAS,MAAM,SAAS,iBAAiB,EAAG,OAAM,KAAK,EAAE,IAAI,MAAM,OAAO,MAAM,MAAM,CAAC,EAAE,CAAC;AACrG,aAAW,SAAS,MAAM,SAAS,WAAW,aAAa,aAAa,aAAa,GAAG;AACtF,UAAM,CAAC,IAAI,IAAI,gBAAgB,MAAM,CAAC,GAAG,MAAM;AAC/C,QAAI,QAAQ,CAAC,WAAW,IAAI,KAAK,YAAY,CAAC,KAAK,CAAC,OAAO,MAAM,MAAM,MAAM,GAAG,MAAM,KAAK,GAAG,MAAM,EAAG,OAAM,KAAK,EAAE,IAAI,MAAM,OAAO,KAAK,CAAC;AAAA,EAC7I;AACA,SAAO,MAAM,KAAK,CAAC,GAAG,MAAM,EAAE,KAAK,EAAE,EAAE,EAAE,IAAI,CAAC,SAAS,KAAK,IAAI;AAClE;;;ACxCA,IAAM,mBAAgD,EAAE,UAAU,qDAAa,OAAO,sEAAe;AAG9F,SAAS,wBAAwB,UAA0B;AAChE,SACE,2KAAoC,QAAQ;AAIhD;AAEO,IAAM,qCAAqC,wBAAwB,iBAAiB,QAAQ;AAKnG,SAAS,OAAO,SAAkB,SAA4B,MAAiC;AAC7F,QAAM,OAAO,KAAK,SAAS,IAAI,qDAAa,KAAK,KAAK,GAAG,CAAC,KAAK;AAC/D,SAAO,2FAAqB,OAAO,6BAAS,QAAQ,KAAK,GAAG,CAAC,GAAG,IAAI;AACtE;AAGO,SAAS,aAAa,SAA0C;AACrE,QAAM,EAAE,QAAQ,aAAa,CAAC,GAAG,iBAAiB,yBAAyB,IAAI;AAC/E,QAAM,SAAS,wBAAwB,QAAQ,YAAY,iBAAiB,MAAM,CAAC;AAEnF,SAAO,OAAO,EAAE,MAAM,WAAW,QAAQ,MAAM;AAC7C,UAAM,UAAU,eAAe,MAAM,WAAW,QAAQ,UAAU;AAClE,QAAI,QAAQ,WAAW,EAAG;AAE1B,QAAI,YAAY;AAChB,QAAI;AACF,kBAAY,gBAAgB,MAAM,MAAM,QAAQ,QAAQ,GAAG,IAAI;AAAA;AAAA,EAAO,kBAAkB,IAAI,QAAQ,KAAK,IAAI,CAAC,EAAE,GAAG;AAAA,QACjH,YAAY,EAAE,UAAU,eAAe;AAAA,MACzC,CAAC;AAAA,IACH,QAAQ;AAAA,IAER;AACA,QAAI,CAAC,UAAW,QAAO,EAAE,MAAM,MAAM,OAAO,uEAAgB,SAAS,OAAO,EAAE;AAE9E,UAAM,OAAO,eAAe,WAAW,WAAW,QAAQ,UAAU;AACpE,QAAI,KAAK,WAAW,EAAG,QAAO,EAAE,MAAM,WAAW,MAAM,OAAO,0DAAa,SAAS,IAAI,EAAE;AAC1F,WAAO,KAAK,SAAS,QAAQ,SACzB,EAAE,MAAM,WAAW,MAAM,OAAO,uGAAuB,SAAS,IAAI,EAAE,IACtE,EAAE,MAAM,MAAM,OAAO,uGAAuB,SAAS,OAAO,EAAE;AAAA,EACpE;AACF;;;AC5DA,IAAM,sBAAsB;AAGrB,SAAS,aAAa,OAA0B,aAAgC,CAAC,GAAa;AACnG,QAAM,UAAU,IAAI,IAAI,WAAW,IAAI,CAAC,WAAW,OAAO,YAAY,CAAC,CAAC;AACxE,aAAW,QAAQ,MAAO,YAAW,SAAS,KAAK,SAAS,mBAAmB,EAAG,SAAQ,IAAI,MAAM,CAAC,EAAG,YAAY,CAAC;AACrH,SAAO,CAAC,GAAG,OAAO;AACpB;AAMO,SAAS,cAAc,MAAc,YAA+B,OAAmC;AAC5G,QAAM,SAAS,WAAW,KAAK,CAAC,cAAc,KAAK,SAAS,IAAI,SAAS,EAAE,CAAC;AAC5E,MAAI,CAAC,OAAQ,QAAO;AACpB,QAAM,OAAO,KAAK,MAAM,GAAG,CAAC,OAAO,SAAS,CAAC;AAE7C,MAAI,CAAC,uBAAuB,KAAK,IAAI,EAAG,QAAO;AAC/C,QAAM,OAAO,IAAI,OAAO,0BAA0B,IAAI,yCAAyC,IAAI;AACnG,SAAO,MAAM,KAAK,CAAC,SAAS,KAAK,KAAK,IAAI,CAAC;AAC7C;;;ACnBA,IAAM,OAAO;AAGb,IAAM,WAAW;AAGV,SAAS,QAAQ,MAAwB;AAC9C,UAAQ,KAAK,MAAM,IAAI,KAAK,CAAC,GAAG,IAAI,CAAC,SAAS,KAAK,QAAQ,UAAU,EAAE,CAAC,EAAE,OAAO,OAAO;AAC1F;AAGA,SAAS,YAAY,MAAsB;AACzC,QAAM,OAAO,KAAK,QAAQ,iBAAiB,EAAE,EAAE,QAAQ,WAAW,EAAE,EAAE,QAAQ,QAAQ,EAAE;AACxF,QAAM,QAAQ,KAAK,QAAQ,GAAG;AAC9B,SAAO,QAAQ,IAAI,KAAK,YAAY,IAAI,KAAK,MAAM,GAAG,KAAK,EAAE,YAAY,IAAI,KAAK,MAAM,KAAK;AAC/F;AAGA,IAAM,YAAY;AAMX,SAAS,eAAe,MAAc,OAA0B,aAAgC,CAAC,GAAa;AACnH,QAAM,UAAU,IAAI,IAAI,CAAC,GAAG,MAAM,QAAQ,OAAO,GAAG,GAAG,MAAM,QAAQ,CAAC,QAAQ,IAAI,MAAM,SAAS,KAAK,CAAC,CAAC,CAAC,EAAE,IAAI,WAAW,CAAC;AAC3H,QAAM,UAAU,aAAa,OAAO,UAAU;AAC9C,SAAO,QAAQ,IAAI,EAAE,OAAO,CAAC,SAAS;AACpC,UAAM,UAAU,YAAY,IAAI;AAChC,WAAO,CAAC,QAAQ,IAAI,OAAO,KAAK,EAAE,CAAC,QAAQ,SAAS,GAAG,KAAK,cAAc,SAAS,SAAS,KAAK;AAAA,EACnG,CAAC;AACH;AAGO,SAAS,aAAa,MAAc,OAAkC;AAC3E,MAAI,SAAS;AACb,aAAW,QAAQ,MAAO,UAAS,OAAO,MAAM,IAAI,EAAE,KAAK,IAAQ;AACnE,SAAO,OACJ,QAAQ,mBAAmB,EAAE,EAC7B,QAAQ,cAAc,GAAG,EACzB,QAAQ,kBAAkB,IAAI,EAC9B,KAAK;AACV;;;AC1CO,IAAM,0BAA4C;AAAA,EACvD,eAAe;AACjB;AAEO,IAAM,0BAA4C;AAAA,EACvD,eAAe;AACjB;;;ACIO,IAAM,2BACX;AAOF,SAASA,QAAO,SAAkB,OAA0B,MAAiC;AAC3F,QAAM,OAAO,KAAK,SAAS,IAAI,qDAAa,KAAK,KAAK,GAAG,CAAC,KAAK;AAC/D,SAAO,yJAAiC,OAAO,6BAAS,MAAM,KAAK,GAAG,CAAC,GAAG,IAAI;AAChF;AAGO,SAAS,aAAa,UAA+B,CAAC,GAAe;AAC1E,QAAM,EAAE,aAAa,CAAC,EAAE,IAAI;AAC5B,QAAM,SAAS,EAAE,GAAG,yBAAyB,GAAG,QAAQ,OAAO;AAE/D,SAAO,OAAO,EAAE,MAAM,WAAW,QAAQ,MAAM;AAC7C,UAAM,QAAQ,eAAe,MAAM,WAAW,UAAU;AACxD,QAAI,MAAM,WAAW,EAAG;AAExB,QAAI,YAAY;AAChB,QAAI;AACF,kBAAY,gBAAgB,MAAM,MAAM,QAAQ,0BAA0B,GAAG,IAAI;AAAA;AAAA,EAAO,kBAAkB,IAAI,MAAM,KAAK,IAAI,CAAC,EAAE,CAAC;AAAA,IACnI,QAAQ;AAAA,IAER;AACA,UAAM,OAAO,aAAa;AAC1B,UAAM,OAAO,eAAe,MAAM,WAAW,UAAU;AACvD,QAAI,aAAa,KAAK,WAAW,EAAG,QAAO,EAAE,MAAM,WAAW,MAAMA,QAAO,0DAAa,OAAO,IAAI,EAAE;AACrG,UAAM,MAAM,aAAa,MAAM,IAAI;AAEnC,QAAI,CAAC,gBAAgB,KAAK,GAAG,EAAG,QAAO,EAAE,MAAM,OAAO,eAAe,MAAMA,QAAO,mFAAkB,OAAO,IAAI,EAAE;AACjH,WAAO,EAAE,MAAM,KAAK,MAAMA,QAAO,yFAAmB,OAAO,IAAI,EAAE;AAAA,EACnE;AACF;","names":["noteOf"]}
1
+ {"version":3,"sources":["../src/rewrite-notes.ts","../src/accepted-rewrite.ts","../src/found-foreign-words.ts","../src/foreign-words.ts","../src/app-domains.ts","../src/links-in-text.ts","../src/labels.ts","../src/unknown-links.ts"],"sourcesContent":["// Служебные строки запроса на переписывание: человеку их показывать нельзя, а модель иногда повторяет их в ответе.\n\n/** Строка перед списком чужих слов. */\nexport const FOREIGN_WORDS_NOTE = \"Чужие слова:\";\n\n/** Строка перед списком ссылок не из знакомых текстов. */\nexport const UNKNOWN_LINKS_NOTE = \"Ссылки не из инструкции:\";\n","import { FOREIGN_WORDS_NOTE, UNKNOWN_LINKS_NOTE } from \"./rewrite-notes\";\n\n/** Переписанный ответ короче этой доли исходного — смысл мог уйти. */\nconst MIN_LENGTH_RATIO = 0.6;\n\n/** Во сколько раз переписанный ответ может быть длиннее исходного, если приложение не задало своё. */\nexport const DEFAULT_MAX_LENGTH_RATIO = 1.5;\n\n/**\n * Переписанный текст, который можно отдать человеку; иначе пусто — и уходит исходный. Отбрасывается ответ со служебной\n * строкой запроса (модель повторила её) и, если длина важна, ответ, который сильно поменял длину.\n */\nexport function acceptedRewrite(original: string, rewritten: string, options: { sameLength?: { maxRatio: number } } = {}): string {\n const text = rewritten.trim();\n if (!text || text.includes(FOREIGN_WORDS_NOTE) || text.includes(UNKNOWN_LINKS_NOTE)) return \"\";\n if (options.sameLength) {\n const ratio = text.length / Math.max(original.trim().length, 1);\n if (ratio < MIN_LENGTH_RATIO || ratio > options.sameLength.maxRatio) return \"\";\n }\n return text;\n}\n","// Чужие слова в ответе. Слова не латиницы и не кириллицы — чужие всегда. Слово «соседней» письменности (латиница в\n// русском ответе, кириллица в английском) — чужое, только если его нет в знакомых текстах и это не название.\n// Так у преподавателя английского его термины законны, а «Actually» посреди русской речи — нет.\n\nexport type ReplyScript = \"cyrillic\" | \"latin\";\n\n/** Ссылки, почта, @имена, домены вида слово.слово/путь: их не трогаем. */\nconst UNTOUCHABLE =\n /(?:https?:\\/\\/|www\\.)\\S+|[\\w.+-]+@[\\w-]+(?:\\.[\\w-]+)+|@[\\w.]+|[\\p{L}\\d-]+(?:\\.[\\p{L}\\d-]+)*\\.(?:[a-z]{2,6}|рф)(?!\\p{L})(?:\\/\\S*)?/gu;\n\n/** Слово, где кириллица и латиница вперемешку: латинская буква вместо русской. */\nconst MIXED_WORD = /\\p{L}*(?:\\p{Script=Cyrillic}\\p{L}*\\p{Script=Latin}|\\p{Script=Latin}\\p{L}*\\p{Script=Cyrillic})\\p{L}*/gu;\n\n/** Слово не латиницы и не кириллицы: иероглифы, кана, хангыль, арабское, греческое письмо… */\nconst OTHER_SCRIPT_WORD = /(?:(?![\\p{Script=Latin}\\p{Script=Cyrillic}])\\p{L}[\\p{M}]*)+/gu;\n\nconst LATIN_WORD = /\\p{Script=Latin}+(?:['’-]\\p{Script=Latin}+)*/gu;\nconst CYRILLIC_WORD = /\\p{Script=Cyrillic}+(?:['’-]\\p{Script=Cyrillic}+)*/gu;\n\n/** Сервисы, которые в русской речи пишут латиницей и с маленькой буквы, и в начале фразы. */\nconst COMMON_SERVICES = new Set([\"zoom\", \"telegram\", \"instagram\", \"youtube\", \"whatsapp\", \"google\", \"skype\", \"excel\", \"notion\", \"viber\", \"facebook\", \"tiktok\"]);\n\nconst ROMAN_NUMERAL = /^[IVXLCDM]+$/;\n\n/** Слова соседней письменности: у русского ответа это латиница, у английского — кириллица. */\nfunction neighborWordsOf(text: string, script: ReplyScript): string[] {\n const words = text.match(script === \"cyrillic\" ? LATIN_WORD : CYRILLIC_WORD) ?? [];\n return words.filter((word) => word.length > 1 && !(script === \"cyrillic\" && ROMAN_NUMERAL.test(word)));\n}\n\n/** Сокращение из заглавных (PDF), большая буква внутри (WhatsApp), большая буква посреди фразы (в Calendly) — название. */\nfunction isName(word: string, before: string, script: ReplyScript): boolean {\n if (script === \"cyrillic\" && COMMON_SERVICES.has(word.toLowerCase())) return true;\n if (/^\\p{Lu}+$/u.test(word) || /\\p{Lu}/u.test(word.slice(1))) return true;\n return /^\\p{Lu}/u.test(word) && !/(?:^|[.!?…:\\n])[\\s«\"„“(—-]*$/u.test(before);\n}\n\n/**\n * Чужие слова ответа по порядку появления. `known` — тексты, слова соседней письменности из которых законны;\n * `knownNames` — названия, которые пишутся другой письменностью, чем ответ.\n */\nexport function foreignWordsIn(text: string, known: readonly string[], script: ReplyScript, knownNames: readonly string[] = []): string[] {\n const knownWords = new Set(\n [...known, ...knownNames].flatMap((source) => neighborWordsOf(source.replace(UNTOUCHABLE, \" \"), script).map((word) => word.toLowerCase())),\n );\n const found: Array<{ at: number; word: string }> = [];\n const clean = text\n .replace(UNTOUCHABLE, (link) => \" \".repeat(link.length))\n .replace(MIXED_WORD, (word, at: number) => {\n found.push({ at, word });\n return \" \".repeat(word.length);\n });\n for (const match of clean.matchAll(OTHER_SCRIPT_WORD)) found.push({ at: match.index, word: match[0] });\n for (const match of clean.matchAll(script === \"cyrillic\" ? LATIN_WORD : CYRILLIC_WORD)) {\n const [word] = neighborWordsOf(match[0], script);\n if (word && !knownWords.has(word.toLowerCase()) && !isName(word, clean.slice(0, match.index), script)) found.push({ at: match.index, word });\n }\n return found.sort((a, b) => a.at - b.at).map((item) => item.word);\n}\n","import type { ReplyCheck } from \"@ykurilov/agent-chat-core\";\nimport { DEFAULT_MAX_LENGTH_RATIO, acceptedRewrite } from \"./accepted-rewrite\";\nimport { foreignWordsIn, type ReplyScript } from \"./found-foreign-words\";\nimport { FOREIGN_WORDS_NOTE } from \"./rewrite-notes\";\n\nexport { FOREIGN_WORDS_NOTE };\n\nexport interface ForeignWordsOptions {\n /** Письменность ответа: слова другой письменности — чужие. */\n script: ReplyScript;\n /** Язык ответа для инструкции переписки, в виде «по-русски». По умолчанию: кириллица — «по-русски», латиница — «по-английски». */\n language?: string;\n /** Имена, которые пишутся другой письменностью и чужими не считаются (Excel, Telegram). */\n knownNames?: readonly string[];\n /** Насколько длиннее исходного может быть переписанный ответ (во сколько раз). По умолчанию 1.5. */\n maxLengthRatio?: number;\n}\n\nconst DEFAULT_LANGUAGE: Record<ReplyScript, string> = { cyrillic: \"по-русски\", latin: \"по-английски\" };\n\n/** Неизменное начало запроса: одно на все переписки одного языка, из кэша модели. */\nexport function foreignWordsInstruction(language: string): string {\n return (\n `Ты редактор. Перепиши этот ответ ${language}, смысл не меняй. ` +\n \"Иностранные слова и иероглифы замени словами языка ответа. Ссылки, почту, @имена и названия оставь как есть. \" +\n \"Ничего не добавляй и не убирай. В ответе только переписанный текст.\"\n );\n}\n\nexport const FOREIGN_WORDS_INSTRUCTION_CYRILLIC = foreignWordsInstruction(DEFAULT_LANGUAGE.cyrillic);\n\ntype Outcome = \"переписан\" | \"ушёл лучший из двух\" | \"не переписан\";\n\n/** Строка журнала: по ней считается, как часто срабатывает проверка. */\nfunction noteOf(outcome: Outcome, foreign: readonly string[], left: readonly string[]): string {\n const rest = left.length > 0 ? ` осталось=${left.join(\",\")}` : \"\";\n return `чужие слова: итог=${outcome} было=${foreign.join(\",\")}${rest}`;\n}\n\n/** Чужие слова в ответе: одна переписка моделью, иначе уходит вариант с меньшим числом чужих слов. */\nexport function foreignWords(options: ForeignWordsOptions): ReplyCheck {\n const { script, knownNames = [], maxLengthRatio = DEFAULT_MAX_LENGTH_RATIO } = options;\n const system = foreignWordsInstruction(options.language ?? DEFAULT_LANGUAGE[script]);\n\n return async ({ text, seenTexts, rewrite }) => {\n const foreign = foreignWordsIn(text, seenTexts, script, knownNames);\n if (foreign.length === 0) return;\n\n let rewritten = \"\";\n try {\n rewritten = acceptedRewrite(text, await rewrite(system, `${text}\\n\\n${FOREIGN_WORDS_NOTE} ${foreign.join(\", \")}`), {\n sameLength: { maxRatio: maxLengthRatio },\n });\n } catch {\n // Модель не ответила — уходит исходный ответ\n }\n if (!rewritten) return { text, note: noteOf(\"не переписан\", foreign, foreign) };\n\n const left = foreignWordsIn(rewritten, seenTexts, script, knownNames);\n if (left.length === 0) return { text: rewritten, note: noteOf(\"переписан\", foreign, left) };\n return left.length < foreign.length\n ? { text: rewritten, note: noteOf(\"ушёл лучший из двух\", foreign, left) }\n : { text, note: noteOf(\"ушёл лучший из двух\", foreign, foreign) };\n };\n}\n","// Короткий адрес приложения человека. Когда у приложений общий домен, человек часто пишет только имя — «sveta-nails»,\n// и адрес «sveta-nails.apps.example.com» однозначен. Домен задаёт настройка или шаблон в знакомых текстах — «адрес.apps.example.com».\n\n// «адрес.apps.example.com», «имя.site.ru»: русское слово-заготовка перед доменом\nconst APP_DOMAIN_TEMPLATE = /(?<![\\p{L}\\p{N}.-])[а-яё]+\\.((?:[a-z0-9-]+\\.)+[a-z]{2,})/giu;\n\n/** Домены приложений: заданные настройкой и описанные шаблоном в знакомых текстах. */\nexport function appDomainsOf(texts: readonly string[], configured: readonly string[] = []): string[] {\n const domains = new Set(configured.map((domain) => domain.toLowerCase()));\n for (const text of texts) for (const found of text.matchAll(APP_DOMAIN_TEMPLATE)) domains.add(found[1]!.toLowerCase());\n return [...domains];\n}\n\n/**\n * Хост — «имя.домен приложений», а имя человек написал отдельным словом: «адрес sveta-nails» → sveta-nails.apps.example.com.\n * Имя — одно латинское слово с цифрами и дефисами; с точкой после него это уже другой адрес.\n */\nexport function isAppNameHost(host: string, appDomains: readonly string[], texts: readonly string[]): boolean {\n const domain = appDomains.find((candidate) => host.endsWith(`.${candidate}`));\n if (!domain) return false;\n const name = host.slice(0, -domain.length - 1);\n // Только латиница, цифры и дефис: имя вставляется в выражение как есть\n if (!/^[a-z0-9][a-z0-9-]*$/.test(name)) return false;\n const word = new RegExp(`(?<![\\\\p{L}\\\\p{N}./@-])${name}(?![\\\\p{L}\\\\p{N}-]|\\\\.[\\\\p{L}\\\\p{N}])`, \"iu\");\n return texts.some((text) => word.test(text));\n}\n","import { appDomainsOf, isAppNameHost } from \"./app-domains\";\n\n// Ссылки в ответе. Давать можно только те, что есть в знакомых текстах (инструкция, сценарий, реплики человека).\n// Выдуманный или изменённый адрес уводит человека в никуда.\n\n/** http(s)://, www.…, домен с путём (t.me/…, bit.ly/…). Почта и @имена — не ссылки: перед доменом нет «@». */\nconst LINK = /(?:https?:\\/\\/|(?<![\\p{L}\\d@.\\/-])www\\.)[^\\s<>«»\"'()]+|(?<![\\p{L}\\d@.\\/-])(?:[\\p{L}\\d-]+\\.)+(?:[a-z]{2,6}|рф)\\/[^\\s<>«»\"'()]*/giu;\n\n/** Знаки препинания в конце — от фразы, а не от ссылки. */\nconst TRAILING = /[.,!?;:…]+$/u;\n\n/** Ссылки текста по порядку появления. */\nexport function linksIn(text: string): string[] {\n return (text.match(LINK) ?? []).map((link) => link.replace(TRAILING, \"\")).filter(Boolean);\n}\n\n/** Адрес без схемы, «www.» и косой черты в конце; домен — без учёта регистра: «https://A.ru/x» и «a.ru/x» — одна ссылка. */\nfunction sameAddress(link: string): string {\n const bare = link.replace(/^https?:\\/\\//i, \"\").replace(/^www\\./i, \"\").replace(/\\/+$/, \"\");\n const slash = bare.indexOf(\"/\");\n return slash < 0 ? bare.toLowerCase() : bare.slice(0, slash).toLowerCase() + bare.slice(slash);\n}\n\n// Голый адрес в знакомом тексте: человек пишет «sveta-nails.apps.example.com» без https:// и без пути\nconst BARE_HOST = /(?<![\\p{L}\\p{N}@./-])(?:[\\p{L}\\p{N}-]+\\.)+[\\p{L}]{2,}(?![\\p{L}\\p{N}/-])/giu;\n\n/**\n * Ссылки ответа, которых нет в знакомых текстах. Законны и голые адреса из них, и короткий адрес приложения:\n * имя из знакомых текстов на домене приложений (заданном настройкой или описанном шаблоном «адрес.apps.example.com»).\n */\nexport function unknownLinksIn(text: string, known: readonly string[], appDomains: readonly string[] = []): string[] {\n const allowed = new Set([...known.flatMap(linksIn), ...known.flatMap((one) => one.match(BARE_HOST) ?? [])].map(sameAddress));\n const domains = appDomainsOf(known, appDomains);\n return linksIn(text).filter((link) => {\n const address = sameAddress(link);\n return !allowed.has(address) && !(!address.includes(\"/\") && isAppNameHost(address, domains, known));\n });\n}\n\n/** Ссылки вырезаются вместе с подводкой «: » перед ними; лишние пробелы перед знаками убираются. */\nexport function withoutLinks(text: string, links: readonly string[]): string {\n let result = text;\n for (const link of links) result = result.split(link).join(\"\\u0000\");\n return result\n .replace(/\\s*:?\\s*\\u0000/g, \"\")\n .replace(/[ \\t]{2,}/g, \" \")\n .replace(/ +([.,!?;:…])/g, \"$1\")\n .trim();\n}\n","/** Слова, которые проверки ответа сами вставляют в ответ агента. */\nexport interface ReplyCheckLabels {\n /** Ответ был целиком из выдуманной ссылки: после вырезания ничего не осталось — уходит эта фраза. */\n linkOnlyReply: string;\n}\n\nexport const russianReplyCheckLabels: ReplyCheckLabels = {\n linkOnlyReply: \"Ссылку здесь дать не могу. Расскажите, что вы ищете, и я подскажу.\",\n};\n\nexport const englishReplyCheckLabels: ReplyCheckLabels = {\n linkOnlyReply: \"I can't share a link here. Tell me what you're looking for and I'll help.\",\n};\n","import type { ReplyCheck } from \"@ykurilov/agent-chat-core\";\nimport { acceptedRewrite } from \"./accepted-rewrite\";\nimport { UNKNOWN_LINKS_NOTE } from \"./rewrite-notes\";\nimport { unknownLinksIn, withoutLinks } from \"./links-in-text\";\nimport { russianReplyCheckLabels, type ReplyCheckLabels } from \"./labels\";\n\nexport { UNKNOWN_LINKS_NOTE };\n\nexport interface UnknownLinksOptions {\n /** Домены приложений: короткие имена на них разрешены, если человек назвал имя (`ivan` → `ivan.apps.example.com`). */\n appDomains?: readonly string[];\n /** Свои слова вместо русских по умолчанию (`englishReplyCheckLabels` или часть). */\n labels?: Partial<ReplyCheckLabels>;\n}\n\n/** Неизменное начало запроса: одно на все переписки, из кэша модели. */\nexport const LINK_REWRITE_INSTRUCTION =\n \"Ты редактор. Ссылки, перечисленные ниже, — не из инструкции: убери их из ответа. \" +\n \"Если без ссылки фраза теряет смысл, перестрой её, ничего не обещая. Других ссылок не добавляй, остальное не меняй. \" +\n \"В ответе только переписанный текст.\";\n\ntype Outcome = \"переписан\" | \"ссылки вырезаны\" | \"запасная фраза\";\n\n/** Строка журнала: по ней считается, как часто срабатывает проверка. */\nfunction noteOf(outcome: Outcome, links: readonly string[], left: readonly string[]): string {\n const rest = left.length > 0 ? ` вырезано=${left.join(\",\")}` : \"\";\n return `ссылки не из инструкции: итог=${outcome} было=${links.join(\",\")}${rest}`;\n}\n\n/** Выдуманные ссылки: разрешены адреса из `seenTexts`; лишние — одна переписка, остаток вырезается кодом. */\nexport function unknownLinks(options: UnknownLinksOptions = {}): ReplyCheck {\n const { appDomains = [] } = options;\n const labels = { ...russianReplyCheckLabels, ...options.labels };\n\n return async ({ text, seenTexts, rewrite }) => {\n const links = unknownLinksIn(text, seenTexts, appDomains);\n if (links.length === 0) return;\n\n let rewritten = \"\";\n try {\n rewritten = acceptedRewrite(text, await rewrite(LINK_REWRITE_INSTRUCTION, `${text}\\n\\n${UNKNOWN_LINKS_NOTE} ${links.join(\", \")}`));\n } catch {\n // Модель не ответила — ссылки вырежет код\n }\n const base = rewritten || text;\n const left = unknownLinksIn(base, seenTexts, appDomains);\n if (rewritten && left.length === 0) return { text: rewritten, note: noteOf(\"переписан\", links, left) };\n const cut = withoutLinks(base, left);\n // Ответ был одной ссылкой: пустой текст служба заменила бы прежним — со ссылкой. Уходит запасная фраза.\n if (!/[\\p{L}\\p{N}]/u.test(cut)) return { text: labels.linkOnlyReply, note: noteOf(\"запасная фраза\", links, left) };\n return { text: cut, note: noteOf(\"ссылки вырезаны\", links, left) };\n };\n}\n"],"mappings":";AAGO,IAAM,qBAAqB;AAG3B,IAAM,qBAAqB;;;ACHlC,IAAM,mBAAmB;AAGlB,IAAM,2BAA2B;AAMjC,SAAS,gBAAgB,UAAkB,WAAmB,UAAiD,CAAC,GAAW;AAChI,QAAM,OAAO,UAAU,KAAK;AAC5B,MAAI,CAAC,QAAQ,KAAK,SAAS,kBAAkB,KAAK,KAAK,SAAS,kBAAkB,EAAG,QAAO;AAC5F,MAAI,QAAQ,YAAY;AACtB,UAAM,QAAQ,KAAK,SAAS,KAAK,IAAI,SAAS,KAAK,EAAE,QAAQ,CAAC;AAC9D,QAAI,QAAQ,oBAAoB,QAAQ,QAAQ,WAAW,SAAU,QAAO;AAAA,EAC9E;AACA,SAAO;AACT;;;ACbA,IAAM,cACJ;AAGF,IAAM,aAAa;AAGnB,IAAM,oBAAoB;AAE1B,IAAM,aAAa;AACnB,IAAM,gBAAgB;AAGtB,IAAM,kBAAkB,oBAAI,IAAI,CAAC,QAAQ,YAAY,aAAa,WAAW,YAAY,UAAU,SAAS,SAAS,UAAU,SAAS,YAAY,QAAQ,CAAC;AAE7J,IAAM,gBAAgB;AAGtB,SAAS,gBAAgB,MAAc,QAA+B;AACpE,QAAM,QAAQ,KAAK,MAAM,WAAW,aAAa,aAAa,aAAa,KAAK,CAAC;AACjF,SAAO,MAAM,OAAO,CAAC,SAAS,KAAK,SAAS,KAAK,EAAE,WAAW,cAAc,cAAc,KAAK,IAAI,EAAE;AACvG;AAGA,SAAS,OAAO,MAAc,QAAgB,QAA8B;AAC1E,MAAI,WAAW,cAAc,gBAAgB,IAAI,KAAK,YAAY,CAAC,EAAG,QAAO;AAC7E,MAAI,aAAa,KAAK,IAAI,KAAK,UAAU,KAAK,KAAK,MAAM,CAAC,CAAC,EAAG,QAAO;AACrE,SAAO,WAAW,KAAK,IAAI,KAAK,CAAC,gCAAgC,KAAK,MAAM;AAC9E;AAMO,SAAS,eAAe,MAAc,OAA0B,QAAqB,aAAgC,CAAC,GAAa;AACxI,QAAM,aAAa,IAAI;AAAA,IACrB,CAAC,GAAG,OAAO,GAAG,UAAU,EAAE,QAAQ,CAAC,WAAW,gBAAgB,OAAO,QAAQ,aAAa,GAAG,GAAG,MAAM,EAAE,IAAI,CAAC,SAAS,KAAK,YAAY,CAAC,CAAC;AAAA,EAC3I;AACA,QAAM,QAA6C,CAAC;AACpD,QAAM,QAAQ,KACX,QAAQ,aAAa,CAAC,SAAS,IAAI,OAAO,KAAK,MAAM,CAAC,EACtD,QAAQ,YAAY,CAAC,MAAM,OAAe;AACzC,UAAM,KAAK,EAAE,IAAI,KAAK,CAAC;AACvB,WAAO,IAAI,OAAO,KAAK,MAAM;AAAA,EAC/B,CAAC;AACH,aAAW,SAAS,MAAM,SAAS,iBAAiB,EAAG,OAAM,KAAK,EAAE,IAAI,MAAM,OAAO,MAAM,MAAM,CAAC,EAAE,CAAC;AACrG,aAAW,SAAS,MAAM,SAAS,WAAW,aAAa,aAAa,aAAa,GAAG;AACtF,UAAM,CAAC,IAAI,IAAI,gBAAgB,MAAM,CAAC,GAAG,MAAM;AAC/C,QAAI,QAAQ,CAAC,WAAW,IAAI,KAAK,YAAY,CAAC,KAAK,CAAC,OAAO,MAAM,MAAM,MAAM,GAAG,MAAM,KAAK,GAAG,MAAM,EAAG,OAAM,KAAK,EAAE,IAAI,MAAM,OAAO,KAAK,CAAC;AAAA,EAC7I;AACA,SAAO,MAAM,KAAK,CAAC,GAAG,MAAM,EAAE,KAAK,EAAE,EAAE,EAAE,IAAI,CAAC,SAAS,KAAK,IAAI;AAClE;;;ACxCA,IAAM,mBAAgD,EAAE,UAAU,qDAAa,OAAO,sEAAe;AAG9F,SAAS,wBAAwB,UAA0B;AAChE,SACE,2KAAoC,QAAQ;AAIhD;AAEO,IAAM,qCAAqC,wBAAwB,iBAAiB,QAAQ;AAKnG,SAAS,OAAO,SAAkB,SAA4B,MAAiC;AAC7F,QAAM,OAAO,KAAK,SAAS,IAAI,qDAAa,KAAK,KAAK,GAAG,CAAC,KAAK;AAC/D,SAAO,2FAAqB,OAAO,6BAAS,QAAQ,KAAK,GAAG,CAAC,GAAG,IAAI;AACtE;AAGO,SAAS,aAAa,SAA0C;AACrE,QAAM,EAAE,QAAQ,aAAa,CAAC,GAAG,iBAAiB,yBAAyB,IAAI;AAC/E,QAAM,SAAS,wBAAwB,QAAQ,YAAY,iBAAiB,MAAM,CAAC;AAEnF,SAAO,OAAO,EAAE,MAAM,WAAW,QAAQ,MAAM;AAC7C,UAAM,UAAU,eAAe,MAAM,WAAW,QAAQ,UAAU;AAClE,QAAI,QAAQ,WAAW,EAAG;AAE1B,QAAI,YAAY;AAChB,QAAI;AACF,kBAAY,gBAAgB,MAAM,MAAM,QAAQ,QAAQ,GAAG,IAAI;AAAA;AAAA,EAAO,kBAAkB,IAAI,QAAQ,KAAK,IAAI,CAAC,EAAE,GAAG;AAAA,QACjH,YAAY,EAAE,UAAU,eAAe;AAAA,MACzC,CAAC;AAAA,IACH,QAAQ;AAAA,IAER;AACA,QAAI,CAAC,UAAW,QAAO,EAAE,MAAM,MAAM,OAAO,uEAAgB,SAAS,OAAO,EAAE;AAE9E,UAAM,OAAO,eAAe,WAAW,WAAW,QAAQ,UAAU;AACpE,QAAI,KAAK,WAAW,EAAG,QAAO,EAAE,MAAM,WAAW,MAAM,OAAO,0DAAa,SAAS,IAAI,EAAE;AAC1F,WAAO,KAAK,SAAS,QAAQ,SACzB,EAAE,MAAM,WAAW,MAAM,OAAO,uGAAuB,SAAS,IAAI,EAAE,IACtE,EAAE,MAAM,MAAM,OAAO,uGAAuB,SAAS,OAAO,EAAE;AAAA,EACpE;AACF;;;AC5DA,IAAM,sBAAsB;AAGrB,SAAS,aAAa,OAA0B,aAAgC,CAAC,GAAa;AACnG,QAAM,UAAU,IAAI,IAAI,WAAW,IAAI,CAAC,WAAW,OAAO,YAAY,CAAC,CAAC;AACxE,aAAW,QAAQ,MAAO,YAAW,SAAS,KAAK,SAAS,mBAAmB,EAAG,SAAQ,IAAI,MAAM,CAAC,EAAG,YAAY,CAAC;AACrH,SAAO,CAAC,GAAG,OAAO;AACpB;AAMO,SAAS,cAAc,MAAc,YAA+B,OAAmC;AAC5G,QAAM,SAAS,WAAW,KAAK,CAAC,cAAc,KAAK,SAAS,IAAI,SAAS,EAAE,CAAC;AAC5E,MAAI,CAAC,OAAQ,QAAO;AACpB,QAAM,OAAO,KAAK,MAAM,GAAG,CAAC,OAAO,SAAS,CAAC;AAE7C,MAAI,CAAC,uBAAuB,KAAK,IAAI,EAAG,QAAO;AAC/C,QAAM,OAAO,IAAI,OAAO,0BAA0B,IAAI,yCAAyC,IAAI;AACnG,SAAO,MAAM,KAAK,CAAC,SAAS,KAAK,KAAK,IAAI,CAAC;AAC7C;;;ACnBA,IAAM,OAAO;AAGb,IAAM,WAAW;AAGV,SAAS,QAAQ,MAAwB;AAC9C,UAAQ,KAAK,MAAM,IAAI,KAAK,CAAC,GAAG,IAAI,CAAC,SAAS,KAAK,QAAQ,UAAU,EAAE,CAAC,EAAE,OAAO,OAAO;AAC1F;AAGA,SAAS,YAAY,MAAsB;AACzC,QAAM,OAAO,KAAK,QAAQ,iBAAiB,EAAE,EAAE,QAAQ,WAAW,EAAE,EAAE,QAAQ,QAAQ,EAAE;AACxF,QAAM,QAAQ,KAAK,QAAQ,GAAG;AAC9B,SAAO,QAAQ,IAAI,KAAK,YAAY,IAAI,KAAK,MAAM,GAAG,KAAK,EAAE,YAAY,IAAI,KAAK,MAAM,KAAK;AAC/F;AAGA,IAAM,YAAY;AAMX,SAAS,eAAe,MAAc,OAA0B,aAAgC,CAAC,GAAa;AACnH,QAAM,UAAU,IAAI,IAAI,CAAC,GAAG,MAAM,QAAQ,OAAO,GAAG,GAAG,MAAM,QAAQ,CAAC,QAAQ,IAAI,MAAM,SAAS,KAAK,CAAC,CAAC,CAAC,EAAE,IAAI,WAAW,CAAC;AAC3H,QAAM,UAAU,aAAa,OAAO,UAAU;AAC9C,SAAO,QAAQ,IAAI,EAAE,OAAO,CAAC,SAAS;AACpC,UAAM,UAAU,YAAY,IAAI;AAChC,WAAO,CAAC,QAAQ,IAAI,OAAO,KAAK,EAAE,CAAC,QAAQ,SAAS,GAAG,KAAK,cAAc,SAAS,SAAS,KAAK;AAAA,EACnG,CAAC;AACH;AAGO,SAAS,aAAa,MAAc,OAAkC;AAC3E,MAAI,SAAS;AACb,aAAW,QAAQ,MAAO,UAAS,OAAO,MAAM,IAAI,EAAE,KAAK,IAAQ;AACnE,SAAO,OACJ,QAAQ,mBAAmB,EAAE,EAC7B,QAAQ,cAAc,GAAG,EACzB,QAAQ,kBAAkB,IAAI,EAC9B,KAAK;AACV;;;AC1CO,IAAM,0BAA4C;AAAA,EACvD,eAAe;AACjB;AAEO,IAAM,0BAA4C;AAAA,EACvD,eAAe;AACjB;;;ACIO,IAAM,2BACX;AAOF,SAASA,QAAO,SAAkB,OAA0B,MAAiC;AAC3F,QAAM,OAAO,KAAK,SAAS,IAAI,qDAAa,KAAK,KAAK,GAAG,CAAC,KAAK;AAC/D,SAAO,yJAAiC,OAAO,6BAAS,MAAM,KAAK,GAAG,CAAC,GAAG,IAAI;AAChF;AAGO,SAAS,aAAa,UAA+B,CAAC,GAAe;AAC1E,QAAM,EAAE,aAAa,CAAC,EAAE,IAAI;AAC5B,QAAM,SAAS,EAAE,GAAG,yBAAyB,GAAG,QAAQ,OAAO;AAE/D,SAAO,OAAO,EAAE,MAAM,WAAW,QAAQ,MAAM;AAC7C,UAAM,QAAQ,eAAe,MAAM,WAAW,UAAU;AACxD,QAAI,MAAM,WAAW,EAAG;AAExB,QAAI,YAAY;AAChB,QAAI;AACF,kBAAY,gBAAgB,MAAM,MAAM,QAAQ,0BAA0B,GAAG,IAAI;AAAA;AAAA,EAAO,kBAAkB,IAAI,MAAM,KAAK,IAAI,CAAC,EAAE,CAAC;AAAA,IACnI,QAAQ;AAAA,IAER;AACA,UAAM,OAAO,aAAa;AAC1B,UAAM,OAAO,eAAe,MAAM,WAAW,UAAU;AACvD,QAAI,aAAa,KAAK,WAAW,EAAG,QAAO,EAAE,MAAM,WAAW,MAAMA,QAAO,0DAAa,OAAO,IAAI,EAAE;AACrG,UAAM,MAAM,aAAa,MAAM,IAAI;AAEnC,QAAI,CAAC,gBAAgB,KAAK,GAAG,EAAG,QAAO,EAAE,MAAM,OAAO,eAAe,MAAMA,QAAO,mFAAkB,OAAO,IAAI,EAAE;AACjH,WAAO,EAAE,MAAM,KAAK,MAAMA,QAAO,yFAAmB,OAAO,IAAI,EAAE;AAAA,EACnE;AACF;","names":["noteOf"]}
@@ -1,7 +1,7 @@
1
1
  /** Домены приложений: заданные настройкой и описанные шаблоном в знакомых текстах. */
2
2
  export declare function appDomainsOf(texts: readonly string[], configured?: readonly string[]): string[];
3
3
  /**
4
- * Хост — «имя.домен приложений», а имя человек написал отдельным словом: «адрес sveta-nails» → sveta-nails.ykapp.ru.
4
+ * Хост — «имя.домен приложений», а имя человек написал отдельным словом: «адрес sveta-nails» → sveta-nails.apps.example.com.
5
5
  * Имя — одно латинское слово с цифрами и дефисами; с точкой после него это уже другой адрес.
6
6
  */
7
7
  export declare function isAppNameHost(host: string, appDomains: readonly string[], texts: readonly string[]): boolean;
@@ -2,7 +2,7 @@
2
2
  export declare function linksIn(text: string): string[];
3
3
  /**
4
4
  * Ссылки ответа, которых нет в знакомых текстах. Законны и голые адреса из них, и короткий адрес приложения:
5
- * имя из знакомых текстов на домене приложений (заданном настройкой или описанном шаблоном «адрес.ykapp.ru»).
5
+ * имя из знакомых текстов на домене приложений (заданном настройкой или описанном шаблоном «адрес.apps.example.com»).
6
6
  */
7
7
  export declare function unknownLinksIn(text: string, known: readonly string[], appDomains?: readonly string[]): string[];
8
8
  /** Ссылки вырезаются вместе с подводкой «: » перед ними; лишние пробелы перед знаками убираются. */
@@ -3,7 +3,7 @@ import { UNKNOWN_LINKS_NOTE } from "./rewrite-notes.js";
3
3
  import { type ReplyCheckLabels } from "./labels.js";
4
4
  export { UNKNOWN_LINKS_NOTE };
5
5
  export interface UnknownLinksOptions {
6
- /** Домены приложений: короткие имена на них разрешены, если человек назвал имя (`ivan` → `ivan.ykapp.ru`). */
6
+ /** Домены приложений: короткие имена на них разрешены, если человек назвал имя (`ivan` → `ivan.apps.example.com`). */
7
7
  appDomains?: readonly string[];
8
8
  /** Свои слова вместо русских по умолчанию (`englishReplyCheckLabels` или часть). */
9
9
  labels?: Partial<ReplyCheckLabels>;
package/package.json CHANGED
@@ -1,6 +1,6 @@
1
1
  {
2
2
  "name": "@ykurilov/agent-chat-reply-check",
3
- "version": "0.105.0",
3
+ "version": "0.106.0",
4
4
  "license": "MIT",
5
5
  "description": "Проверки ответа агента для replyChecks службы чата: чужие слова и выдуманные ссылки.",
6
6
  "type": "module",
@@ -30,7 +30,7 @@
30
30
  "directory": "packages/reply-check"
31
31
  },
32
32
  "dependencies": {
33
- "@ykurilov/agent-chat-core": "0.105.0"
33
+ "@ykurilov/agent-chat-core": "0.106.0"
34
34
  },
35
35
  "scripts": {
36
36
  "build": "node ../../scripts/build-package.mjs",