@modusensus/dsh-mneme 0.13.0 → 0.14.0-beta.2

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (543) hide show
  1. package/LICENSE +21 -21
  2. package/README.md +830 -828
  3. package/assets/icon.svg +3 -3
  4. package/bin/cli.mjs +964 -964
  5. package/bin/dsh-mneme-choro.mjs +262 -254
  6. package/bin/dsh-mneme-mcp.mjs +510 -510
  7. package/bin/dsh-mneme-serve.mjs +151 -151
  8. package/cordis.patch.yml +21 -21
  9. package/docs/CONFIGURATION.md +407 -402
  10. package/docs/CONTINUITY.md +139 -139
  11. package/docs/DAEMON.md +57 -57
  12. package/docs/DIRECTORIES.md +114 -114
  13. package/docs/DISTILL.md +397 -371
  14. package/docs/DSH-GO.md +97 -97
  15. package/docs/ENTITIES.md +247 -247
  16. package/docs/FORGET.md +77 -77
  17. package/docs/KB.md +110 -110
  18. package/docs/LOCAL_MODEL.md +222 -222
  19. package/docs/SEMANTIC.md +256 -256
  20. package/docs/SHARE.md +552 -552
  21. package/docs/SLEEP.md +202 -202
  22. package/docs/STORAGE.md +122 -122
  23. package/docs/WORKFLOWS.md +366 -366
  24. package/lib/api-standalone.js +1007 -1007
  25. package/lib/api.js +3600 -3394
  26. package/lib/attachment-text.js +122 -122
  27. package/lib/bootstrap-http.js +105 -105
  28. package/lib/bootstrap.js +215 -215
  29. package/lib/candidates.js +454 -454
  30. package/lib/capabilities.js +819 -819
  31. package/lib/choro-command.js +111 -111
  32. package/lib/client.js +14420 -13436
  33. package/lib/commands.js +95 -95
  34. package/lib/config-keys.js +144 -144
  35. package/lib/config.js +1361 -1317
  36. package/lib/content-hash.js +54 -54
  37. package/lib/continuity.js +258 -258
  38. package/lib/date-hint.js +32 -0
  39. package/lib/diary/auto.js +190 -190
  40. package/lib/diary/compose.js +440 -440
  41. package/lib/diary/dir.js +59 -59
  42. package/lib/diary/export.js +97 -97
  43. package/lib/diary/index.js +26 -26
  44. package/lib/diary/library.js +189 -189
  45. package/lib/diary/qq-inbox.js +142 -142
  46. package/lib/diary/rollover.js +61 -61
  47. package/lib/diary/session-provider.js +122 -122
  48. package/lib/document-index.js +94 -94
  49. package/lib/document.js +322 -322
  50. package/lib/dream/clustering.js +123 -123
  51. package/lib/dream/decisions.js +945 -907
  52. package/lib/dream/narratives.js +44 -44
  53. package/lib/dream/sleep.js +2027 -1887
  54. package/lib/dream/triage.js +139 -0
  55. package/lib/dream.js +1879 -1764
  56. package/lib/dsh-go/host.js +162 -162
  57. package/lib/dsh-go/panel.js +2091 -2091
  58. package/lib/dsh-go/text.js +342 -342
  59. package/lib/dsh-go/views/common.js +68 -68
  60. package/lib/dsh-go/views/entity.js +48 -48
  61. package/lib/dsh-go/views/memory.js +198 -198
  62. package/lib/dsh-go/views/root.js +30 -30
  63. package/lib/dsh-go/views/settings.js +398 -398
  64. package/lib/dsh-go/views/status.js +51 -51
  65. package/lib/embedding.js +342 -342
  66. package/lib/entities/extractor.js +285 -285
  67. package/lib/fence.js +24 -24
  68. package/lib/graph/anchoring.js +184 -184
  69. package/lib/guide.js +74 -74
  70. package/lib/heat.js +144 -144
  71. package/lib/hot-memory.js +119 -107
  72. package/lib/image-describe.js +158 -0
  73. package/lib/index.js +852 -822
  74. package/lib/inject.js +656 -639
  75. package/lib/kb/index.js +309 -309
  76. package/lib/kb/routes.js +219 -219
  77. package/lib/kb/tools.js +148 -148
  78. package/lib/lang.js +607 -584
  79. package/lib/local-embedder.js +358 -358
  80. package/lib/maintenance.js +162 -162
  81. package/lib/memory-source.js +9 -9
  82. package/lib/mirror.js +330 -330
  83. package/lib/organize.js +456 -456
  84. package/lib/peak-hours.js +172 -172
  85. package/lib/pipeline-activities.js +178 -178
  86. package/lib/pipeline-attribution.js +165 -165
  87. package/lib/pipeline-command.js +279 -279
  88. package/lib/pipeline-confirm.js +142 -142
  89. package/lib/pipeline-exec.js +174 -174
  90. package/lib/pipeline-nudge-auto.js +129 -129
  91. package/lib/pipeline-nudge.js +1623 -1623
  92. package/lib/pipeline-observations.js +181 -181
  93. package/lib/pipeline-observe.js +133 -133
  94. package/lib/pipeline-runner.js +361 -361
  95. package/lib/pipeline-runs.js +442 -442
  96. package/lib/pipeline.js +716 -716
  97. package/lib/placement.js +13 -13
  98. package/lib/pre-inject-gate.js +354 -354
  99. package/lib/profile-extract.js +164 -164
  100. package/lib/profile-facts.js +356 -356
  101. package/lib/provenance-http.js +251 -251
  102. package/lib/quality-filter.js +162 -162
  103. package/lib/recall-stats.js +190 -190
  104. package/lib/reclaim-http.js +150 -150
  105. package/lib/reranker.js +269 -269
  106. package/lib/runtime/adopt.js +176 -176
  107. package/lib/runtime/closure.js +172 -172
  108. package/lib/runtime/download.js +247 -247
  109. package/lib/runtime/layout.js +265 -265
  110. package/lib/runtime/loader.js +252 -252
  111. package/lib/runtime/model-fetch.js +361 -361
  112. package/lib/runtime/provision.js +237 -237
  113. package/lib/runtime/tarball.js +130 -130
  114. package/lib/runtime/verify.js +223 -223
  115. package/lib/safe-slice.js +18 -18
  116. package/lib/scope-state.js +277 -277
  117. package/lib/scope.js +187 -187
  118. package/lib/search/adaptive.js +60 -60
  119. package/lib/search/bm25.js +96 -96
  120. package/lib/semantic.js +572 -572
  121. package/lib/sensitive-scan.js +209 -209
  122. package/lib/serve.js +228 -228
  123. package/lib/service.js +3268 -3196
  124. package/lib/session-gate.js +91 -91
  125. package/lib/session-usage.js +350 -350
  126. package/lib/settings.js +827 -802
  127. package/lib/share-http.js +281 -281
  128. package/lib/share-import.js +234 -234
  129. package/lib/share.js +335 -335
  130. package/lib/store.js +5895 -5662
  131. package/lib/summarize.js +1388 -1343
  132. package/lib/tools.js +1370 -1356
  133. package/lib/user-settings.js +230 -230
  134. package/lib/vector-index.js +180 -180
  135. package/lib/version-check.js +122 -122
  136. package/lib/wiki/claims.js +267 -0
  137. package/lib/wiki/cli-hint.js +90 -90
  138. package/lib/wiki/inject.js +164 -164
  139. package/lib/wiki/partition.js +200 -200
  140. package/lib/wiki/plan.js +214 -214
  141. package/lib/wiki/queries.js +640 -474
  142. package/lib/wiki/render.js +261 -187
  143. package/lib/wiki/scan.js +371 -371
  144. package/lib/wiki/t0.js +500 -463
  145. package/lib/wiki/t1-jobs.js +232 -232
  146. package/lib/wiki/t1.js +609 -502
  147. package/lib/write-admission.js +404 -404
  148. package/locale/en.json +6 -6
  149. package/locale/zh.json +6 -6
  150. package/package.json +15 -1
  151. package/runtime-manifest.json +526 -526
  152. package/scripts/benchmark-embed.js +201 -201
  153. package/scripts/benchmark-recall.js +249 -249
  154. package/scripts/benchmark-rerank.js +166 -166
  155. package/scripts/build-runtime-manifest.mjs +224 -224
  156. package/scripts/changelog-prep.mjs +91 -91
  157. package/scripts/check-sync.js +44 -44
  158. package/scripts/e2e-dsh.js +220 -220
  159. package/scripts/mneme-runtime.mjs +277 -277
  160. package/scripts/publish-gate.mjs +197 -197
  161. package/scripts/release-docs.mjs +210 -204
  162. package/scripts/release-notes.mjs +164 -161
  163. package/scripts/stress-dsh.js +255 -255
  164. package/scripts/sync-lib.js +47 -47
  165. package/scripts/sync-test-badge.mjs +69 -69
  166. package/scripts/test-count-sync.mjs +48 -48
  167. package/src/api-standalone.js +1007 -1007
  168. package/src/api.js +3600 -3394
  169. package/src/attachment-text.js +122 -122
  170. package/src/bootstrap-http.js +105 -105
  171. package/src/bootstrap.js +215 -215
  172. package/src/candidates.js +454 -454
  173. package/src/capabilities.js +819 -819
  174. package/src/choro-command.js +111 -111
  175. package/src/commands.js +95 -95
  176. package/src/config-keys.js +144 -144
  177. package/src/config.js +1361 -1317
  178. package/src/content-hash.js +54 -54
  179. package/src/continuity.js +258 -258
  180. package/src/date-hint.js +32 -0
  181. package/src/diary/auto.js +190 -190
  182. package/src/diary/compose.js +440 -440
  183. package/src/diary/dir.js +59 -59
  184. package/src/diary/export.js +97 -97
  185. package/src/diary/index.js +26 -26
  186. package/src/diary/library.js +189 -189
  187. package/src/diary/qq-inbox.js +142 -142
  188. package/src/diary/rollover.js +61 -61
  189. package/src/diary/session-provider.js +122 -122
  190. package/src/document-index.js +94 -94
  191. package/src/document.js +322 -322
  192. package/src/dream/clustering.js +123 -123
  193. package/src/dream/decisions.js +945 -907
  194. package/src/dream/narratives.js +44 -44
  195. package/src/dream/sleep.js +2027 -1887
  196. package/src/dream/triage.js +139 -0
  197. package/src/dream.js +1879 -1764
  198. package/src/dsh-go/host.js +162 -162
  199. package/src/dsh-go/panel.js +2091 -2091
  200. package/src/dsh-go/text.js +342 -342
  201. package/src/dsh-go/views/common.js +68 -68
  202. package/src/dsh-go/views/entity.js +48 -48
  203. package/src/dsh-go/views/memory.js +198 -198
  204. package/src/dsh-go/views/root.js +30 -30
  205. package/src/dsh-go/views/settings.js +398 -398
  206. package/src/dsh-go/views/status.js +51 -51
  207. package/src/embedding.js +342 -342
  208. package/src/entities/extractor.js +285 -285
  209. package/src/fence.js +24 -24
  210. package/src/graph/anchoring.js +184 -184
  211. package/src/guide.js +74 -74
  212. package/src/heat.js +144 -144
  213. package/src/hot-memory.js +119 -107
  214. package/src/image-describe.js +158 -0
  215. package/src/index.js +852 -822
  216. package/src/inject.js +656 -639
  217. package/src/kb/index.js +309 -309
  218. package/src/kb/routes.js +219 -219
  219. package/src/kb/tools.js +148 -148
  220. package/src/lang.js +607 -584
  221. package/src/local-embedder.js +358 -358
  222. package/src/maintenance.js +162 -162
  223. package/src/memory-source.js +9 -9
  224. package/src/mirror.js +330 -330
  225. package/src/organize.js +456 -456
  226. package/src/peak-hours.js +172 -172
  227. package/src/pipeline-activities.js +178 -178
  228. package/src/pipeline-attribution.js +165 -165
  229. package/src/pipeline-command.js +279 -279
  230. package/src/pipeline-confirm.js +142 -142
  231. package/src/pipeline-exec.js +174 -174
  232. package/src/pipeline-nudge-auto.js +129 -129
  233. package/src/pipeline-nudge.js +1623 -1623
  234. package/src/pipeline-observations.js +181 -181
  235. package/src/pipeline-observe.js +133 -133
  236. package/src/pipeline-runner.js +361 -361
  237. package/src/pipeline-runs.js +442 -442
  238. package/src/pipeline.js +716 -716
  239. package/src/placement.js +13 -13
  240. package/src/pre-inject-gate.js +354 -354
  241. package/src/profile-extract.js +164 -164
  242. package/src/profile-facts.js +356 -356
  243. package/src/provenance-http.js +251 -251
  244. package/src/quality-filter.js +162 -162
  245. package/src/recall-stats.js +190 -190
  246. package/src/reclaim-http.js +150 -150
  247. package/src/reranker.js +269 -269
  248. package/src/runtime/adopt.js +176 -176
  249. package/src/runtime/closure.js +172 -172
  250. package/src/runtime/download.js +247 -247
  251. package/src/runtime/layout.js +265 -265
  252. package/src/runtime/loader.js +252 -252
  253. package/src/runtime/model-fetch.js +361 -361
  254. package/src/runtime/provision.js +237 -237
  255. package/src/runtime/tarball.js +130 -130
  256. package/src/runtime/verify.js +223 -223
  257. package/src/safe-slice.js +18 -18
  258. package/src/scope-state.js +277 -277
  259. package/src/scope.js +187 -187
  260. package/src/search/adaptive.js +60 -60
  261. package/src/search/bm25.js +96 -96
  262. package/src/semantic.js +572 -572
  263. package/src/sensitive-scan.js +209 -209
  264. package/src/serve.js +228 -228
  265. package/src/service.js +3268 -3196
  266. package/src/session-gate.js +91 -91
  267. package/src/session-usage.js +350 -350
  268. package/src/settings.js +827 -802
  269. package/src/share-http.js +281 -281
  270. package/src/share-import.js +234 -234
  271. package/src/share.js +335 -335
  272. package/src/store.js +5895 -5662
  273. package/src/summarize.js +1388 -1343
  274. package/src/tools.js +1370 -1356
  275. package/src/user-settings.js +230 -230
  276. package/src/vector-index.js +180 -180
  277. package/src/version-check.js +122 -122
  278. package/src/wiki/claims.js +267 -0
  279. package/src/wiki/cli-hint.js +90 -90
  280. package/src/wiki/inject.js +164 -164
  281. package/src/wiki/partition.js +200 -200
  282. package/src/wiki/plan.js +214 -214
  283. package/src/wiki/queries.js +640 -474
  284. package/src/wiki/render.js +261 -187
  285. package/src/wiki/scan.js +371 -371
  286. package/src/wiki/t0.js +500 -463
  287. package/src/wiki/t1-jobs.js +232 -232
  288. package/src/wiki/t1.js +609 -502
  289. package/src/write-admission.js +404 -404
  290. package/test/adaptive-inject-budget.test.js +85 -85
  291. package/test/api-hardening.test.js +173 -173
  292. package/test/api-nudge-route.test.js +259 -259
  293. package/test/api-routes-gaps.test.js +1092 -1092
  294. package/test/api.test.js +3007 -2988
  295. package/test/attachment-text.test.js +139 -139
  296. package/test/audit.test.js +448 -448
  297. package/test/baseline-persist.test.js +248 -248
  298. package/test/benchmark.test.js +94 -94
  299. package/test/bm25-corpus-cache.test.js +145 -145
  300. package/test/bootstrap.test.js +228 -228
  301. package/test/candidates.test.js +345 -345
  302. package/test/capabilities.test.js +577 -577
  303. package/test/capacity-warning.test.js +262 -262
  304. package/test/changelog-prep.test.js +125 -125
  305. package/test/choro-command.test.js +218 -218
  306. package/test/cli-enums.test.js +37 -37
  307. package/test/cli-flag-value.test.js +86 -86
  308. package/test/cli-receive.test.js +390 -390
  309. package/test/cli-share.test.js +437 -437
  310. package/test/client-share.test.js +225 -225
  311. package/test/client.test.js +4595 -4184
  312. package/test/clustering.test.js +100 -100
  313. package/test/commands.test.js +106 -106
  314. package/test/config-keys-routes.test.js +233 -233
  315. package/test/config.test.js +153 -153
  316. package/test/conflict-freeze.test.js +344 -344
  317. package/test/conflict-ledger-enforce.test.js +452 -0
  318. package/test/conflict-ledger.test.js +242 -0
  319. package/test/conflict-reviewed.test.js +79 -79
  320. package/test/content-hash.test.js +204 -204
  321. package/test/continuity.test.js +452 -452
  322. package/test/contrast.test.js +432 -320
  323. package/test/date-hint.test.js +156 -0
  324. package/test/dedupe-candidate-window.test.js +180 -180
  325. package/test/dependency-overrides.test.js +78 -78
  326. package/test/diary-library.test.js +187 -187
  327. package/test/diary.test.js +576 -576
  328. package/test/differentiate-feedback.test.js +248 -248
  329. package/test/distill-tx-embed-gap.test.js +110 -110
  330. package/test/docs-config-keys.test.js +65 -65
  331. package/test/document-dir.test.js +233 -233
  332. package/test/document.test.js +703 -703
  333. package/test/dream-archive-guardrail.test.js +116 -116
  334. package/test/dream-baseline-clamp.test.js +174 -0
  335. package/test/dream-candidate-hybrid.test.js +281 -281
  336. package/test/dream-coverage-degrade.test.js +86 -86
  337. package/test/dream-decision-evidence.test.js +314 -314
  338. package/test/dream-failure-backoff.test.js +173 -173
  339. package/test/dream-fence.test.js +207 -207
  340. package/test/dream-maxtokens-fallback.test.js +132 -132
  341. package/test/dream-merge-guardrail.test.js +219 -219
  342. package/test/dream-peak-hours.test.js +194 -194
  343. package/test/dream.test.js +1528 -1528
  344. package/test/dsh-go-host.test.js +134 -134
  345. package/test/dsh-go-panel-actions.test.js +854 -854
  346. package/test/dsh-go-panel.test.js +251 -251
  347. package/test/embed-ready-poll.test.js +94 -94
  348. package/test/embed-text-reasons.test.js +112 -112
  349. package/test/embedding-cache-f32.test.js +276 -276
  350. package/test/embedding-ready.test.js +226 -226
  351. package/test/entities.test.js +711 -711
  352. package/test/entity-recall.test.js +179 -179
  353. package/test/epistemic.test.js +325 -325
  354. package/test/failure-query.test.js +147 -147
  355. package/test/failure-retention.test.js +105 -105
  356. package/test/fnew-0112.test.js +311 -311
  357. package/test/fnew-03.test.js +422 -422
  358. package/test/forget-corrections.test.js +70 -70
  359. package/test/graph-anchoring.test.js +184 -184
  360. package/test/graph-api.test.js +333 -209
  361. package/test/graph-boosted-relations.test.js +189 -189
  362. package/test/graph-inject-budget.test.js +103 -103
  363. package/test/graph-multipath.test.js +269 -269
  364. package/test/graph-passive-confirm.test.js +91 -91
  365. package/test/graph-weight-evolution.test.js +104 -104
  366. package/test/heat.test.js +175 -175
  367. package/test/helpers/dream-mock.js +86 -86
  368. package/test/helpers/peer-worker.mjs +25 -25
  369. package/test/helpers/runtime-source.js +60 -60
  370. package/test/helpers/tar-builder.js +80 -80
  371. package/test/helpers/write-admission-samples.js +312 -312
  372. package/test/hot-memory.test.js +259 -211
  373. package/test/image-description.test.js +271 -0
  374. package/test/image-memory.test.js +170 -170
  375. package/test/inject-content-cap.test.js +91 -91
  376. package/test/inject-first-round-bm25.test.js +89 -89
  377. package/test/inject-heat.test.js +77 -77
  378. package/test/inject-parent-gate.test.js +134 -106
  379. package/test/inject-pin-explicit.test.js +300 -300
  380. package/test/inject-pin-vector-crowd.test.js +225 -225
  381. package/test/inject-pools.test.js +195 -195
  382. package/test/inject-recall.test.js +172 -172
  383. package/test/inject-rotation.test.js +161 -161
  384. package/test/inject.test.js +553 -494
  385. package/test/issue-617-step1-query-and-fusion.test.js +361 -361
  386. package/test/kb-api-wiring.test.js +128 -128
  387. package/test/kb-collections.test.js +272 -272
  388. package/test/kb-routes.test.js +379 -379
  389. package/test/lang.test.js +98 -98
  390. package/test/lastrunat-persist.test.js +101 -101
  391. package/test/lib-smoke.test.js +116 -116
  392. package/test/llm-audit.test.js +815 -815
  393. package/test/llm-message-source.test.js +207 -207
  394. package/test/local-embedder.test.js +292 -292
  395. package/test/maintenance.test.js +501 -501
  396. package/test/mcp-stdio.test.js +385 -385
  397. package/test/mint-source.test.js +311 -311
  398. package/test/mirror-dirty.test.js +424 -424
  399. package/test/mirror-edit-digest.test.js +187 -187
  400. package/test/mirror-generation.test.js +499 -499
  401. package/test/mirror-types.test.js +208 -208
  402. package/test/mirror.test.js +249 -249
  403. package/test/narrative-bars.test.js +162 -162
  404. package/test/organize-tool.test.js +232 -232
  405. package/test/organize.test.js +418 -418
  406. package/test/panel-chart-scale.test.js +90 -0
  407. package/test/panel-tokens.test.js +245 -0
  408. package/test/peak-hours-observability.test.js +70 -70
  409. package/test/peer-blockers.test.js +193 -193
  410. package/test/persona-addressing.test.js +83 -83
  411. package/test/persona-api.test.js +172 -172
  412. package/test/persona-by-session.test.js +568 -568
  413. package/test/persona-flag.test.js +36 -36
  414. package/test/persona-inject.test.js +145 -145
  415. package/test/persona-settings.test.js +198 -198
  416. package/test/pipeline-activities.test.js +155 -155
  417. package/test/pipeline-attribution.test.js +175 -175
  418. package/test/pipeline-command.test.js +243 -243
  419. package/test/pipeline-confirm.test.js +148 -148
  420. package/test/pipeline-exec.test.js +172 -172
  421. package/test/pipeline-nudge-auto.test.js +248 -248
  422. package/test/pipeline-nudge.test.js +1278 -1278
  423. package/test/pipeline-observations.test.js +157 -157
  424. package/test/pipeline-observe.test.js +127 -127
  425. package/test/pipeline-r1r2.test.js +278 -278
  426. package/test/pipeline-runner.test.js +468 -468
  427. package/test/pipeline-runs.test.js +767 -767
  428. package/test/pipeline.test.js +636 -636
  429. package/test/placement.test.js +36 -36
  430. package/test/policy-epoch.test.js +259 -259
  431. package/test/pre-inject-gate.test.js +444 -444
  432. package/test/profile-extract.test.js +269 -269
  433. package/test/profile-facts.test.js +492 -492
  434. package/test/prompt-stance.test.js +128 -128
  435. package/test/provenance-http.test.js +367 -367
  436. package/test/publish-gate.test.js +272 -272
  437. package/test/quality-backfill.test.js +290 -290
  438. package/test/quality-filter.test.js +295 -295
  439. package/test/readme-claims.test.js +113 -113
  440. package/test/reasoning-effort.test.js +752 -752
  441. package/test/recall-anti-update.test.js +82 -82
  442. package/test/recall-evals.test.js +253 -253
  443. package/test/recall-layer.test.js +326 -326
  444. package/test/recall-retention.test.js +128 -128
  445. package/test/recall-stats.test.js +274 -274
  446. package/test/receipt-chain.test.js +451 -451
  447. package/test/reclaim-http.test.js +209 -209
  448. package/test/reflection-update-gate.test.js +129 -129
  449. package/test/reflection.test.js +226 -226
  450. package/test/reindex-backfill.test.js +475 -475
  451. package/test/reindex-scheduler.test.js +369 -369
  452. package/test/release-docs.test.js +156 -136
  453. package/test/release-notes.test.js +265 -240
  454. package/test/release-workflow.test.js +93 -93
  455. package/test/reranker-single-logit.test.js +73 -73
  456. package/test/reranker.test.js +197 -197
  457. package/test/resident-status.test.js +83 -83
  458. package/test/route-policy.test.js +113 -113
  459. package/test/runtime-adopt.test.js +206 -206
  460. package/test/runtime-cli.test.js +89 -89
  461. package/test/runtime-closure.test.js +193 -193
  462. package/test/runtime-download.test.js +302 -302
  463. package/test/runtime-layout.test.js +163 -163
  464. package/test/runtime-loader.test.js +255 -255
  465. package/test/runtime-manifest.test.js +159 -159
  466. package/test/runtime-model-fetch.test.js +348 -348
  467. package/test/runtime-provision.test.js +101 -101
  468. package/test/runtime-tarball.test.js +81 -81
  469. package/test/runtime-verify.test.js +319 -319
  470. package/test/scope-candidates.test.js +491 -491
  471. package/test/scope-distill-stamp.test.js +134 -134
  472. package/test/scope-explicit.test.js +452 -452
  473. package/test/scope-inject-soft.test.js +106 -106
  474. package/test/scope-optional-service.test.js +110 -110
  475. package/test/scope-retrieval.test.js +197 -197
  476. package/test/scope-state.test.js +610 -610
  477. package/test/scope-storage.test.js +255 -255
  478. package/test/scope-strict.test.js +367 -367
  479. package/test/search-fusion.test.js +90 -90
  480. package/test/security-doc.test.js +188 -178
  481. package/test/semantic.test.js +124 -124
  482. package/test/sensitive-scan.test.js +251 -251
  483. package/test/serve-bin.test.js +121 -121
  484. package/test/serve.test.js +258 -258
  485. package/test/service-search.test.js +174 -174
  486. package/test/service.test.js +410 -410
  487. package/test/session-gate.test.js +264 -264
  488. package/test/session-usage.test.js +317 -317
  489. package/test/settings.test.js +273 -273
  490. package/test/share-foreign-rows.test.js +144 -144
  491. package/test/share-http.test.js +144 -144
  492. package/test/share-import.test.js +577 -577
  493. package/test/share-imported-guard.test.js +311 -311
  494. package/test/share-imported-identity.test.js +111 -111
  495. package/test/share-pack.test.js +511 -511
  496. package/test/share-receive-http.test.js +756 -756
  497. package/test/share-routes.test.js +337 -337
  498. package/test/share-store.test.js +133 -133
  499. package/test/share-validate.test.js +101 -101
  500. package/test/skip-invalid-restore.test.js +262 -262
  501. package/test/sleep-action-set.test.js +441 -441
  502. package/test/sleep-catchup.test.js +315 -315
  503. package/test/sleep-failure-backoff.test.js +156 -156
  504. package/test/sleep-heat.test.js +174 -174
  505. package/test/sleep-scheduler-rearm.test.js +89 -89
  506. package/test/sleep.test.js +1455 -1418
  507. package/test/standalone-api.test.js +1344 -1344
  508. package/test/store-vector-cache.test.js +98 -98
  509. package/test/store-write-path-columns.test.js +191 -191
  510. package/test/store.test.js +744 -744
  511. package/test/stress.test.js +209 -209
  512. package/test/summarize-occurred-at.test.js +127 -127
  513. package/test/summarize-parse-diagnostics.test.js +75 -75
  514. package/test/summarize-reasoning-effort.test.js +189 -189
  515. package/test/summarize.test.js +2251 -2251
  516. package/test/supersede-state-tracking.test.js +394 -394
  517. package/test/test-count-sync.test.js +71 -71
  518. package/test/tool-state-ignore.test.js +65 -65
  519. package/test/tools-dto-schema-matrix.test.js +398 -398
  520. package/test/tools-memory-get-schema.test.js +65 -65
  521. package/test/tools.test.js +585 -585
  522. package/test/updated-at-semantics.test.js +113 -113
  523. package/test/user-settings-preview.test.js +127 -127
  524. package/test/user-settings-segments.test.js +527 -527
  525. package/test/vector-index.test.js +334 -334
  526. package/test/version-check.test.js +152 -152
  527. package/test/webServer-optional.test.js +82 -82
  528. package/test/wiki-api.test.js +734 -627
  529. package/test/wiki-claims.test.js +194 -0
  530. package/test/wiki-cli-hint.test.js +118 -118
  531. package/test/wiki-inject.test.js +265 -265
  532. package/test/wiki-partition.test.js +112 -112
  533. package/test/wiki-plan.test.js +80 -80
  534. package/test/wiki-provenance.test.js +202 -0
  535. package/test/wiki-queries.test.js +398 -277
  536. package/test/wiki-scan.test.js +208 -208
  537. package/test/wiki-store.test.js +190 -190
  538. package/test/wiki-t0.test.js +456 -380
  539. package/test/wiki-t1-jobs.test.js +125 -125
  540. package/test/wiki-t1.test.js +460 -235
  541. package/test/wiki-tools.test.js +176 -176
  542. package/test/workflow-guards.test.js +155 -155
  543. package/test/write-admission.test.js +668 -668
@@ -1,54 +1,54 @@
1
- // #254 写入准入的确定性计量锚:内容归一化哈希(exact duplicate 判定)。
2
- //
3
- // 为什么用哈希而不是相似度:计量阶段要的是一个零成本、可复算、不留争议的判据。
4
- // 相似度阈值两边都是误判——同一件事换个说法就掉到线下,不同的事共享话题词又顶到
5
- // 线上,阈值往哪边挪都只是换一种错法(#254 拍板:计量信号用内容哈希)。哈希只认
6
- // 「归一化后逐字节相同」,算不出来就只有一种解释。
7
- //
8
- // 但它不等于「原文逐字节相同」:归一化会折掉格式,也会折掉标点,于是 `版本 3.5` 与
9
- // `版本 35`、`a-b` 与 `ab` 落同一个键。折叠范围(大小写 / 空白 / 标点)是口径本身
10
- // 定的,#254 已拍板——误报面在计量阶段可接受(只标记、不拦截),但「命中即精确重复」
11
- // 这句话别升级成「命中即内容相同」。要更窄的判据就得改归一化口径,而那要带存量重算。
12
- //
13
- // 归一化口径一次定死(NFKC → 小写 → 去标点 → 空白折叠 → trim),动机是让「只差
14
- // 格式」的两次写入落在同一个键上:全角/半角、大小写、行内换行与缩进、句末标点都
15
- // 不该让同一件事变成两条。反过来它不折叠同义词、不排序词序——那些只能靠相似度,
16
- // 而相似度已判定不可用于本信号。
17
- //
18
- // 改口径必须带存量重算策略:memories.content_hash 是派生列,口径一变,库里已有的
19
- // 值全部按旧口径算——补 NULL 修不好,只能整列重算(UPDATE 全表 + 重建索引)。
20
- // 所以口径只能在这里改,且改要单独成批,不要混进别的改动里。
21
- //
22
- // 空内容(标题与正文归一后都为空)返回 null:这类写入没有可比内容,落 NULL 让它们
23
- // 不互相匹配成「全是重复」。
24
- //
25
- // 另有一处形状相近、口径不同的哈希:service.js 里镜像人工编辑的 digest 校验(两处)
26
- // 用 sha256(title\0content),那里**不**归一化(要逐字节保真)。两把哈希用途不同,别互换。
27
- import { createHash } from "node:crypto";
28
-
29
- /**
30
- * 归一化一段文本用于内容比对(口径见文件头)。
31
- * @param {unknown} value
32
- * @returns {string}
33
- */
34
- export function normalizeForHash(value) {
35
- return String(value ?? "")
36
- .normalize("NFKC")
37
- .toLowerCase()
38
- .replace(/\p{P}/gu, "")
39
- .replace(/\s+/g, " ")
40
- .trim();
41
- }
42
-
43
- /**
44
- * 一行记忆的内容锚:标题与正文分别归一后用 NUL 拼接再取 sha256(十六进制全串)。
45
- * NUL 分隔是防拼接歧义——('ab','c') 与 ('a','bc') 不能落到同一个键上。
46
- * @param {{title?: string, content?: string}|null|undefined} memory
47
- * @returns {string|null} 归一后无内容时返回 null
48
- */
49
- export function contentHashOf(memory) {
50
- const title = normalizeForHash(memory?.title);
51
- const content = normalizeForHash(memory?.content);
52
- if (!title && !content) return null;
53
- return createHash("sha256").update(`${title}\u0000${content}`).digest("hex");
54
- }
1
+ // #254 写入准入的确定性计量锚:内容归一化哈希(exact duplicate 判定)。
2
+ //
3
+ // 为什么用哈希而不是相似度:计量阶段要的是一个零成本、可复算、不留争议的判据。
4
+ // 相似度阈值两边都是误判——同一件事换个说法就掉到线下,不同的事共享话题词又顶到
5
+ // 线上,阈值往哪边挪都只是换一种错法(#254 拍板:计量信号用内容哈希)。哈希只认
6
+ // 「归一化后逐字节相同」,算不出来就只有一种解释。
7
+ //
8
+ // 但它不等于「原文逐字节相同」:归一化会折掉格式,也会折掉标点,于是 `版本 3.5` 与
9
+ // `版本 35`、`a-b` 与 `ab` 落同一个键。折叠范围(大小写 / 空白 / 标点)是口径本身
10
+ // 定的,#254 已拍板——误报面在计量阶段可接受(只标记、不拦截),但「命中即精确重复」
11
+ // 这句话别升级成「命中即内容相同」。要更窄的判据就得改归一化口径,而那要带存量重算。
12
+ //
13
+ // 归一化口径一次定死(NFKC → 小写 → 去标点 → 空白折叠 → trim),动机是让「只差
14
+ // 格式」的两次写入落在同一个键上:全角/半角、大小写、行内换行与缩进、句末标点都
15
+ // 不该让同一件事变成两条。反过来它不折叠同义词、不排序词序——那些只能靠相似度,
16
+ // 而相似度已判定不可用于本信号。
17
+ //
18
+ // 改口径必须带存量重算策略:memories.content_hash 是派生列,口径一变,库里已有的
19
+ // 值全部按旧口径算——补 NULL 修不好,只能整列重算(UPDATE 全表 + 重建索引)。
20
+ // 所以口径只能在这里改,且改要单独成批,不要混进别的改动里。
21
+ //
22
+ // 空内容(标题与正文归一后都为空)返回 null:这类写入没有可比内容,落 NULL 让它们
23
+ // 不互相匹配成「全是重复」。
24
+ //
25
+ // 另有一处形状相近、口径不同的哈希:service.js 里镜像人工编辑的 digest 校验(两处)
26
+ // 用 sha256(title\0content),那里**不**归一化(要逐字节保真)。两把哈希用途不同,别互换。
27
+ import { createHash } from "node:crypto";
28
+
29
+ /**
30
+ * 归一化一段文本用于内容比对(口径见文件头)。
31
+ * @param {unknown} value
32
+ * @returns {string}
33
+ */
34
+ export function normalizeForHash(value) {
35
+ return String(value ?? "")
36
+ .normalize("NFKC")
37
+ .toLowerCase()
38
+ .replace(/\p{P}/gu, "")
39
+ .replace(/\s+/g, " ")
40
+ .trim();
41
+ }
42
+
43
+ /**
44
+ * 一行记忆的内容锚:标题与正文分别归一后用 NUL 拼接再取 sha256(十六进制全串)。
45
+ * NUL 分隔是防拼接歧义——('ab','c') 与 ('a','bc') 不能落到同一个键上。
46
+ * @param {{title?: string, content?: string}|null|undefined} memory
47
+ * @returns {string|null} 归一后无内容时返回 null
48
+ */
49
+ export function contentHashOf(memory) {
50
+ const title = normalizeForHash(memory?.title);
51
+ const content = normalizeForHash(memory?.content);
52
+ if (!title && !content) return null;
53
+ return createHash("sha256").update(`${title}\u0000${content}`).digest("hex");
54
+ }
package/src/continuity.js CHANGED
@@ -1,258 +1,258 @@
1
- import { createUserMessage } from "@deepseek-ai/dsh-llm";
2
- // Issue #611:图片块的文本口径(占位,不是空串),与 summarize.js 共用一份。
3
- import { contentToText } from "./attachment-text.js";
4
-
5
- // #249 N3(压缩边缘双落点):上下文即将大幅精简前,抢救「正在做什么」。
6
- //
7
- // 为什么是这个形状(#249 §4.4 / §6.2 / §11;维护者 2026-09-24 拍板「都同意,开工」):
8
- //
9
- // 1. **必须双落点**。宿主的压缩摘要器只看对话里的内容:压缩时宿主按固定字段模板
10
- // 重建对话,只放系统提示段的东西不进这次重建,等于白写。所以除了落库,还要把同
11
- // 一条连续性快照追加成靠近序列末尾的消息。DSH 没有 in-memory 消息改写钩子
12
- // (§7 已核),因此这是「注入 + 序号引用寻址」,不是改写历史。
13
- // 2. **落库落成提案,不落成记忆行**。边缘产出直接进 memories,长会话会攒出第 N 条
14
- // 同主题条目(#275 记的失败形态);转正通道与 #254 的二次确认共用一套、阶段二才
15
- // 打开,本批只写 pending 行。
16
- // 3. **全程不调模型**。三个字段是确定性抽取 + 截断(口径见 deriveContinuity),判定
17
- // 也只用本地字符串比较;门控成本为零。
18
- // 4. **触发器就是宿主真的压缩**,不自定一套阈值。宿主在 `agent/pre-step`(压力)与
19
- // `agent/request-error`(溢出)两处触发压缩,我们只订阅压缩事件
20
- // (`compaction/*` 一族,都在 @deepseek-ai/dsh-session 的事件白名单里
21
- // `lib/types/known-event-types.js:31-34`)。自定阈值会与宿主口径漂移,还多一份没
22
- // 人校准的参数;「压缩边缘」本来就有宿主自己下的定义。
23
- // **但发过压缩事件不等于这段历史真的被折叠了** —— 压缩插件在每一步都会试一次,
24
- // 失败时没有任何东西需要抢救。记账口径见 isCompactionEdge。
25
- //
26
- // 落点顺序(为什么 pre-step 里挂得住):宿主的压缩插件在它自己的 pre-step 监听器里先
27
- // `await compactIfNeeded(...)` 再 `return next()`,所以我们的监听器拿到 `next()` 结果
28
- // 时压缩事件已经落库;而我们返回的 `decision.messages` 由宿主在本步末尾以
29
- // `surfaceOp: "append"` 追加(`@deepseek-ai/dsh-agent-loop/lib/index.js:1046`),晚于
30
- // 压缩的 `surfaceOp: "replace"`(`dsh-compaction-basic/lib/index.js:649`)——落点天然
31
- // 在压缩之后、靠近序列末尾。两条注册顺序都成立(谁先谁后,我们的 `await next()` 都在
32
- // 压缩工作之后返回)。
33
-
34
- /** 提案的 kind(唯一键的一半):一次会话里"压缩边缘"这一类只留一条。 */
35
- export const CONTINUITY_KIND = "compaction-edge";
36
- /** 注入消息的统一前缀:机械校验与「不变不重复」判重都靠它(#249 §6.3)。 */
37
- export const CONTINUITY_NOTICE_PREFIX = "[dsh-mneme continuity]";
38
- /** 单字段字符上限:抽取是截断,不是摘要(改口径不需要动调用方)。 */
39
- export const CONTINUITY_FIELD_MAX = 200;
40
- /** 整条注入消息的字符上限。比 §6.3 的 160B 单行提醒宽:它是结构化快照,不是一句话提醒。 */
41
- export const CONTINUITY_NOTICE_MAX = 900;
42
- /** 边缘表的兜底上限:只留序号、且有界——压缩完就没有下一次 pre-step 的会话不走消费路径。 */
43
- const MAX_TRACKED_EDGES = 50;
44
-
45
- /**
46
- * 什么算「一个真的边缘」= 这段历史**真的被折叠了**。
47
- *
48
- * 这跟「有人发过压缩事件」不是同一个问题。压缩插件在**每一步**都会试一次压缩
49
- * (`agent/pre-step` 里的 `compactIfNeeded`),所以 `compaction/start` 只在说
50
- * 「有人试过」;尝试失败时没有任何东西需要抢救。按「试过就救」记账会得到一个
51
- * **每步都触发**的触发器 —— 实测(2026-10-14,本机两个长会话、12,000+ 事件,
52
- * 代理层把 dsh 原生压缩 100% 拒掉):
53
- *
54
- * · 按 `start|summary|end` 记账:1,287 次置位 / 359 次注入(4c28eaaa:2,895 / 625)
55
- * · 按「真落地」记账: 39 次置位 / 32 次注入(4c28eaaa: 161 / 74)→ 降 91% / 88%
56
- *
57
- * 三种「真落地」:
58
- * - `compaction/summary`:宿主压缩成功才落(dsh-compaction-basic 的
59
- * `commitCompactionBody`,与成功路同步提交;失败路不落)。
60
- * - `compaction/prune`:宿主把旧事件折叠出表面(dsh-compaction-tool-result-pruner),
61
- * 是「表面真的变短了」最直接的证据。
62
- * - `compaction/end`:**成败两条路都发**(同一份源码:失败路
63
- * `append("compaction/end", { ...lifecycle, error: errorChain(error) })`),
64
- * 所以只有**不带 error** 的那条才算落地。
65
- */
66
- function isCompactionEdge(event) {
67
- const type = event?.type;
68
- if (type === "compaction/summary" || type === "compaction/prune") return true;
69
- if (type !== "compaction/end") return false;
70
- const error = event?.data?.error;
71
- return error === undefined || error === null || error === "";
72
- }
73
-
74
- // 与 summarize.js 的 collectMessages 同一个口径:只取公开文本块,reasoning 私有推理
75
- // 不进快照(快照可能被宿主重建进摘要)。刻意副本而不是导出——那边是会话蒸馏的内部
76
- // 细节,两边取文本的理由不同。
77
- //
78
- // Issue #611:图片块不再返回空串,改走 attachment-text 的占位口径。快照的全部意义
79
- // 就是「压缩后还能看出刚才在干什么」,而一张没被记下的截图恰恰是最容易丢的那部分
80
- // 上下文——用户在等你看图,压缩后却只剩一句「看这个」,这种快照比没有更误导。
81
- function textOf(content) {
82
- return contentToText(content);
83
- }
84
-
85
- // DSH 0.1.2-rc.1 起 Session 用 snapshotEvents(),兼容旧版 .events。这是**全量日志**
86
- // (append-only,含已被 surfaceOp:"replace" 折叠出表面的旧事件)——抽取要的正是全量:
87
- // 被压缩折叠掉的最后一条真实用户消息,也曾是"正在做什么"。
88
- function sessionEvents(session) {
89
- let events = typeof session?.snapshotEvents === "function" ? session.snapshotEvents() : session?.events;
90
- // 与 summarize.js 的同名兼容层同形:snapshotEvents 不可用或返回非数组时退回 .events。
91
- if (!Array.isArray(events)) events = session?.events;
92
- return Array.isArray(events) ? events : [];
93
- }
94
-
95
- // 「当前表面」= `session.surface.nodes`(只存活节点的 seq,事件体在上面那份日志里)。
96
- // 判重必须按表面而不是全量日志:旧注入还在日志里、但已被折叠出表面,照日志判重会让
97
- // 这一次压缩后该补的注入被静默跳过——双落点的 ② 就空了一次,而日志里看不出发生过。
98
- // 宿主没有表面投影(旧版)时退回全量:宁可少追加一次,也不在表面里重复追加同一份文本。
99
- function surfaceEvents(session) {
100
- const events = sessionEvents(session);
101
- let nodes;
102
- // 宿主的 `surface.nodes` 是会抛的 getter(它自己用过、之后又被移除或替换的 message
103
- // projection 会让宿主内部的 `_assertProjections` 抛)。判重是锦上添花的一步:读不到就
104
- // 退回全量,别让一个可选的抢救功能因为读宿主状态失败而把 agent 的这一步变失败。
105
- try {
106
- nodes = session?.surface?.nodes;
107
- } catch {
108
- return events;
109
- }
110
- if (!Array.isArray(nodes)) return events;
111
- const inSurface = new Set(nodes);
112
- return events.filter((event) => inSurface.has(event?.seq));
113
- }
114
-
115
- /**
116
- * 抽取连续性三字段(纯函数、无 LLM、无副作用,供测试直接钉住口径):
117
- * - `currentWork`:最近一条**真实** user/message(插件注入与子代理上报不算用户指令),
118
- * 取头部 CONTINUITY_FIELD_MAX 字符——"正在做什么"就是最后那条指令。
119
- * - `nextStep`:最近一条 assistant/message 的**尾部**同长度——"下一步"活在末尾那
120
- * 一段/最后一句里,取头会把开场白带进来。
121
- * - `openQuestions`:恒 null。确定性抽取判不出「哪些问题还没解决」,硬用反引号/问号
122
- * 猜会给出似是而非的字段;这个字段留给转正通道与人工补(不是所有字段都必须自动
123
- * 填满——宁可空着,也不编造)。空字段在注入文本里如实标 (none)。
124
- */
125
- export function deriveContinuity(session, fieldMax = CONTINUITY_FIELD_MAX) {
126
- let currentWork = null;
127
- let nextStep = null;
128
- for (const event of sessionEvents(session)) {
129
- const data = event?.data ?? {};
130
- if (event?.type === "user/message") {
131
- // 只认用户自己写的:source.kind 缺省(旧事件)或 "user"。插件消息(我们自己的
132
- // 注入、其它插件)与子代理上报都不是"当前指令"。
133
- const kind = data?.source?.kind;
134
- if (kind !== undefined && kind !== "user") continue;
135
- const text = textOf(data.content).trim();
136
- if (text) currentWork = text.slice(0, fieldMax);
137
- } else if (event?.type === "assistant/message") {
138
- const text = textOf(data?.message?.content).trim();
139
- if (text) nextStep = text.slice(-fieldMax);
140
- }
141
- }
142
- return { currentWork, nextStep, openQuestions: null };
143
- }
144
-
145
- /** 单行化:字段里的换行会把「靠近末尾的一条消息」摊成多行,也破坏 §6.3 的单行约定。 */
146
- function oneLine(text) {
147
- return typeof text === "string" ? text.replace(/\s*\n\s*/g, " ").trim() : "";
148
- }
149
-
150
- /** 渲染注入文本(纯函数):统一前缀 + 三个固定字段(#249 §6.2)。 */
151
- export function renderContinuityNotice(fields, noticeMax = CONTINUITY_NOTICE_MAX) {
152
- const body = [
153
- `${CONTINUITY_NOTICE_PREFIX} Context compaction happened in this session; here is the continuity snapshot ` +
154
- "recorded so it survives outside the transcript (a proposal — not yet in the memory store):",
155
- `current_work: ${oneLine(fields?.currentWork) || "(none)"}`,
156
- `next_step: ${oneLine(fields?.nextStep) || "(none)"}`,
157
- `open_questions: ${oneLine(fields?.openQuestions) || "(none)"}`
158
- ].join("\n");
159
- return body.length > noticeMax ? body.slice(0, noticeMax) : body;
160
- }
161
-
162
- /** 表面上是否已经有同一条注入(「不变不重复」,#249 §6.5):按前缀 + 全文比较,
163
- * 不做语义判定——没有改写钩子,能做的只有"同一份文本不追加第二次"。 */
164
- function noticeAlreadyInSurface(session, text) {
165
- return surfaceEvents(session).some((event) => {
166
- if (event?.type !== "user/message") return false;
167
- if (event?.data?.source?.plugin !== "dsh-mneme") return false;
168
- const content = textOf(event?.data?.content);
169
- return content === text;
170
- });
171
- }
172
-
173
- /**
174
- * 挂两条监听(#249 §7 的 `agent/pre-step` 触发位 + 压缩事件面),返回 { dispose }。
175
- *
176
- * `store` 直接注入:本模块只写提案表、不碰检索/嵌入,没有用到 service 的任何能力。
177
- * 调用方负责父/子开关(`autoInject` + `continuityRescueEnabled`),本函数另检查逐会话
178
- * 无痕闸门;保持"挂上就是开、命中会话就不处理"的单一口径。
179
- */
180
- export function createContinuityRescue(ctx, store, sessionGate = null) {
181
- // 待处理的边缘:sessionId → 压缩事件序号。**真落地**的压缩事件到达时置位,下一次 pre-step 消费后
182
- // 删除(同一个边缘绝不注入第二次)。只留序号、不留 Session:插件在宿主进程里只 apply
183
- // 一次、服务所有会话,握着 Session 就是握着它的全量日志不放——压缩完就收工、不再有
184
- // pre-step 是常见路径,这些条目永远走不到消费路径上。
185
- const edge = new Map();
186
-
187
- const unsubscribe = ctx.on("session/event", (session, event) => {
188
- if (sessionGate?.isOff(session)) {
189
- if (session?.id) edge.delete(session.id);
190
- return;
191
- }
192
- if (!isCompactionEdge(event)) return;
193
- if (!session?.id) return;
194
- if (!edge.has(session.id) && edge.size >= MAX_TRACKED_EDGES) {
195
- // 兜底淘汰最旧的(Map 是插入序):这里漏掉最坏也只少一次注入,不会无界增长。
196
- edge.delete(edge.keys().next().value);
197
- }
198
- // 同一轮可能出现多条落地事件(prune 与 end 并存),后到的覆盖前一个:留着最后一个,
199
- // 序号即触发证据。
200
- edge.set(session.id, typeof event.seq === "number" ? event.seq : null);
201
- });
202
-
203
- const offStep = ctx.on("agent/pre-step", async (payload, next) => {
204
- const decision = await next();
205
- // reject 是"这一步不该发生",往里面塞消息没有意义;未知形状原样放行。
206
- if (decision?.kind !== "enter") return decision;
207
- const session = payload?.agent?.session;
208
- if (sessionGate?.isOff(session)) {
209
- if (session?.id) edge.delete(session.id);
210
- return decision;
211
- }
212
- const sessionId = session?.id;
213
- if (!sessionId) return decision;
214
- if (!edge.has(sessionId)) return decision;
215
- const edgeSeq = edge.get(sessionId);
216
- edge.delete(sessionId);
217
-
218
- // 抽取就地用 payload 上的这个 session(与置位时同一个 id),不从边缘表里握对象引用。
219
- const fields = deriveContinuity(session);
220
- // 落库先于注入:提案是"脱离对话独立存活"的那一半。写不进去不算宿主这一步的失败——
221
- // 可选插件的可选能力把 agent 的一步带崩,比丢一次抢救严重得多(本函数的不变量)。
222
- try {
223
- const saved = store.saveContinuityProposal({
224
- sessionId,
225
- kind: CONTINUITY_KIND,
226
- currentWork: fields.currentWork,
227
- nextStep: fields.nextStep,
228
- openQuestions: fields.openQuestions,
229
- edgeSeq
230
- });
231
- // 弃新是"静默失效"的那一类:不报出来,运维与 §8 的触发率口径都会把它当成没触发。
232
- if (saved?.dropped) {
233
- ctx.logger?.warn?.(`[dsh-mneme] continuity: pending queue full, dropped the edge for session ${sessionId}`);
234
- }
235
- } catch (error) {
236
- ctx.logger?.warn?.(`[dsh-mneme] continuity proposal not recorded: ${String(error)}`);
237
- }
238
-
239
- const text = renderContinuityNotice(fields);
240
- if (noticeAlreadyInSurface(session, text)) return decision;
241
- const messages = Array.isArray(decision.messages) ? decision.messages : [];
242
- return {
243
- ...decision,
244
- messages: [
245
- ...messages,
246
- createUserMessage({ content: [{ type: "text", text }], source: { kind: "plugin:dsh-mneme", plugin: "dsh-mneme" } })
247
- ]
248
- };
249
- });
250
-
251
- return {
252
- dispose() {
253
- unsubscribe?.();
254
- offStep?.();
255
- edge.clear();
256
- }
257
- };
258
- }
1
+ import { createUserMessage } from "@deepseek-ai/dsh-llm";
2
+ // Issue #611:图片块的文本口径(占位,不是空串),与 summarize.js 共用一份。
3
+ import { contentToText } from "./attachment-text.js";
4
+
5
+ // #249 N3(压缩边缘双落点):上下文即将大幅精简前,抢救「正在做什么」。
6
+ //
7
+ // 为什么是这个形状(#249 §4.4 / §6.2 / §11;维护者 2026-09-24 拍板「都同意,开工」):
8
+ //
9
+ // 1. **必须双落点**。宿主的压缩摘要器只看对话里的内容:压缩时宿主按固定字段模板
10
+ // 重建对话,只放系统提示段的东西不进这次重建,等于白写。所以除了落库,还要把同
11
+ // 一条连续性快照追加成靠近序列末尾的消息。DSH 没有 in-memory 消息改写钩子
12
+ // (§7 已核),因此这是「注入 + 序号引用寻址」,不是改写历史。
13
+ // 2. **落库落成提案,不落成记忆行**。边缘产出直接进 memories,长会话会攒出第 N 条
14
+ // 同主题条目(#275 记的失败形态);转正通道与 #254 的二次确认共用一套、阶段二才
15
+ // 打开,本批只写 pending 行。
16
+ // 3. **全程不调模型**。三个字段是确定性抽取 + 截断(口径见 deriveContinuity),判定
17
+ // 也只用本地字符串比较;门控成本为零。
18
+ // 4. **触发器就是宿主真的压缩**,不自定一套阈值。宿主在 `agent/pre-step`(压力)与
19
+ // `agent/request-error`(溢出)两处触发压缩,我们只订阅压缩事件
20
+ // (`compaction/*` 一族,都在 @deepseek-ai/dsh-session 的事件白名单里
21
+ // `lib/types/known-event-types.js:31-34`)。自定阈值会与宿主口径漂移,还多一份没
22
+ // 人校准的参数;「压缩边缘」本来就有宿主自己下的定义。
23
+ // **但发过压缩事件不等于这段历史真的被折叠了** —— 压缩插件在每一步都会试一次,
24
+ // 失败时没有任何东西需要抢救。记账口径见 isCompactionEdge。
25
+ //
26
+ // 落点顺序(为什么 pre-step 里挂得住):宿主的压缩插件在它自己的 pre-step 监听器里先
27
+ // `await compactIfNeeded(...)` 再 `return next()`,所以我们的监听器拿到 `next()` 结果
28
+ // 时压缩事件已经落库;而我们返回的 `decision.messages` 由宿主在本步末尾以
29
+ // `surfaceOp: "append"` 追加(`@deepseek-ai/dsh-agent-loop/lib/index.js:1046`),晚于
30
+ // 压缩的 `surfaceOp: "replace"`(`dsh-compaction-basic/lib/index.js:649`)——落点天然
31
+ // 在压缩之后、靠近序列末尾。两条注册顺序都成立(谁先谁后,我们的 `await next()` 都在
32
+ // 压缩工作之后返回)。
33
+
34
+ /** 提案的 kind(唯一键的一半):一次会话里"压缩边缘"这一类只留一条。 */
35
+ export const CONTINUITY_KIND = "compaction-edge";
36
+ /** 注入消息的统一前缀:机械校验与「不变不重复」判重都靠它(#249 §6.3)。 */
37
+ export const CONTINUITY_NOTICE_PREFIX = "[dsh-mneme continuity]";
38
+ /** 单字段字符上限:抽取是截断,不是摘要(改口径不需要动调用方)。 */
39
+ export const CONTINUITY_FIELD_MAX = 200;
40
+ /** 整条注入消息的字符上限。比 §6.3 的 160B 单行提醒宽:它是结构化快照,不是一句话提醒。 */
41
+ export const CONTINUITY_NOTICE_MAX = 900;
42
+ /** 边缘表的兜底上限:只留序号、且有界——压缩完就没有下一次 pre-step 的会话不走消费路径。 */
43
+ const MAX_TRACKED_EDGES = 50;
44
+
45
+ /**
46
+ * 什么算「一个真的边缘」= 这段历史**真的被折叠了**。
47
+ *
48
+ * 这跟「有人发过压缩事件」不是同一个问题。压缩插件在**每一步**都会试一次压缩
49
+ * (`agent/pre-step` 里的 `compactIfNeeded`),所以 `compaction/start` 只在说
50
+ * 「有人试过」;尝试失败时没有任何东西需要抢救。按「试过就救」记账会得到一个
51
+ * **每步都触发**的触发器 —— 实测(2026-10-14,本机两个长会话、12,000+ 事件,
52
+ * 代理层把 dsh 原生压缩 100% 拒掉):
53
+ *
54
+ * · 按 `start|summary|end` 记账:1,287 次置位 / 359 次注入(4c28eaaa:2,895 / 625)
55
+ * · 按「真落地」记账: 39 次置位 / 32 次注入(4c28eaaa: 161 / 74)→ 降 91% / 88%
56
+ *
57
+ * 三种「真落地」:
58
+ * - `compaction/summary`:宿主压缩成功才落(dsh-compaction-basic 的
59
+ * `commitCompactionBody`,与成功路同步提交;失败路不落)。
60
+ * - `compaction/prune`:宿主把旧事件折叠出表面(dsh-compaction-tool-result-pruner),
61
+ * 是「表面真的变短了」最直接的证据。
62
+ * - `compaction/end`:**成败两条路都发**(同一份源码:失败路
63
+ * `append("compaction/end", { ...lifecycle, error: errorChain(error) })`),
64
+ * 所以只有**不带 error** 的那条才算落地。
65
+ */
66
+ function isCompactionEdge(event) {
67
+ const type = event?.type;
68
+ if (type === "compaction/summary" || type === "compaction/prune") return true;
69
+ if (type !== "compaction/end") return false;
70
+ const error = event?.data?.error;
71
+ return error === undefined || error === null || error === "";
72
+ }
73
+
74
+ // 与 summarize.js 的 collectMessages 同一个口径:只取公开文本块,reasoning 私有推理
75
+ // 不进快照(快照可能被宿主重建进摘要)。刻意副本而不是导出——那边是会话蒸馏的内部
76
+ // 细节,两边取文本的理由不同。
77
+ //
78
+ // Issue #611:图片块不再返回空串,改走 attachment-text 的占位口径。快照的全部意义
79
+ // 就是「压缩后还能看出刚才在干什么」,而一张没被记下的截图恰恰是最容易丢的那部分
80
+ // 上下文——用户在等你看图,压缩后却只剩一句「看这个」,这种快照比没有更误导。
81
+ function textOf(content) {
82
+ return contentToText(content);
83
+ }
84
+
85
+ // DSH 0.1.2-rc.1 起 Session 用 snapshotEvents(),兼容旧版 .events。这是**全量日志**
86
+ // (append-only,含已被 surfaceOp:"replace" 折叠出表面的旧事件)——抽取要的正是全量:
87
+ // 被压缩折叠掉的最后一条真实用户消息,也曾是"正在做什么"。
88
+ function sessionEvents(session) {
89
+ let events = typeof session?.snapshotEvents === "function" ? session.snapshotEvents() : session?.events;
90
+ // 与 summarize.js 的同名兼容层同形:snapshotEvents 不可用或返回非数组时退回 .events。
91
+ if (!Array.isArray(events)) events = session?.events;
92
+ return Array.isArray(events) ? events : [];
93
+ }
94
+
95
+ // 「当前表面」= `session.surface.nodes`(只存活节点的 seq,事件体在上面那份日志里)。
96
+ // 判重必须按表面而不是全量日志:旧注入还在日志里、但已被折叠出表面,照日志判重会让
97
+ // 这一次压缩后该补的注入被静默跳过——双落点的 ② 就空了一次,而日志里看不出发生过。
98
+ // 宿主没有表面投影(旧版)时退回全量:宁可少追加一次,也不在表面里重复追加同一份文本。
99
+ function surfaceEvents(session) {
100
+ const events = sessionEvents(session);
101
+ let nodes;
102
+ // 宿主的 `surface.nodes` 是会抛的 getter(它自己用过、之后又被移除或替换的 message
103
+ // projection 会让宿主内部的 `_assertProjections` 抛)。判重是锦上添花的一步:读不到就
104
+ // 退回全量,别让一个可选的抢救功能因为读宿主状态失败而把 agent 的这一步变失败。
105
+ try {
106
+ nodes = session?.surface?.nodes;
107
+ } catch {
108
+ return events;
109
+ }
110
+ if (!Array.isArray(nodes)) return events;
111
+ const inSurface = new Set(nodes);
112
+ return events.filter((event) => inSurface.has(event?.seq));
113
+ }
114
+
115
+ /**
116
+ * 抽取连续性三字段(纯函数、无 LLM、无副作用,供测试直接钉住口径):
117
+ * - `currentWork`:最近一条**真实** user/message(插件注入与子代理上报不算用户指令),
118
+ * 取头部 CONTINUITY_FIELD_MAX 字符——"正在做什么"就是最后那条指令。
119
+ * - `nextStep`:最近一条 assistant/message 的**尾部**同长度——"下一步"活在末尾那
120
+ * 一段/最后一句里,取头会把开场白带进来。
121
+ * - `openQuestions`:恒 null。确定性抽取判不出「哪些问题还没解决」,硬用反引号/问号
122
+ * 猜会给出似是而非的字段;这个字段留给转正通道与人工补(不是所有字段都必须自动
123
+ * 填满——宁可空着,也不编造)。空字段在注入文本里如实标 (none)。
124
+ */
125
+ export function deriveContinuity(session, fieldMax = CONTINUITY_FIELD_MAX) {
126
+ let currentWork = null;
127
+ let nextStep = null;
128
+ for (const event of sessionEvents(session)) {
129
+ const data = event?.data ?? {};
130
+ if (event?.type === "user/message") {
131
+ // 只认用户自己写的:source.kind 缺省(旧事件)或 "user"。插件消息(我们自己的
132
+ // 注入、其它插件)与子代理上报都不是"当前指令"。
133
+ const kind = data?.source?.kind;
134
+ if (kind !== undefined && kind !== "user") continue;
135
+ const text = textOf(data.content).trim();
136
+ if (text) currentWork = text.slice(0, fieldMax);
137
+ } else if (event?.type === "assistant/message") {
138
+ const text = textOf(data?.message?.content).trim();
139
+ if (text) nextStep = text.slice(-fieldMax);
140
+ }
141
+ }
142
+ return { currentWork, nextStep, openQuestions: null };
143
+ }
144
+
145
+ /** 单行化:字段里的换行会把「靠近末尾的一条消息」摊成多行,也破坏 §6.3 的单行约定。 */
146
+ function oneLine(text) {
147
+ return typeof text === "string" ? text.replace(/\s*\n\s*/g, " ").trim() : "";
148
+ }
149
+
150
+ /** 渲染注入文本(纯函数):统一前缀 + 三个固定字段(#249 §6.2)。 */
151
+ export function renderContinuityNotice(fields, noticeMax = CONTINUITY_NOTICE_MAX) {
152
+ const body = [
153
+ `${CONTINUITY_NOTICE_PREFIX} Context compaction happened in this session; here is the continuity snapshot ` +
154
+ "recorded so it survives outside the transcript (a proposal — not yet in the memory store):",
155
+ `current_work: ${oneLine(fields?.currentWork) || "(none)"}`,
156
+ `next_step: ${oneLine(fields?.nextStep) || "(none)"}`,
157
+ `open_questions: ${oneLine(fields?.openQuestions) || "(none)"}`
158
+ ].join("\n");
159
+ return body.length > noticeMax ? body.slice(0, noticeMax) : body;
160
+ }
161
+
162
+ /** 表面上是否已经有同一条注入(「不变不重复」,#249 §6.5):按前缀 + 全文比较,
163
+ * 不做语义判定——没有改写钩子,能做的只有"同一份文本不追加第二次"。 */
164
+ function noticeAlreadyInSurface(session, text) {
165
+ return surfaceEvents(session).some((event) => {
166
+ if (event?.type !== "user/message") return false;
167
+ if (event?.data?.source?.plugin !== "dsh-mneme") return false;
168
+ const content = textOf(event?.data?.content);
169
+ return content === text;
170
+ });
171
+ }
172
+
173
+ /**
174
+ * 挂两条监听(#249 §7 的 `agent/pre-step` 触发位 + 压缩事件面),返回 { dispose }。
175
+ *
176
+ * `store` 直接注入:本模块只写提案表、不碰检索/嵌入,没有用到 service 的任何能力。
177
+ * 调用方负责父/子开关(`autoInject` + `continuityRescueEnabled`),本函数另检查逐会话
178
+ * 无痕闸门;保持"挂上就是开、命中会话就不处理"的单一口径。
179
+ */
180
+ export function createContinuityRescue(ctx, store, sessionGate = null) {
181
+ // 待处理的边缘:sessionId → 压缩事件序号。**真落地**的压缩事件到达时置位,下一次 pre-step 消费后
182
+ // 删除(同一个边缘绝不注入第二次)。只留序号、不留 Session:插件在宿主进程里只 apply
183
+ // 一次、服务所有会话,握着 Session 就是握着它的全量日志不放——压缩完就收工、不再有
184
+ // pre-step 是常见路径,这些条目永远走不到消费路径上。
185
+ const edge = new Map();
186
+
187
+ const unsubscribe = ctx.on("session/event", (session, event) => {
188
+ if (sessionGate?.isOff(session)) {
189
+ if (session?.id) edge.delete(session.id);
190
+ return;
191
+ }
192
+ if (!isCompactionEdge(event)) return;
193
+ if (!session?.id) return;
194
+ if (!edge.has(session.id) && edge.size >= MAX_TRACKED_EDGES) {
195
+ // 兜底淘汰最旧的(Map 是插入序):这里漏掉最坏也只少一次注入,不会无界增长。
196
+ edge.delete(edge.keys().next().value);
197
+ }
198
+ // 同一轮可能出现多条落地事件(prune 与 end 并存),后到的覆盖前一个:留着最后一个,
199
+ // 序号即触发证据。
200
+ edge.set(session.id, typeof event.seq === "number" ? event.seq : null);
201
+ });
202
+
203
+ const offStep = ctx.on("agent/pre-step", async (payload, next) => {
204
+ const decision = await next();
205
+ // reject 是"这一步不该发生",往里面塞消息没有意义;未知形状原样放行。
206
+ if (decision?.kind !== "enter") return decision;
207
+ const session = payload?.agent?.session;
208
+ if (sessionGate?.isOff(session)) {
209
+ if (session?.id) edge.delete(session.id);
210
+ return decision;
211
+ }
212
+ const sessionId = session?.id;
213
+ if (!sessionId) return decision;
214
+ if (!edge.has(sessionId)) return decision;
215
+ const edgeSeq = edge.get(sessionId);
216
+ edge.delete(sessionId);
217
+
218
+ // 抽取就地用 payload 上的这个 session(与置位时同一个 id),不从边缘表里握对象引用。
219
+ const fields = deriveContinuity(session);
220
+ // 落库先于注入:提案是"脱离对话独立存活"的那一半。写不进去不算宿主这一步的失败——
221
+ // 可选插件的可选能力把 agent 的一步带崩,比丢一次抢救严重得多(本函数的不变量)。
222
+ try {
223
+ const saved = store.saveContinuityProposal({
224
+ sessionId,
225
+ kind: CONTINUITY_KIND,
226
+ currentWork: fields.currentWork,
227
+ nextStep: fields.nextStep,
228
+ openQuestions: fields.openQuestions,
229
+ edgeSeq
230
+ });
231
+ // 弃新是"静默失效"的那一类:不报出来,运维与 §8 的触发率口径都会把它当成没触发。
232
+ if (saved?.dropped) {
233
+ ctx.logger?.warn?.(`[dsh-mneme] continuity: pending queue full, dropped the edge for session ${sessionId}`);
234
+ }
235
+ } catch (error) {
236
+ ctx.logger?.warn?.(`[dsh-mneme] continuity proposal not recorded: ${String(error)}`);
237
+ }
238
+
239
+ const text = renderContinuityNotice(fields);
240
+ if (noticeAlreadyInSurface(session, text)) return decision;
241
+ const messages = Array.isArray(decision.messages) ? decision.messages : [];
242
+ return {
243
+ ...decision,
244
+ messages: [
245
+ ...messages,
246
+ createUserMessage({ content: [{ type: "text", text }], source: { kind: "plugin:dsh-mneme", plugin: "dsh-mneme" } })
247
+ ]
248
+ };
249
+ });
250
+
251
+ return {
252
+ dispose() {
253
+ unsubscribe?.();
254
+ offStep?.();
255
+ edge.clear();
256
+ }
257
+ };
258
+ }