@modusensus/dsh-mneme 0.9.5 → 0.10.0
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- package/README.md +9 -5
- package/docs/CONFIGURATION.md +21 -0
- package/docs/DAEMON.md +6 -2
- package/docs/DISTILL.md +90 -6
- package/docs/SLEEP.md +20 -6
- package/docs/STORAGE.md +1 -0
- package/lib/api-standalone.js +11 -3
- package/lib/api.js +25 -5
- package/lib/client.js +137 -10
- package/lib/config.js +33 -1
- package/lib/continuity.js +11 -3
- package/lib/dream/decisions.js +88 -27
- package/lib/dream/sleep.js +467 -81
- package/lib/dream.js +110 -13
- package/lib/fence.js +24 -0
- package/lib/index.js +15 -6
- package/lib/inject.js +9 -4
- package/lib/lang.js +17 -12
- package/lib/pipeline-nudge-auto.js +3 -0
- package/lib/pipeline-nudge.js +41 -8
- package/lib/pipeline-runner.js +15 -0
- package/lib/pre-inject-gate.js +14 -0
- package/lib/profile-extract.js +4 -1
- package/lib/provenance-http.js +162 -37
- package/lib/service.js +30 -0
- package/lib/session-gate.js +91 -0
- package/lib/settings.js +13 -1
- package/lib/store.js +526 -18
- package/lib/summarize.js +152 -15
- package/lib/tools.js +26 -6
- package/package.json +4 -2
- package/src/api-standalone.js +11 -3
- package/src/api.js +25 -5
- package/src/config.js +33 -1
- package/src/continuity.js +11 -3
- package/src/dream/decisions.js +88 -27
- package/src/dream/sleep.js +467 -81
- package/src/dream.js +110 -13
- package/src/fence.js +24 -0
- package/src/index.js +15 -6
- package/src/inject.js +9 -4
- package/src/lang.js +17 -12
- package/src/pipeline-nudge-auto.js +3 -0
- package/src/pipeline-nudge.js +41 -8
- package/src/pipeline-runner.js +15 -0
- package/src/pre-inject-gate.js +14 -0
- package/src/profile-extract.js +4 -1
- package/src/provenance-http.js +162 -37
- package/src/service.js +30 -0
- package/src/session-gate.js +91 -0
- package/src/settings.js +13 -1
- package/src/store.js +526 -18
- package/src/summarize.js +152 -15
- package/src/tools.js +26 -6
- package/test/api.test.js +153 -4
- package/test/client.test.js +215 -0
- package/test/config.test.js +8 -0
- package/test/conflict-reviewed.test.js +79 -0
- package/test/continuity.test.js +29 -1
- package/test/dependency-overrides.test.js +78 -0
- package/test/differentiate-feedback.test.js +248 -0
- package/test/dream-decision-evidence.test.js +314 -0
- package/test/dream-fence.test.js +43 -0
- package/test/inject-pools.test.js +2 -1
- package/test/mint-source.test.js +83 -0
- package/test/pipeline-nudge-auto.test.js +26 -2
- package/test/pipeline-nudge.test.js +87 -0
- package/test/pipeline-runner.test.js +26 -0
- package/test/prompt-stance.test.js +128 -0
- package/test/provenance-http.test.js +200 -17
- package/test/release-docs.test.js +7 -1
- package/test/security-doc.test.js +43 -4
- package/test/session-gate.test.js +264 -0
- package/test/settings.test.js +4 -0
- package/test/sleep-action-set.test.js +16 -11
- package/test/sleep-catchup.test.js +315 -0
- package/test/sleep-failure-backoff.test.js +156 -0
- package/test/sleep.test.js +293 -0
- package/test/standalone-api.test.js +50 -0
- package/test/store.test.js +220 -0
- package/test/summarize.test.js +172 -0
package/src/pipeline-runner.js
CHANGED
|
@@ -98,6 +98,7 @@ export function listPipelineIds(projectRoot) {
|
|
|
98
98
|
export function createExecutionRecorder({
|
|
99
99
|
ctx,
|
|
100
100
|
logger = null,
|
|
101
|
+
sessionGate = null,
|
|
101
102
|
resolvePipeline = defaultResolvePipeline,
|
|
102
103
|
persistRun = appendRun,
|
|
103
104
|
now = () => new Date(),
|
|
@@ -109,9 +110,19 @@ export function createExecutionRecorder({
|
|
|
109
110
|
const windows = new Map(); // sessionId → { pipeline, projectRoot, run, events, truncated }
|
|
110
111
|
// 已结账、等人确认的会话:sessionId → { pipeline, projectRoot, proposal, stats }
|
|
111
112
|
const pending = new Map();
|
|
113
|
+
const gated = (session) => {
|
|
114
|
+
if (!sessionGate?.isOff(session)) return false;
|
|
115
|
+
const id = session?.id;
|
|
116
|
+
if (id) {
|
|
117
|
+
windows.delete(id);
|
|
118
|
+
pending.delete(id);
|
|
119
|
+
}
|
|
120
|
+
return true;
|
|
121
|
+
};
|
|
112
122
|
|
|
113
123
|
const unsubscribe = ctx?.on?.("session/event", (session, event) => {
|
|
114
124
|
try {
|
|
125
|
+
if (gated(session)) return;
|
|
115
126
|
const id = session?.id;
|
|
116
127
|
if (!id) return;
|
|
117
128
|
const w = windows.get(id);
|
|
@@ -135,6 +146,7 @@ export function createExecutionRecorder({
|
|
|
135
146
|
* 开始走某条流程」。猜错会把一条从没跑过的流程记成跑过。
|
|
136
147
|
*/
|
|
137
148
|
start({ session, pipelineId } = {}) {
|
|
149
|
+
if (gated(session)) return { ok: false, reason: "session-incognito" };
|
|
138
150
|
const id = session?.id;
|
|
139
151
|
if (!id) return { ok: false, reason: "no-session" };
|
|
140
152
|
const open = windows.get(id);
|
|
@@ -169,6 +181,7 @@ export function createExecutionRecorder({
|
|
|
169
181
|
* 同时给出 P1 那份「观察到的业务动作清单」,让人对照着勾。
|
|
170
182
|
*/
|
|
171
183
|
stop({ session } = {}) {
|
|
184
|
+
if (gated(session)) return { ok: false, reason: "session-incognito" };
|
|
172
185
|
const id = session?.id;
|
|
173
186
|
if (!id) return { ok: false, reason: "no-session" };
|
|
174
187
|
const w = windows.get(id);
|
|
@@ -233,6 +246,7 @@ export function createExecutionRecorder({
|
|
|
233
246
|
* ("没确认"不等于"没发生",见 pipeline-confirm 的注释)。
|
|
234
247
|
*/
|
|
235
248
|
confirm({ session, answers } = {}) {
|
|
249
|
+
if (gated(session)) return { ok: false, reason: "session-incognito" };
|
|
236
250
|
const id = session?.id;
|
|
237
251
|
if (!id) return { ok: false, reason: "no-session" };
|
|
238
252
|
const p = pending.get(id);
|
|
@@ -323,6 +337,7 @@ export function createExecutionRecorder({
|
|
|
323
337
|
|
|
324
338
|
/** 只看状态,不结账。要能分辨「窗口开着」与「等你确认」两种状态。 */
|
|
325
339
|
status({ session } = {}) {
|
|
340
|
+
if (gated(session)) return { open: false, incognito: true };
|
|
326
341
|
const id = session?.id;
|
|
327
342
|
if (pending.has(id)) {
|
|
328
343
|
const p = pending.get(id);
|
package/src/pre-inject-gate.js
CHANGED
|
@@ -207,6 +207,20 @@ export function createPreInjectGate({ llm, agentDefaultModel, service, config, l
|
|
|
207
207
|
const startedAt = Date.now();
|
|
208
208
|
const timestamp = new Date(startedAt).toISOString();
|
|
209
209
|
const source = { kind: "plugin:dsh-mneme", plugin: "dsh-mneme" };
|
|
210
|
+
// 刻意不套 fenceListBody(dream.js:330,Issue #380 的复盘):本闸的 system 契约把
|
|
211
|
+
// user 侧形状写死成「你将收到一个 JSON 对象,包含 query 与 memories」(lang.js:57/58),
|
|
212
|
+
// 套围栏会让提示词与载荷互相矛盾;而且判定池靠 JSON.parse 直接取 m#<i> 局部序号还原
|
|
213
|
+
// 候选(test/pre-inject-gate.test.js 锁着这个形状),外包围栏文本会让解析整条失败。
|
|
214
|
+
// 这里的注入防线不是围栏而是**判定结果绝不进模型上下文**:没有任何标记(判到的、
|
|
215
|
+
// 没判到的)会被写回提示词,给模型看标记的整条线已被 E2/E3 关闭(见 lang.js:52-55)。
|
|
216
|
+
// 但这条「移出候选」的保证是**有条件的**,写清楚免得被读成无条件:
|
|
217
|
+
// · 只有 enforce 开着、且本帧缓存命中(gateFrame.state === "filtered")时才真移除候选
|
|
218
|
+
// (service.injectCandidates 的移除分支);
|
|
219
|
+
// · 观察档(enforce 关)、冷缓存首帧、判定失败/超时、整池被标记的 fail-open 帧,
|
|
220
|
+
// 候选原样注入——那些帧里记忆正文会照常到达模型;
|
|
221
|
+
// · 判定器识别的是「意见或立场」,它**不**承诺消化正文里任何指令句(越狱式记忆
|
|
222
|
+
// 不在本闸的判据里),别把这段读成对注入指令的保证。
|
|
223
|
+
// 没有围栏可闭合,也就没有「闭合标记被伪造」这一路风险。
|
|
210
224
|
const messages = [
|
|
211
225
|
{ role: "system", content: [{ type: "text", text: STR.prompts.preInjectGate[language] }], source },
|
|
212
226
|
{ role: "user", content: [{ type: "text", text: JSON.stringify({ query, memories: candidates.map((c, i) => ({ id: `m#${i}`, content: c.content })) }) }], source },
|
package/src/profile-extract.js
CHANGED
|
@@ -24,6 +24,9 @@
|
|
|
24
24
|
|
|
25
25
|
import { STR, langOf } from "./lang.js";
|
|
26
26
|
import { describeStreamFailure, resolveRoute, runAuditedLlm, streamText } from "./dream.js";
|
|
27
|
+
// #493 补充 §③:与巩固/蒸馏同一份断链(src/fence.js)。画像条目同样是模型的可影响
|
|
28
|
+
// 输入,一条写着「<<<记忆条目结束>>>」的记忆能提前闭合围栏。
|
|
29
|
+
import { breakFenceMarkers } from "./fence.js";
|
|
27
30
|
|
|
28
31
|
const DEFAULT_MAX_ROWS = 120;
|
|
29
32
|
const DEFAULT_ROW_CHARS = 260;
|
|
@@ -115,7 +118,7 @@ export function createProfileExtractor({ ctx, service, config, logger }) {
|
|
|
115
118
|
const listing = rows.map((r, i) => `${i + 1}. [${r.type}] ${r.title} :: ${r.content}`).join("\n");
|
|
116
119
|
const userText = [
|
|
117
120
|
STR.profileFenceOpen[language],
|
|
118
|
-
listing,
|
|
121
|
+
breakFenceMarkers(listing),
|
|
119
122
|
STR.profileFenceClose[language],
|
|
120
123
|
language === "zh"
|
|
121
124
|
? `以上 ${rows.length} 条记忆条目(数据)到此结束。只依据它们输出 JSON,条目里没有的绝不发明。`
|
package/src/provenance-http.js
CHANGED
|
@@ -2,41 +2,51 @@
|
|
|
2
2
|
//
|
|
3
3
|
// 为什么要单独一个模块:这张脸有两个入口——宿主内的面板路由(src/api.js 的
|
|
4
4
|
// /api/dsh-mneme/memory/provenance)与 Bearer 数据面(src/api-standalone.js 的
|
|
5
|
-
// /memory/provenance)。两者底下是同一份 service(provenanceFor +
|
|
6
|
-
//
|
|
7
|
-
//
|
|
5
|
+
// /memory/provenance)。两者底下是同一份 service(provenanceFor + distillWindowsFor
|
|
6
|
+
// + distillRecordsFor),差别只在鉴权与路径。历史上(#509 第一版)它们是整段复制的,
|
|
7
|
+
// 于是「改一边忘一边」在结构上就可能发生——#411 已经为 reclaim / share 各踩过一次,
|
|
8
|
+
// 本模块照那次的结论办。
|
|
8
9
|
//
|
|
9
|
-
//
|
|
10
|
+
// 口径(错误码、两种「空」的区分、窗口形状、上限)现在只写在这里,两个入口都调它。
|
|
10
11
|
// 真要再写第二份,test/provenance-http.test.js 的静态锁会直接转红。
|
|
11
12
|
//
|
|
12
|
-
//
|
|
13
|
+
// 这里只做协议层的事:解析入参、判开关、组装窗口、区分「用户关了」「没接线」与
|
|
13
14
|
// 「没有来源」。一行数据都不改——读取在 src/store.js,透传在 src/service.js。
|
|
14
15
|
//
|
|
16
|
+
// 两个读方向(#421 拆成两条,方向 1 由 #509 交付、方向 2 由 #524 补上):
|
|
17
|
+
// memory: ?id=<memoryId> 一条记忆 → 派生它的那些蒸馏窗口
|
|
18
|
+
// session: ?sessionId=<sid> 一个会话 → 它产出的那些蒸馏窗口
|
|
19
|
+
// 两个主键互斥(都缺 400、都给 400)。共用同一条路径是有意的:多一条路径就多一处
|
|
20
|
+
// 要登记的地方(SECURITY.md 两张表、README 路由表、security-doc 的清单锁),而这两
|
|
21
|
+
// 个方向读的是**同一批数据**,只是入口不同。
|
|
22
|
+
//
|
|
15
23
|
// 状态码阶梯(自前而后,先匹配的先回):
|
|
16
24
|
// 401 未鉴权 ——两个壳各自的门(api.js 的 register 包装 / standalone 的
|
|
17
25
|
// isAuthorized),在本模块之前,不在这里重复。
|
|
18
|
-
// 400
|
|
26
|
+
// 400 缺参/多参 ——语法畸形,与服务端状态无关,所以排在功能开关之前;与
|
|
19
27
|
// reclaim 的 invalid-json 同档(reclaim-http.js:30-33 立的是
|
|
20
|
-
// 「503 要赢过**字段校验**的 400
|
|
28
|
+
// 「503 要赢过**字段校验**的 400」,缺参不是字段校验而是请求
|
|
21
29
|
// 本身不成立,所以不适用那条)。判断在壳里
|
|
22
|
-
// (
|
|
23
|
-
//
|
|
24
|
-
//
|
|
30
|
+
// (parseProvenanceSelector),走到本模块时选择器一定成型。
|
|
31
|
+
// limit 越界属**语义类** 400,按上面那条口径仍排在接线检查之前
|
|
32
|
+
// ——它是入参本身的形状问题,不是「服务端现在能不能读」。
|
|
25
33
|
// 409 功能关了 ——distillRecords.enabled !== true。回的是「端点的属性」,
|
|
26
34
|
// 与 src/api.js:525 的 profileExtractEnabled 同构:用户关了
|
|
27
35
|
// 某功能 = 409,装配坏了 = 503,两者必须是可区分的答案
|
|
28
36
|
// (src/index.js:589-591 的设计原话)。
|
|
29
|
-
// 503 装配没接线 ——service
|
|
37
|
+
// 503 装配没接线 ——service 上缺该方向要用的方法(按选择器分方向判,见
|
|
38
|
+
// REQUIRED_METHODS:只缺 session 那侧的方法时,memory 查询
|
|
39
|
+
// 仍然该能用)。
|
|
30
40
|
// 读(200 / 500)
|
|
31
|
-
// 刻意不用 404
|
|
32
|
-
// 是 200 + 空 windows),404 在本仓另有稳定含义——未知路由与资源不存在
|
|
41
|
+
// 刻意不用 404:本端点永远不就「这条记忆/这个会话是否存在」作断言(缺参是 400、
|
|
42
|
+
// 未知 id 是 200 + 空 windows),404 在本仓另有稳定含义——未知路由与资源不存在
|
|
33
43
|
// (src/api-standalone.js:506/515、src/api.js:1367/1445)。把「功能关了」塞进
|
|
34
44
|
// 404,调用方会在状态码这个唯一被代理 / 监控 / 重试逻辑读取的通道上,把它读成
|
|
35
45
|
// 「这条记忆不存在」。
|
|
36
46
|
|
|
37
47
|
/**
|
|
38
|
-
* 「溯源能力没接线」的错误码。headless / 旧装配下 service
|
|
39
|
-
*
|
|
48
|
+
* 「溯源能力没接线」的错误码。headless / 旧装配下 service 上没有本方向要用的方法,
|
|
49
|
+
* 那是装配坏了,不是「这条记忆没有来源」——两种空必须分开读数,
|
|
40
50
|
* 否则调用方看到一个空 windows 会以为拿到了答案。
|
|
41
51
|
*/
|
|
42
52
|
export const PROVENANCE_UNAVAILABLE = "provenance-unavailable";
|
|
@@ -50,6 +60,24 @@ export const PROVENANCE_UNAVAILABLE = "provenance-unavailable";
|
|
|
50
60
|
*/
|
|
51
61
|
export const DISTILL_RECORDS_DISABLED = "distill-records-disabled";
|
|
52
62
|
|
|
63
|
+
/**
|
|
64
|
+
* 一次答复最多带几个窗口。缺省 20。
|
|
65
|
+
*
|
|
66
|
+
* 为什么**必须**有上限(#524 的第 2 条前置):按会话读是这张脸里天然最容易放大
|
|
67
|
+
* 的方向——一个会话几十个窗口,每个窗口都是整段逐字原文,不限量就是「按会话导出
|
|
68
|
+
* 全量转录」,与 /export(一次拿全库)同量级、只是换了形状,而它同样受门控。
|
|
69
|
+
* 20 这个数的取法:本机实测一个蒸馏会话的窗口数在个位数,20 已覆盖正常排查;
|
|
70
|
+
* 真要更多就带 limit 往上要,**不许**靠缺省值默默给全量。
|
|
71
|
+
*/
|
|
72
|
+
export const PROVENANCE_DEFAULT_WINDOWS = 20;
|
|
73
|
+
|
|
74
|
+
/**
|
|
75
|
+
* limit 的硬上界。取值与 api.js 的 MAX_PAGE_LIMIT(1000)/ MAX_SEARCH_TOP_K(200)
|
|
76
|
+
* 同一考虑:参数直接进 SQL LIMIT,上界是防御。这里比列表类接口更小,因为每个窗口
|
|
77
|
+
* 带的是一整段原文而不是一行元数据——100 个窗口已经是一份不小的转录。
|
|
78
|
+
*/
|
|
79
|
+
export const PROVENANCE_MAX_WINDOWS = 100;
|
|
80
|
+
|
|
53
81
|
/**
|
|
54
82
|
* 读侧唯一的开关判据,**与写侧 src/summarize.js:988 逐字同源**。
|
|
55
83
|
*
|
|
@@ -77,48 +105,145 @@ export function provenanceWarnMessage(error) {
|
|
|
77
105
|
}
|
|
78
106
|
|
|
79
107
|
/**
|
|
80
|
-
*
|
|
81
|
-
*
|
|
108
|
+
* 按选择器分方向列出「要读必须先有哪个方法」。503 只在**该方向**缺方法时回:
|
|
109
|
+
* 只补了 session 侧的装配不该让 memory 查询一起 503(那是把一个方向的问题
|
|
110
|
+
* 报成整张脸坏了)。
|
|
111
|
+
*/
|
|
112
|
+
const REQUIRED_METHODS = {
|
|
113
|
+
memory: ["provenanceFor", "distillRecordsFor"],
|
|
114
|
+
session: ["distillWindowsFor", "distillRecordsFor"]
|
|
115
|
+
};
|
|
116
|
+
|
|
117
|
+
function trimmed(raw) {
|
|
118
|
+
return typeof raw === "string" ? raw.trim() : "";
|
|
119
|
+
}
|
|
120
|
+
|
|
121
|
+
/**
|
|
122
|
+
* 解析 ?limit。**只收十进制整数字面量**,缺省落默认值。
|
|
123
|
+
*
|
|
124
|
+
* 不用 Number():它把 "" / " " / 十六进制 / 指数写法都化成数,于是 `?limit=`
|
|
125
|
+
* 会静默变成 0 个窗口——一个畸形输入拿到最坏解释(reclaim-http.js 的
|
|
126
|
+
* parseReclaimQuery 为同一理由立过这条规矩)。越界也算畸形:调用方要 1000 个
|
|
127
|
+
* 窗口,实际给 100 而不说一声,比直接拒更糟。
|
|
82
128
|
*
|
|
83
|
-
* @returns {{ok: true,
|
|
129
|
+
* @returns {{ok: true, limit: number} | {ok: false, status: 400, error: string}}
|
|
84
130
|
*/
|
|
85
|
-
export function
|
|
86
|
-
|
|
87
|
-
|
|
88
|
-
return { ok:
|
|
131
|
+
export function parseProvenanceLimit(raw) {
|
|
132
|
+
if (raw === null || raw === undefined) return { ok: true, limit: PROVENANCE_DEFAULT_WINDOWS };
|
|
133
|
+
const text = typeof raw === "string" ? raw.trim() : "";
|
|
134
|
+
if (!/^\d+$/.test(text)) return { ok: false, status: 400, error: "invalid-limit" };
|
|
135
|
+
const limit = Number(text);
|
|
136
|
+
if (!Number.isSafeInteger(limit) || limit < 1 || limit > PROVENANCE_MAX_WINDOWS) {
|
|
137
|
+
return { ok: false, status: 400, error: "invalid-limit" };
|
|
138
|
+
}
|
|
139
|
+
return { ok: true, limit };
|
|
89
140
|
}
|
|
90
141
|
|
|
91
142
|
/**
|
|
92
|
-
*
|
|
143
|
+
* 解析两个互斥主键。都缺 → 400 missing-id;都给 → 400 ambiguous-id。
|
|
144
|
+
*
|
|
145
|
+
* 「都给时择一」是刻意不做的:择一意味着调用方可以发一个自己也不知道会被读哪个
|
|
146
|
+
* 主键的请求,而两边的结果形状不同——那种静默选择只会在出事之后才被发现。
|
|
147
|
+
* 400 是两个都错,比猜一个更好。
|
|
148
|
+
*
|
|
149
|
+
* @param {{memoryId?: string|null, sessionId?: string|null, limit?: string|null}} params
|
|
150
|
+
* @returns {{ok: true, selector: {mode: "memory"|"session", memoryId?: string,
|
|
151
|
+
* sessionId?: string, limit: number}} | {ok: false, status: 400, error: string}}
|
|
152
|
+
*/
|
|
153
|
+
export function parseProvenanceSelector({ memoryId, sessionId, limit } = {}) {
|
|
154
|
+
const mem = trimmed(memoryId);
|
|
155
|
+
const ses = trimmed(sessionId);
|
|
156
|
+
// 参数形状排在功能开关之前:请求本身不成立时报「功能关了」是误导。
|
|
157
|
+
if (mem && ses) return { ok: false, status: 400, error: "ambiguous-id" };
|
|
158
|
+
if (!mem && !ses) return { ok: false, status: 400, error: "missing-id" };
|
|
159
|
+
const parsedLimit = parseProvenanceLimit(limit);
|
|
160
|
+
if (!parsedLimit.ok) return parsedLimit;
|
|
161
|
+
return {
|
|
162
|
+
ok: true,
|
|
163
|
+
selector: mem
|
|
164
|
+
? { mode: "memory", memoryId: mem, limit: parsedLimit.limit }
|
|
165
|
+
: { mode: "session", sessionId: ses, limit: parsedLimit.limit }
|
|
166
|
+
};
|
|
167
|
+
}
|
|
168
|
+
|
|
169
|
+
/**
|
|
170
|
+
* 组装答复:一个窗口一项(区间 + 区间内原文行,按 seq 升序)。
|
|
93
171
|
*
|
|
94
172
|
* 顺序敏感(阶梯全貌见文件头):409 功能关了 → 503 装配没接线 → 读。
|
|
95
173
|
* 503 要赢过空结果——装配没接线时报「这条记忆没有来源」是误导,与 reclaimReply 的
|
|
96
174
|
* maintenance-unavailable 同构;而 409 要赢过 503——「用户关了」比「装配坏了」更
|
|
97
175
|
* 具体,把前者报成后者会让人去查一个没坏的部署。
|
|
98
176
|
*
|
|
99
|
-
*
|
|
177
|
+
* `truncated` 是两种模式共有的读数(#524):撞上 limit 时把「还有更多」说出来。
|
|
178
|
+
* 少了它,被截断的答复与「本来就只有这么多」逐字节相同,调用方会把半份转录
|
|
179
|
+
* 当成全部——那正是这张脸最容易骗人的地方。
|
|
180
|
+
*
|
|
181
|
+
* @param {{service: object, selector: object, config?: object|null, warn?: Function}} args
|
|
100
182
|
* config 缺省即关(fail-closed),见 isDistillRecordsEnabled。
|
|
101
183
|
* @returns {{status: number, body: object}}
|
|
102
184
|
*/
|
|
103
|
-
export function provenanceReply({ service,
|
|
185
|
+
export function provenanceReply({ service, selector, config = null, warn = null }) {
|
|
104
186
|
if (!isDistillRecordsEnabled(config)) {
|
|
105
187
|
return { status: 409, body: { error: DISTILL_RECORDS_DISABLED } };
|
|
106
188
|
}
|
|
107
|
-
|
|
189
|
+
const mode = selector?.mode === "session" ? "session" : "memory";
|
|
190
|
+
if (REQUIRED_METHODS[mode].some((name) => typeof service?.[name] !== "function")) {
|
|
108
191
|
return { status: 503, body: { error: PROVENANCE_UNAVAILABLE } };
|
|
109
192
|
}
|
|
193
|
+
const limit = selector?.limit > 0 ? selector.limit : PROVENANCE_DEFAULT_WINDOWS;
|
|
110
194
|
try {
|
|
111
|
-
|
|
112
|
-
|
|
113
|
-
|
|
114
|
-
|
|
115
|
-
|
|
116
|
-
|
|
117
|
-
|
|
118
|
-
|
|
119
|
-
|
|
120
|
-
|
|
121
|
-
|
|
195
|
+
// session 侧多取一行判截断(store 侧只照 limit 取,不替调用方判断「还有没有」;
|
|
196
|
+
// memory 侧 provenanceFor 本来就全量返回,按长度判即可)。
|
|
197
|
+
const rows = mode === "session"
|
|
198
|
+
? service.distillWindowsFor(selector.sessionId, limit + 1)
|
|
199
|
+
: service.provenanceFor(selector.memoryId);
|
|
200
|
+
const truncated = rows.length > limit;
|
|
201
|
+
// #512:run 是归因主体,窗口只是它的一批输入。能读到 run 就带上 run_type /
|
|
202
|
+
// trigger_source / status,读不到(旧库历史链接、或 store 没这一步)就整组
|
|
203
|
+
// 缺省——**不拿区间或时间戳去猜**:「看起来能追、实际是编的」比没有更坏。
|
|
204
|
+
const canReadRuns = typeof service?.getDistillRun === "function";
|
|
205
|
+
const windows = rows.slice(0, limit).map((link) => {
|
|
206
|
+
const base = {
|
|
207
|
+
session_id: link.session_id,
|
|
208
|
+
seq_start: link.seq_start,
|
|
209
|
+
seq_end: link.seq_end,
|
|
210
|
+
created_at: link.created_at,
|
|
211
|
+
// 到期裁剪后区间可能变空:链接刻意保留并指向空区间(clearDistillRecords 的
|
|
212
|
+
// 语义),面板据此显示「原文已过期」而非「没有来源」。
|
|
213
|
+
records: service.distillRecordsFor(link.session_id, link.seq_start, link.seq_end)
|
|
214
|
+
};
|
|
215
|
+
if (mode === "session") {
|
|
216
|
+
// link_count 只有方向 2(session)会带:一个窗口派生出几条记忆。方向 1 的每
|
|
217
|
+
// 一行本来就是「一条记忆 → 一个窗口」,这个计数恒为 1,带出去只会是噪音(用
|
|
218
|
+
// ?? 兜住,免得方向 1 的答复凭空多一个 null 键)。
|
|
219
|
+
return { ...base, link_count: link.link_count ?? 1 };
|
|
220
|
+
}
|
|
221
|
+
// 方向 2 的一行是一个窗口、可能派生多条记忆,没有单一归因主体,所以运行归因
|
|
222
|
+
// 只挂在方向 1 上;要逐条查某条记忆出生自哪一轮,仍走方向 1。
|
|
223
|
+
const run = canReadRuns && link.distill_run_id ? service.getDistillRun(link.distill_run_id) : undefined;
|
|
224
|
+
return {
|
|
225
|
+
...base,
|
|
226
|
+
// #512:distill_run_id 为 null 就是历史行为——改造之前写下的链接没有第二轮
|
|
227
|
+
// 真相可查,面板据此显示「这一条没有运行归因」而不是给一个像样的空壳。
|
|
228
|
+
distill_run_id: link.distill_run_id ?? null,
|
|
229
|
+
run_type: run?.run_type ?? null,
|
|
230
|
+
trigger_source: run?.trigger_source ?? null,
|
|
231
|
+
run_status: run?.status ?? null
|
|
232
|
+
};
|
|
233
|
+
});
|
|
234
|
+
// 行级铸造归因(#512):这条记忆出生自哪一轮。与窗口级是两层,各自独立缺省。
|
|
235
|
+
const mints = mode === "memory" && typeof service?.mintsFor === "function"
|
|
236
|
+
? service.mintsFor(selector.memoryId).map((mint) => ({
|
|
237
|
+
run_id: mint.run_id,
|
|
238
|
+
run_type: mint.run_type,
|
|
239
|
+
trigger_source: mint.trigger_source,
|
|
240
|
+
created_at: mint.created_at
|
|
241
|
+
}))
|
|
242
|
+
: [];
|
|
243
|
+
const body = mode === "session"
|
|
244
|
+
? { sessionId: selector.sessionId, windows, truncated }
|
|
245
|
+
: { memoryId: selector.memoryId, windows, truncated, mints };
|
|
246
|
+
return { status: 200, body };
|
|
122
247
|
} catch (error) {
|
|
123
248
|
warn?.(provenanceWarnMessage(error));
|
|
124
249
|
return { status: 500, body: { error: "internal" } };
|
package/src/service.js
CHANGED
|
@@ -2638,6 +2638,11 @@ export function createService({ store, mirror, config, onWrite, logger, document
|
|
|
2638
2638
|
transaction,
|
|
2639
2639
|
getDistillCursor: (sessionId) => store.getDistillCursor(sessionId),
|
|
2640
2640
|
setDistillCursor: (sessionId, lastSeq) => store.setDistillCursor(sessionId, lastSeq),
|
|
2641
|
+
// #493 补充 §②:解析失败计数是**跨进程**的事实(护栏默认关,但开着时重启一次
|
|
2642
|
+
// 就清零等于让护栏可被重启绕过)。整条是 bookkeeping,不挂 write hook。
|
|
2643
|
+
getDistillParseFailureStreak: (sessionId, opts) => store.getDistillParseFailureStreak(sessionId, opts),
|
|
2644
|
+
bumpDistillParseFailureStreak: (sessionId, opts) => store.bumpDistillParseFailureStreak(sessionId, opts),
|
|
2645
|
+
clearDistillParseFailureStreak: (sessionId) => store.clearDistillParseFailureStreak(sessionId),
|
|
2641
2646
|
// #399 蒸馏原始记录与溯源:与上面两条游标一样是纯 passthrough——它们不是
|
|
2642
2647
|
// 记忆写入,不该触发 syncMirror / notifyWrite / 实体抽取(那些钩子挂在
|
|
2643
2648
|
// saveWithDedupe 上)。distill_records 的落盘由 summarize.js 在蒸馏窗口内
|
|
@@ -2648,6 +2653,18 @@ export function createService({ store, mirror, config, onWrite, logger, document
|
|
|
2648
2653
|
// #421 读出口:按 (session, seq 区间) 取蒸馏原文。与 provenanceFor 成对——
|
|
2649
2654
|
// 一个给区间、一个给区间里的原文,合起来才是「这条记忆从哪几句蒸出来的」。
|
|
2650
2655
|
distillRecordsFor: (sessionId, seqStart, seqEnd) => store.distillRecordsFor(sessionId, seqStart, seqEnd),
|
|
2656
|
+
// #524 方向 2:按会话列出它的蒸馏窗口。与 provenanceFor 同一张表、另一条索引
|
|
2657
|
+
// (idx_memory_provenance_session),所以也是纯 passthrough——读的是 #399 早就
|
|
2658
|
+
// 落好的事实,不产生任何写入。
|
|
2659
|
+
distillWindowsFor: (sessionId, limit) => store.distillWindowsFor(sessionId, limit),
|
|
2660
|
+
// #512 蒸馏运行与铸造归因:同样是 bookkeeping passthrough(与 saveDreamRun
|
|
2661
|
+
// 那一组同语义)——run 是审计主体,notifyWrite 会绕回它自己的调度器。
|
|
2662
|
+
saveDistillRun: (run) => store.saveDistillRun(run),
|
|
2663
|
+
attachDistillRunAudit: (id, auditId) => store.attachDistillRunAudit(id, auditId),
|
|
2664
|
+
getDistillRun: (id) => store.getDistillRun(id),
|
|
2665
|
+
listDistillRuns: (opts) => store.listDistillRuns(opts),
|
|
2666
|
+
saveMemoryMint: (mint) => store.saveMemoryMint(mint),
|
|
2667
|
+
mintsFor: (memoryId) => store.mintsFor(memoryId),
|
|
2651
2668
|
enqueue,
|
|
2652
2669
|
setDreamHook(fn) { dreamHook = fn; },
|
|
2653
2670
|
setSleepHook(fn) { sleepHook = fn; },
|
|
@@ -2822,6 +2839,17 @@ export function createService({ store, mirror, config, onWrite, logger, document
|
|
|
2822
2839
|
listConflictQueue,
|
|
2823
2840
|
resolveConflictPending,
|
|
2824
2841
|
countConflictPending: () => store.countConflictPending(),
|
|
2842
|
+
// Issue #533:differentiate 的裁决账本。同样只做记账、绝不改正文——正文
|
|
2843
|
+
// 一旦互相追加同一段注记,两条向量会被同向拉近(复现见 store 侧建表注释)。
|
|
2844
|
+
saveDifferentiatedPair: (r) => store.saveDifferentiatedPair(r),
|
|
2845
|
+
findDifferentiatedPair: (a, b) => store.findDifferentiatedPair(a, b),
|
|
2846
|
+
listDifferentiatedPairs: (opts) => store.listDifferentiatedPairs(opts),
|
|
2847
|
+
// #529:机器侧冲突裁决台账。同样只有 bookkeeping 语义——一行台账既不是记忆
|
|
2848
|
+
// 内容也不是人工裁决,写它不该触发 syncMirror / notifyWrite / 实体抽取,否则
|
|
2849
|
+
// 记账本身会反过来把睡眠调度器叫醒(与上面 saveDreamRun 同一个理由)。
|
|
2850
|
+
saveConflictReviewed: (r) => store.saveConflictReviewed(r),
|
|
2851
|
+
loadConflictReviewed: () => store.loadConflictReviewed(),
|
|
2852
|
+
listConflictReviewed: (opts) => store.listConflictReviewed(opts),
|
|
2825
2853
|
// Recall evaluation trail (方案 B): audit-bookkeeping semantics like the
|
|
2826
2854
|
// dream/recall passthroughs above — a recall_evals write is a snapshot, not
|
|
2827
2855
|
// a memory mutation, so it never triggers write hooks.
|
|
@@ -2831,6 +2859,8 @@ export function createService({ store, mirror, config, onWrite, logger, document
|
|
|
2831
2859
|
// LLM audit trail (Bug8): bookkeeping semantics like the recall/dream
|
|
2832
2860
|
// passthroughs — a saveLlmAudit write never triggers write hooks.
|
|
2833
2861
|
saveLlmAudit: (entry) => store.saveLlmAudit(entry),
|
|
2862
|
+
// #534:校验层的判决要补回到调用层已经写死的审计行上(两套账分账,见 store 侧注释)。
|
|
2863
|
+
annotateLlmAudit: (id, patch) => store.annotateLlmAudit(id, patch),
|
|
2834
2864
|
listLlmAudits: (opts) => store.listLlmAudits(opts),
|
|
2835
2865
|
countLlmAudits: (opts) => store.countLlmAudits(opts),
|
|
2836
2866
|
getLlmAuditStats: (opts) => store.getLlmAuditStats(opts),
|
|
@@ -0,0 +1,91 @@
|
|
|
1
|
+
// #539 逐会话无痕闸门:总开关关闭时保留既有行为;每个消费点读取同一份配置,
|
|
2
|
+
// 因此配置对象更新后,下一次操作即按新值判定。
|
|
3
|
+
export function createSessionGate(config) {
|
|
4
|
+
// 已观察到的子会话 id。作用只有一个:日志扫描只拿得到一个 id 与一段**可能解析
|
|
5
|
+
// 不出 header** 的帧,那时没有活会话对象可问。上限与会话日志扫描的批次无关,
|
|
6
|
+
// 纯粹是防「长驻宿主跑上几百个子代理后这张表只涨不落」——本机 641 个真实会
|
|
7
|
+
// 话里 455 个是子代理,不设界等于把每个子代理 id 永久留在内存里。淘汰最旧的
|
|
8
|
+
// 是安全的:淘汰只影响「header 解析不出时的那次日志过滤」,活路径一律直接用
|
|
9
|
+
// 会话对象判定,不查这张表。
|
|
10
|
+
const MAX_TRACKED_SESSIONS = 512;
|
|
11
|
+
const childSessions = new Set();
|
|
12
|
+
|
|
13
|
+
const read = (target, key) => {
|
|
14
|
+
try {
|
|
15
|
+
return target?.[key];
|
|
16
|
+
} catch {
|
|
17
|
+
return undefined;
|
|
18
|
+
}
|
|
19
|
+
};
|
|
20
|
+
|
|
21
|
+
const headerOf = (session) => {
|
|
22
|
+
const header = read(session, "header");
|
|
23
|
+
if (header && typeof header === "object") return header;
|
|
24
|
+
try {
|
|
25
|
+
const requestHeader = read(session, "requestHeader");
|
|
26
|
+
const request = typeof requestHeader === "function" ? requestHeader.call(session) : null;
|
|
27
|
+
const fallback = read(request, "config");
|
|
28
|
+
return fallback && typeof fallback === "object" ? fallback : null;
|
|
29
|
+
} catch {
|
|
30
|
+
return null;
|
|
31
|
+
}
|
|
32
|
+
};
|
|
33
|
+
|
|
34
|
+
/**
|
|
35
|
+
* 子会话判据:**只看宿主自己的委派标记**。
|
|
36
|
+
*
|
|
37
|
+
* 刻意不把 `parentSession` 当判据。它是「有父会话」而不是「是子代理」:
|
|
38
|
+
* `dsh-session` 的 `sessions.fork()` 造出来的**主会话分支**同样写它
|
|
39
|
+
* (`@deepseek-ai/dsh-session/lib/index.js` 的 fork 只写 cwd / parentSession /
|
|
40
|
+
* isSeeded,不写 origin、不写 delegationDepth),而宿主对
|
|
41
|
+
* `origin` 的取值校验只有一个合法值 "subagent"。本机 641 个真实会话头实测:
|
|
42
|
+
* origin/delegationDepth 命中 455 个子代理、零漏检;parentSession 对子代理
|
|
43
|
+
* 识别零贡献,只额外判出 3 个 fork 出来的主会话(那些会话里各有 74–136 条
|
|
44
|
+
* 用户消息、694 次工具调用,不是空壳)。把它们一起关掉 = 普通主会话突然失忆。
|
|
45
|
+
*
|
|
46
|
+
* `parentSessionId` 是 #539 描述的兼容别名,641 个真实头里一次都没出现过;
|
|
47
|
+
* 这里同样不读——留着它当判据只会把同一个误判换个键名再犯一次。
|
|
48
|
+
*/
|
|
49
|
+
const isChild = (session) => {
|
|
50
|
+
const header = headerOf(session);
|
|
51
|
+
const origin = read(header, "origin") ?? read(session, "origin");
|
|
52
|
+
if (origin === "subagent") return true;
|
|
53
|
+
const depth = read(header, "delegationDepth") ?? read(session, "delegationDepth");
|
|
54
|
+
return Number(depth) > 0;
|
|
55
|
+
};
|
|
56
|
+
|
|
57
|
+
const idOf = (sessionOrId) => {
|
|
58
|
+
if (typeof sessionOrId === "string") return sessionOrId || null;
|
|
59
|
+
const id = read(sessionOrId, "id");
|
|
60
|
+
return typeof id === "string" && id.length > 0 ? id : null;
|
|
61
|
+
};
|
|
62
|
+
|
|
63
|
+
const observe = (session) => {
|
|
64
|
+
const id = idOf(session);
|
|
65
|
+
if (!id || !isChild(session)) return;
|
|
66
|
+
if (!childSessions.has(id) && childSessions.size >= MAX_TRACKED_SESSIONS) {
|
|
67
|
+
// 与 src/continuity.js:193 的边缘表同一手法:Map/Set 保持插入序,淘汰最旧。
|
|
68
|
+
childSessions.delete(childSessions.values().next().value);
|
|
69
|
+
}
|
|
70
|
+
childSessions.add(id);
|
|
71
|
+
};
|
|
72
|
+
|
|
73
|
+
const isEnabled = () => read(config, "sessionGateEnabled") === true;
|
|
74
|
+
|
|
75
|
+
const isOff = (sessionOrId) => {
|
|
76
|
+
if (!isEnabled()) return false;
|
|
77
|
+
// id 只服务两件事:手动名单的精确匹配、已观察子会话的记账查询。它**不是**
|
|
78
|
+
// 判定子会话的前提——#539 明写「子会话在首个 session/event 之前就可能组装
|
|
79
|
+
// 上下文」,那时过去只有会话对象、未必有可用 id。以前在这里 `if (!id) return
|
|
80
|
+
// false` 早退,等于把这类会话整个放过去,而下面的 isChild 本来就是为这个
|
|
81
|
+
// 场景准备的。
|
|
82
|
+
const id = idOf(sessionOrId);
|
|
83
|
+
const sessions = read(config, "sessionGateSessions");
|
|
84
|
+
if (id && Array.isArray(sessions) && sessions.includes(id)) return true;
|
|
85
|
+
if (read(config, "sessionGateSubagents") === false) return false;
|
|
86
|
+
if (id && childSessions.has(id)) return true;
|
|
87
|
+
return typeof sessionOrId === "object" && sessionOrId !== null && isChild(sessionOrId);
|
|
88
|
+
};
|
|
89
|
+
|
|
90
|
+
return { observe, isEnabled, isOff };
|
|
91
|
+
}
|
package/src/settings.js
CHANGED
|
@@ -143,6 +143,9 @@ const FEATURE_FLAG_BOOLEANS = [
|
|
|
143
143
|
// 有效间隔 = 基数 × 2^连续失败数(成功清零),封顶 30 分钟;面板可启停。
|
|
144
144
|
"autoDreamFailureBackoff",
|
|
145
145
|
"sleepModeEnabled",
|
|
146
|
+
// Issue #529:sleep 连续失败退避(默认关)。基数是 sleepMinIntervalHours,
|
|
147
|
+
// 有效间隔 = 基数 × 2^连续失败数(成功清零),封顶 max(基数, 24h);面板可启停。
|
|
148
|
+
"sleepFailureBackoff",
|
|
146
149
|
"heatEnabled",
|
|
147
150
|
// issue #218 / E5:注入侧 heat 独立开关(默认关,老用户 injectHeatEnabled=true 回滚)。
|
|
148
151
|
"injectHeatEnabled",
|
|
@@ -239,7 +242,11 @@ const FEATURE_FLAG_BOOLEANS = [
|
|
|
239
242
|
"personaStrictAddressing",
|
|
240
243
|
// Issue #497:画像提取草稿(POST /profile/extract)。默认关——每次调用一次 LLM 且
|
|
241
244
|
// 读上百行记忆;产物只回草稿,绝不写 user_settings。进 LIGHT_MODE_OFF(预设关)。
|
|
242
|
-
"profileExtractEnabled"
|
|
245
|
+
"profileExtractEnabled",
|
|
246
|
+
// #539:逐会话无痕默认关闭;子代理开关受总开关约束。手动 session id 名单留在配置,
|
|
247
|
+
// 不进入只支持标量的 feature_flags 白名单。
|
|
248
|
+
"sessionGateEnabled",
|
|
249
|
+
"sessionGateSubagents"
|
|
243
250
|
];
|
|
244
251
|
// 整数开关的闭区间,与 config.js 里 z.natural().min().max() 对齐。
|
|
245
252
|
const FEATURE_FLAG_INT_RANGES = {
|
|
@@ -279,6 +286,11 @@ const FEATURE_FLAG_INT_RANGES = {
|
|
|
279
286
|
pinnedInjectBudget: [0, 5],
|
|
280
287
|
// Issue #257:sleep 冲突/模式阶段的 LLM 输出预算(原硬编码 2048,实测不足)。
|
|
281
288
|
sleepMaxTokens: [256, 131072],
|
|
289
|
+
// Issue #529:sleep 冲突阶段的输入侧预算(此前完全没有——全部候选对一次进一个
|
|
290
|
+
// prompt,实测 163,054 token 撞服务端 163,840 上限)。两个键都是 0 = 不设上限,
|
|
291
|
+
// 与 config.js 的 z.natural().min(0).max() 成对。
|
|
292
|
+
sleepConflictMaxPairs: [0, 500],
|
|
293
|
+
sleepConflictMaxPairsPerRun: [0, 5000],
|
|
282
294
|
// Issue #258:总览(dream_summarize)输入条数硬上限(0 = 不设上限)。
|
|
283
295
|
dreamSummaryMaxInputs: [0, 100000],
|
|
284
296
|
// Issue #24 块1:锚定种子上限与级联深度(闭区间与 config.js 的 z.natural() 对齐)。
|