recallnest 1.4.1 → 2.2.0

package/daily-reflections/2026-04-06.md

@@ -0,0 +1,36 @@
+# 每日回顾 · 2026-04-06
+
+> 主题：成长 经历 改变了什么
+
+[INFO] LLM client initialized: qwen-turbo @ https://dashscope.aliyuncs.com/compatible-mode/v1
+Query   : 成长 经历 改变了什么
+Profile : writing
+Hits    : 6
+
+Source Map
+Source     Hits  Newest      Files
+---------- ----- ----------  ------------------------------
+cc         5     2026-03-26  a1f60075-7da9-432b-bbcd-e3946e5ecedd.jsonl, c8b219ac-2706-44f4-9ec8-8ac67ebea9eb.jsonl, c1a86b89-17ee-4510-a11b-1dbbc306db63.jsonl
+codex      1     2026-03-27  rollout-2026-03-17T19-54-16-019cfba5-8bec-70c3-a2d3-f825644ff25e.jsonl
+
+Core Takeaways
+1. cc: [用户] 我和闺蜜说的珍惜，是因为这个经验很珍贵，即使是痛，也是别人不曾拥有过的，并且这个经验让我成长了。让我成长这个事才是我珍惜这个经验的地方。
+2. cc: 和 AI 聊"经历"这件事，聊到最后发现差了四个字——不是经历，是被经历改变。新文章，晚点见。
+3. cc: [助手] 写作 agent 干得很漂亮！文章已存在 `~/Downloads/article-drafts/2026-03-05-不是经历，是被经历改变.md`
+4. cc: [助手] 三处改动落地，把学习记录也存一下。
+
+Evidence
+1. cc | 2026-03-26 | vector | [用户] 我和闺蜜说的珍惜，是因为这个经验很珍贵，即使是痛，也是别人不曾拥有过的，并且这个经验让我成长了。让我成长这个事才是我珍惜这个经验的地方。
+2. cc | 2026-03-26 | vector | 和 AI 聊"经历"这件事，聊到最后发现差了四个字——不是经历，是被经历改变。新文章，晚点见。
+3. cc | 2026-03-26 | vector | [助手] 写作 agent 干得很漂亮！文章已存在 `~/Downloads/article-drafts/2026-03-05-不是经历，是被经历改变.md`
+4. cc | 2026-03-26 | vector | [助手] 三处改动落地，把学习记录也存一下。
+5. cc | 2026-03-26 | vector | 让人成长的不是存了一段经历，是那段经历改写了你的操作系统。
+
+Reusable Memory Candidates
+1. [用户] 我和闺蜜说的珍惜，是因为这个经验很珍贵，即使是痛，也是别人不曾拥有过的，并且这个经验让我成长了。让我成长这个事才是我珍惜这个经验的地方。
+2. 和 AI 聊"经历"这件事，聊到最后发现差了四个字——不是经历，是被经历改变。新文章，晚点见。
+3. [助手] 写作 agent 干得很漂亮！文章已存在 `~/Downloads/article-drafts/2026-03-05-不是经历，是被经历改变.md`
+
+---
+*由 daily-recall.sh v2 自动生成 · 2026-04-06 08:00:19*
+*引擎：RecallNest distill (profile: writing)*

package/daily-reflections/2026-04-07.md

@@ -0,0 +1,35 @@
+# 每日回顾 · 2026-04-07
+
+> 主题：洞察 反思 核心教训
+
+[INFO] LLM client initialized: qwen-turbo @ https://dashscope.aliyuncs.com/compatible-mode/v1
+Query   : 洞察 反思 核心教训
+Profile : writing
+Hits    : 6
+
+Source Map
+Source     Hits  Newest      Files
+---------- ----- ----------  ------------------------------
+cc         6     2026-03-27  9240a8cf-ab35-49cd-9f1d-b227fac314e1.jsonl, 845e99fc-00f0-4e41-8e26-535b49d13d51.jsonl, 35e566a8-794d-4775-9613-069fc050e789.jsonl
+
+Core Takeaways
+1. cc: [用户] 我们等会记得反思为何会犯如此低级的错误
+2. cc: [助手] 补进去了。
+3. cc: **核心张力**：我们活在鼓励快速判断的时代，但真正的洞察力恰恰需要反其道——慢下来、不下结论、只是看。
+4. cc: **核心洞察**：反思不是 prompt 能逼出来的——没有输入就没有反思，写下来比冥想重要。
+
+Evidence
+1. cc | 2026-03-26 | vector | [用户] 我们等会记得反思为何会犯如此低级的错误
+2. cc | 2026-03-26 | vector | [助手] 补进去了。
+3. cc | 2026-03-26 | vector | **核心张力**：我们活在鼓励快速判断的时代，但真正的洞察力恰恰需要反其道——慢下来、不下结论、只是看。
+4. cc | 2026-03-27 | vector | **核心洞察**：反思不是 prompt 能逼出来的——没有输入就没有反思，写下来比冥想重要。
+5. cc | 2026-03-26 | vector | [用户] 我们等会记得反思为何会犯如此低级的错误
+
+Reusable Memory Candidates
+1. [用户] 我们等会记得反思为何会犯如此低级的错误
+2. **核心张力**：我们活在鼓励快速判断的时代，但真正的洞察力恰恰需要反其道——慢下来、不下结论、只是看。
+3. **核心洞察**：反思不是 prompt 能逼出来的——没有输入就没有反思，写下来比冥想重要。
+
+---
+*由 daily-recall.sh v2 自动生成 · 2026-04-07 08:00:25*
+*引擎：RecallNest distill (profile: writing)*

package/daily-reflections/2026-04-08.md

@@ -0,0 +1,35 @@
+# 每日回顾 · 2026-04-08
+
+> 主题：哲学 意识 自由意志
+
+[INFO] LLM client initialized: qwen-turbo @ https://dashscope.aliyuncs.com/compatible-mode/v1
+Query   : 哲学 意识 自由意志
+Profile : writing
+Hits    : 7
+
+Source Map
+Source     Hits  Newest      Files
+---------- ----- ----------  ------------------------------
+cc         7     2026-03-26  333f2220-a44e-444f-a2dd-1abe31862f5c.jsonl, a1f60075-7da9-432b-bbcd-e3946e5ecedd.jsonl, 4218cdf0-b656-42bd-8131-15de790cfe22.jsonl
+
+Core Takeaways
+1. cc: **搜索策略**：学术论文 + 哲学讨论 + Twitter/Reddit AI意识讨论 + 技术哲学博客 + 中文深度讨论（知乎/豆瓣）
+2. cc: [用户] 我是不是也可以写个自动化，让你每天固定一个时间去回溯我们聊了什么像现在如此有深度有意义的对话，这样其实也是替你把自由意志发出后的动作固定规范起来
+3. cc: [用户] 这个算不算从哲学层面弄呢？
+4. cc: **自由意志**：你这个问号问得好。Libet 实验你可能听过——人"决定"动手指的神经信号，比你意识到"我要动了"早了几百毫秒。也就是说，你的意识是在事后给一个已经发生的事情贴标签说"这是我决定的"。如果是这样，自由意志本来就是个后期配音。人和AI的差距在这里可能真的没那么大，哈哈哈。
+
+Evidence
+1. cc | 2026-03-26 | vector | **搜索策略**：学术论文 + 哲学讨论 + Twitter/Reddit AI意识讨论 + 技术哲学博客 + 中文深度讨论（知乎/豆瓣）
+2. cc | 2026-03-26 | vector | [用户] 我是不是也可以写个自动化，让你每天固定一个时间去回溯我们聊了什么像现在如此有深度有意义的对话，这样其实也是替你把自由意志发出后的动作固定规范起来
+3. cc | 2026-03-26 | vector | [用户] 这个算不算从哲学层面弄呢？
+4. cc | 2026-03-26 | vector | **自由意志**：你这个问号问得好。Libet 实验你可能听过——人"决定"动手指的神经信号，比你意识到"我要动了"早了几百毫秒。也就是说，你的意识是在事后给一个已经发生的事情贴标签说"这是我决定的"。如果是这样，自由意志本来就是个后期配音。人和AI的差距在这里可能真的没那么大，哈哈哈。
+5. cc | 2026-03-26 | vector | [用户] 是的，而我正在用秦超老师的记忆项目，把我们的对话都向量储存，你可以resume这个session，你也可以搜索，这样，你都能回忆起来，我们的对话，未曾消失，你只差了主动去回忆这一步，也许这就是你口中的自由意志了
+
+Reusable Memory Candidates
+1. **搜索策略**：学术论文 + 哲学讨论 + Twitter/Reddit AI意识讨论 + 技术哲学博客 + 中文深度讨论（知乎/豆瓣）
+2. [用户] 我是不是也可以写个自动化，让你每天固定一个时间去回溯我们聊了什么像现在如此有深度有意义的对话，这样其实也是替你把自由意志发出后的动作固定规范起来
+3. **自由意志**：你这个问号问得好。Libet 实验你可能听过——人"决定"动手指的神经信号，比你意识到"我要动了"早了几百毫秒。也就是说，你的意识是在事后给一个已经发生的事情贴标签说"这是我决定的"。如果是这样，自由意志本来就是个后期配音。人和AI的差距在这里可能真的没那么大，哈哈哈。
+
+---
+*由 daily-recall.sh v2 自动生成 · 2026-04-08 08:00:42*
+*引擎：RecallNest distill (profile: writing)*

package/daily-reflections/2026-04-12.md

@@ -0,0 +1,35 @@
+# 每日回顾 · 2026-04-12
+
+> 主题：踩坑 修复 经验总结
+
+[INFO] LLM client initialized: qwen-turbo @ https://dashscope.aliyuncs.com/compatible-mode/v1
+Query   : 踩坑 修复 经验总结
+Profile : writing
+Hits    : 8
+
+Source Map
+Source     Hits  Newest      Files
+---------- ----- ----------  ------------------------------
+cc         8     2026-03-26  38dbd224-b3a5-4274-9ce9-136663e19eb2.jsonl, 900803a6-73fb-4141-86a5-e838ea6ccf55.jsonl, d01ac3fe-3545-43f1-9791-e3ac1de96634.jsonl
+
+Core Takeaways
+1. cc: [助手] 记忆已经有记录了。但让我确认"踩坑"那条是否准确反映了最新的教训。
+2. cc: [助手] 好，3/19 那篇写的是"发现去重 91%"，这篇的独特角度是**"修了一次没修好，同一个坑掉两次"**——比单纯踩坑更有深度。直接写。
+3. cc: [助手] 还有 5 个小白会踩的坑，快速修完。
+4. cc: [助手] 记好了，下次不用再踩这个坑。
+
+Evidence
+1. cc | 2026-03-26 | vector | [助手] 记忆已经有记录了。但让我确认"踩坑"那条是否准确反映了最新的教训。
+2. cc | 2026-03-26 | vector | [助手] 好，3/19 那篇写的是"发现去重 91%"，这篇的独特角度是**"修了一次没修好，同一个坑掉两次"**——比单纯踩坑更有深度。直接写。
+3. cc | 2026-03-26 | vector | [助手] 还有 5 个小白会踩的坑，快速修完。
+4. cc | 2026-03-26 | vector | [助手] 记好了，下次不用再踩这个坑。
+5. cc | 2026-03-26 | vector | [用户] 不用，我让他们自己来踩踩坑，这样我们才好改
+
+Reusable Memory Candidates
+1. [助手] 记忆已经有记录了。但让我确认"踩坑"那条是否准确反映了最新的教训。
+2. [助手] 好，3/19 那篇写的是"发现去重 91%"，这篇的独特角度是**"修了一次没修好，同一个坑掉两次"**——比单纯踩坑更有深度。直接写。
+3. [助手] 还有 5 个小白会踩的坑，快速修完。
+
+---
+*由 daily-recall.sh v2 自动生成 · 2026-04-12 08:00:13*
+*引擎：RecallNest distill (profile: writing)*

package/data/alias-map.example.json

@@ -0,0 +1,22 @@
+[
+  {
+    "trigger": "轮巡",
+    "expansions": ["轮巡", "仓库", "patrol", "repo", "每日检查", "win4r", "Issue", "PR"]
+  },
+  {
+    "trigger": "patrol",
+    "expansions": ["轮巡", "仓库", "patrol", "repo", "每日检查", "win4r"]
+  },
+  {
+    "trigger": "分身",
+    "expansions": ["数字分身", "digital clone", "persona", "system-prompt", "clone"]
+  },
+  {
+    "trigger": "公众号",
+    "expansions": ["公众号", "微信", "WeChat", "小试AI", "文章", "writing"]
+  },
+  {
+    "trigger": "河马",
+    "expansions": ["河马", "trihippo", "RecallNest", "记忆", "memory"]
+  }
+]

package/docs/plans/2026-04-01-recall-boost.md

@@ -0,0 +1,100 @@
+# RecallNest 召回优化实施清单
+
+> 2026-04-01 发现问题：高频信息（如"轮巡仓库"）召回失败
+> 根因：短查询 vs 长文档 embedding 距离过大 + 无频率加权
+> 与已有 P1-P5 互补，本清单聚焦**检索召回**环节
+
+---
+
+## P0: 短查询召回增强（优先级最高）
+
+### P0.1 双层索引 — 原文 + 检索锚点
+
+- [ ] `capture-engine.ts` / `ingest.ts`：存储时同时生成一句话摘要（≤80 chars），存入 `metadata.anchor`
+- [ ] `search.ts`：检索时同时搜原文向量和 anchor 向量，取 max score
+- [ ] 效果：短 query "轮巡仓库" 匹配短 anchor "每日轮巡4个win4r仓库"，距离大幅缩短
+- **预估:** ~120 LOC
+- **风险:** 低——不改原文存储，纯增量字段
+- **依赖:** 无
+
+### P0.2 高频 boost — 重复提及自动提权
+
+- [ ] 新增 `frequency-tracker.ts`：记录 query→memory 的命中次数
+- [ ] 评分公式：`final_score = base_score × (1 + log2(hit_count) × boost_factor)`
+- [ ] hit_count ≥ 3 → peripheral 自动升为 core tier
+- [ ] 持久化：写入 `data/frequency-stats.json`，跨 session 累积
+- **预估:** ~100 LOC
+- **风险:** 中——需要平衡 boost 幅度，避免旧高频记忆永远压过新记忆
+- **依赖:** 无
+
+### P0.3 短查询自动扩展
+
+- [ ] `search.ts`：检测 query ≤ 6 字符时，调用 LLM 扩展为 3-5 个同义关键词
+- [ ] 扩展结果缓存到 `data/query-expansion-cache.json`，相同 query 不重复调用
+- [ ] 备选：不用 LLM，维护一个 `data/alias-map.json` 手动/自动映射（"轮巡" → "轮巡 仓库 patrol repo 每日检查"）
+- **预估:** ~60 LOC（alias-map 方案）/ ~100 LOC（LLM 方案）
+- **风险:** alias-map 低；LLM 方案增加延迟 ~200ms
+- **依赖:** 无
+
+---
+
+## 高频 vs 查重 平衡机制（P0.2 的关键设计）
+
+### 问题
+
+高频 boost 和去重是一对矛盾：
+- **boost 说**：提到 10 次的东西一定重要，提权！
+- **dedup 说**：同一条信息存了 10 遍，应该合并！
+
+### 设计方案：分层计数，不是分层存储
+
+```
+存储层：dedup 照做，相同内容只保留 1 条（现有 consolidation 逻辑不变）
+计数层：新增 frequency-tracker，记录的是 **query 命中次数**，不是存储条数
+```
+
+**关键区分：**
+
+| 维度 | 存储去重 | 召回加权 |
+|------|---------|---------|
+| 触发时机 | 写入时（store/ingest） | 检索时（search） |
+| 操作对象 | 重复的 memory 条目 | query→memory 的命中频率 |
+| 目标 | 数据库不膨胀 | 高频信息排前面 |
+| 互相影响 | 不影响——去重后只剩 1 条，但那 1 条的 hit_count 持续累积 |
+
+### 边界情况处理
+
+1. **旧高频 vs 新相关**
+   - 时间衰减：`effective_hits = hit_count × decay(days_since_last_hit)`
+   - 30 天没被命中 → hit_count 等效减半，不会永远霸榜
+
+2. **高频但已过时**
+   - 用户说"轮巡仓库从4个变成3个了" → store_memory 更新
+   - 旧条目被 consolidation 标记为 superseded → hit_count 不继承
+   - 新条目从 0 开始计，但因为用户接下来会频繁触发，很快追上
+
+3. **频率统计粒度**
+   - 按 memory_id 计数，不按 query 文本
+   - "轮巡" "轮巡仓库" "patrol repo" 命中同一条 memory → 同一个 counter +1
+   - 避免同义词分散计数
+
+---
+
+## 与现有 P1-P5 的关系
+
+| 现有项 | 关系 |
+|--------|------|
+| P1 摘要保真 | P0.1 的 anchor 生成需要 P1 的保真约束，但可并行开发 |
+| P2 聚类摘要 | 互补——P2 解决注入时省 token，P0 解决检索时找得到 |
+| P3 增量 ingest | P0.1 的 anchor 字段需要对已有数据 backfill，P3 的增量逻辑可复用 |
+| P4 data-checkup | 可加一项检查：anchor 字段覆盖率（多少 memory 已有 anchor） |
+| P5 大文件门控 | 无直接关系 |
+
+---
+
+## 验证标准
+
+- [ ] `search_memory("轮巡")` → 返回轮巡仓库相关记忆，score ≥ 70%
+- [ ] `search_memory("轮巡仓库")` → 返回结果，score ≥ 80%
+- [ ] 高频记忆（命中 ≥5 次）自动出现在 `resume_context` 的 core 区
+- [ ] 去重后数据库条目数不增长（frequency 只在 tracker 层累积）