candidate-pool 3.0.0 → 3.0.2

package/CHANGELOG.md

@@ -2,6 +2,51 @@
 
 所有变动按 **Conventional Commits** 约定分类，由 `changelogen` 自动生成。
 
+## v3.0.2
+
+[compare changes](https://github.com/GuoSirius/candidate-pool/compare/v3.0.1...v3.0.2)
+
+### 🐛 缺陷修复 (Bug Fixes)
+
+- Code review 必改项修复（正则剥前缀、迁移标记、keep-alive、默认双写、ua与waf防护、engines） ([4955417](https://github.com/GuoSirius/candidate-pool/commit/4955417))
+
+### 📚 文档 (Documentation)
+
+- 目录整理与定时任务真值源重建 ([b3a61ed](https://github.com/GuoSirius/candidate-pool/commit/b3a61ed))
+- 收紧文档序号（05-复盘改03、npm-publish 02/03改01/02），同步全部引用 ([1b82665](https://github.com/GuoSirius/candidate-pool/commit/1b82665))
+
+### 📦 杂项维护 (Chores)
+
+- 每日实时初筛 2026-10-22 ([f515912](https://github.com/GuoSirius/candidate-pool/commit/f515912))
+- 盘前选股归档 2026-10-22 ([ad3936e](https://github.com/GuoSirius/candidate-pool/commit/ad3936e))
+
+### ❤️ Contributors
+
+- 郭之存 ([@siriusSupreme](https://github.com/siriusSupreme))
+
+## v3.0.1
+
+[compare changes](https://github.com/GuoSirius/candidate-pool/compare/v3.0.0...v3.0.1)
+
+### 🚀 新功能 (Features)
+
+- **preopen:** 归档补贴线样本与淘汰统计支撑日后调参 ([c8d206b](https://github.com/GuoSirius/candidate-pool/commit/c8d206b))
+- 次日候选快照记录当时规则常量与生成时间 ([3cc1b72](https://github.com/GuoSirius/candidate-pool/commit/3cc1b72))
+
+### 📚 文档 (Documentation)
+
+- **eod:** 尾盘原始存档永久保留策略落注释并补复盘第8.6节 ([6ba4fef](https://github.com/GuoSirius/candidate-pool/commit/6ba4fef))
+
+### 📦 杂项维护 (Chores)
+
+- **eod:** 尾盘口径版本号升到 2 并写明版本切段规则 ([5a6921a](https://github.com/GuoSirius/candidate-pool/commit/5a6921a))
+- Obs run 2026-10-22 (0 candidates) ([4d44623](https://github.com/GuoSirius/candidate-pool/commit/4d44623))
+- 尾盘选股 2026-10-22 ([2e0e85b](https://github.com/GuoSirius/candidate-pool/commit/2e0e85b))
+
+### ❤️ Contributors
+
+- 郭之存 ([@siriusSupreme](https://github.com/siriusSupreme))
+
 ## v3.0.0
 
 [compare changes](https://github.com/GuoSirius/candidate-pool/compare/v2.2.0...v3.0.0)

package/build_universe.js

@@ -23,6 +23,9 @@ const path = require('path');
 const https = require('https');
 const { now } = require('./time');
 const paths = require('./paths');
+// UA 与 WAF 嗅探与主流程同源：残缺 UA（裸 "Mozilla/5.0"）本身就是风控指纹特征；
+// WAF 跳转页若不识别会静默「少抓几只」，必须显式报错（2026-10-22 code review #8）。
+const { looksLikeWaf, UA } = require('./eod/lib/http');
 
 // 输出跟随工作目录（见 paths.js）：默认 <仓库根>/candidates.json
 const OUT = paths.candidatesFile();
@@ -114,7 +117,7 @@ function getRaw(url, retries = 3) {
         return resolve(await new Promise((res, rej) => {
           const req = https.get(url, {
             timeout: 20000,
-            headers: { 'User-Agent': 'Mozilla/5.0', 'Referer': 'https://gu.qq.com/' },
+            headers: { 'User-Agent': UA, 'Referer': 'https://gu.qq.com/' },
           }, r => {
             const chunks = [];
             r.on('data', c => chunks.push(c));
@@ -132,6 +135,9 @@ function getRaw(url, retries = 3) {
 async function fetchBatch(codes) {
   const buf = await getRaw('https://qt.gtimg.cn/q=' + codes.join(','));
   const txt = decodeGbk(buf);
+  // WAF 跳转页识别：命中的批次直接抛错（调用方按「失败」计数并打印），
+  // 而不是让正则静默匹配不到、把整批票当作「代码不存在」丢掉。
+  if (looksLikeWaf(txt)) throw new Error('被接口反爬拦截（WAF 跳转页），请稍后重跑');
   const out = {};
   for (const seg of txt.split(';')) {
     const m = seg.match(/v_([a-z]{2}\d{6})="([^"]*)"/);

package/db/clients.js

@@ -18,16 +18,22 @@ const has = (argv, flag) => argv.includes(flag);
  *
  * | 参数      | 远程 D1        | 本地 db/local.db |
  * |-----------|----------------|------------------|
- * | （无）    | 有凭据则写     | 不写             |
+ * | （无）本机 | 写             | 写（2026-10-22 起，与 ops/01 文档表格及尾盘 targetArgv 口径对齐） |
+ * | （无）CI  | 写             | 不写             |
  * | --local   | 不写           | 写               |
- * | --both    | 有凭据则写     | 写               |
+ * | --both    | 写             | 写               |
+ *
+ * 无显式参数时按「本机双写 / CI 只远程」取默认（判据 GITHUB_ACTIONS，
+ * 与 eod/lib/store_d1.js::targetArgv 同一口径）——此前本机裸跑只写远程，
+ * 导致本地库有尾盘数据却没有候选池快照，复盘缺半边。
  *
  * @param {string[]} argv 命令行参数，默认 process.argv
  * @returns {{targets: Array<{name: 'remote'|'local', client: object, file?: string}>, notes: string[]}}
  *   notes 是需要调用方打印的提示（例如缺少远程凭据）。
  */
 function resolveTargets(argv = process.argv) {
-  const wantLocal = has(argv, '--local') || has(argv, '--both');
+  const explicit = has(argv, '--local') || has(argv, '--both');
+  const wantLocal = explicit ? has(argv, '--local') || has(argv, '--both') : !process.env.GITHUB_ACTIONS;
   const wantRemote = has(argv, '--both') || !has(argv, '--local');
   const targets = [];
   const notes = [];

package/db/persist.js

@@ -39,10 +39,12 @@ const BASE_Q = `INSERT OR IGNORE INTO stock_base (code,name,sector,updated_at) V
 
 // 惰性迁移：为既有 D1 / 本地 SQLite 补上 run_at 列（新库由 schema.sql 直接建好）。
 // 两端都会跑，先到者成功、后到者捕获「列已存在」忽略即可。
-let _migrated = false;
+// 「已迁移」必须按 client 记（WeakSet）而非全局布尔：--both 时同一进程先后写
+// remote + local 两个 client，全局旗标会让第二个库永远跳过 ALTER（静默缺列）。
+const _migrated = new WeakSet();
 async function ensureColumns(client) {
-  if (_migrated) return;
-  _migrated = true;
+  if (_migrated.has(client)) return;
+  _migrated.add(client);
   for (const sql of [
     'ALTER TABLE pick_record ADD COLUMN run_at TEXT',
     'ALTER TABLE pick_record ADD COLUMN vol_ratio REAL',

package/db/write_live.js

@@ -1,6 +1,7 @@
 'use strict';
 // 实时入库：读取「最近一次」快照，写入
-//   Cloudflare D1（默认，不写本地）/ 本地 SQLite（--local）/ 两边都写（--both）。
+//   本机裸跑默认双写（远程 D1 + 本地 SQLite，2026-10-22 起与尾盘口径一致）；
+//   CI（GITHUB_ACTIONS）默认只写远程；--local / --both 可显式覆盖。
 // 由 run_today.cmd/sh 在 gen_candidates 之后链式调用 —— 本机任务用 --both，
 // 这样一次运行就让本地库与线上库同时前进，不会出现「一边新一边旧」。
 // 凭据缺失或入库失败时：打印告警并退出 0（不阻断报告生成本身）。