channel-worker 2.5.76 → 2.5.78

package/package.json

@@ -1,6 +1,6 @@
 {
   "name": "channel-worker",
-  "version": "2.5.76",
+  "version": "2.5.78",
   "description": "Channel Manager worker daemon — runs on remote machines to execute video pipeline jobs",
   "main": "lib/daemon.js",
   "bin": {

package/scripts/fetch_facebook_reel_stats.js

@@ -1,11 +1,13 @@
 // Đọc LƯỢT XEM từng reel trên tab Reels của page (profile.php?id=…&sk=reels_tab)
-// rồi gửi về API /analytics/post-stats. Giai đoạn 2 của bộ nhặt KOL: biết bài
-// từ KOL nào có view để tự chỉnh trọng số. 1 lượt/kênh/ngày, chỉ đọc — không
-// bấm gì ngoài cuộn trang.
+// rồi gửi về API /analytics/post-stats. Chỉ đọc — không bấm gì ngoài cuộn trang.
 //
-// Payload: { channel_id, profile_id, page_url? }
+// Payload: { channel_id, profile_id, page_url?, mode, scroll }
 //   page_url: link page (nếu có) — không có thì tự tìm reels_tab từ trang chủ
-//   như upload_facebook (anchor /profile.php?id=… hoặc "Dòng thời gian của X").
+//     như upload_facebook (anchor /profile.php?id=… hoặc "Dòng thời gian của X").
+//   mode: 'deep' (mặc định) = lượt nền 06:30, cuộn sâu cả page + đọc follower
+//         'fresh'           = lượt bám bài (giờ đăng +2h/+6h), cuộn nông, bài
+//                             mới nằm ngay đầu tab nên không cần cuộn xa
+//   scroll: số lần cuộn, ghi đè mặc định theo mode (6 / 2)
 //
 // Tile reels_tab: <a href="/reel/<id>/" aria-label="Bản xem trước ô thước phim">
 // chứa số lượt xem dạng rút gọn tiếng Việt: "1,2 N" (nghìn), "3,4 Tr" (triệu),
@@ -42,6 +44,41 @@ async function findReelsTabHref(page) {
   }).catch(() => null);
 }
 
+// Số người theo dõi của page, đọc ngay trên chính trang đang đứng (header hiện
+// ở mọi tab của page/profile) — không tốn thêm lượt mở profile nào. Ô
+// platform_accounts.stats.followers có sẵn từ lâu nhưng trống 279/279 kênh vì
+// chưa từng có ai ghi vào.
+//
+// KHÔNG quét cả body rồi lấy match ĐẦU TIÊN: đo thật 2026-09-05 trên kênh
+// "Đồ chơi trẻ em 01" ra đúng "1" — trong trang có sẵn chuỗi "… 1 người theo
+// dõi" ở chỗ khác, nó chặn trước số thật của header. Thứ tự ưu tiên:
+//   1. link /followers của chính header (nguồn chắc nhất)
+//   2. nếu không có, quét phần ĐẦU trang (header nằm ở đây) và lấy số LỚN NHẤT
+// Trả về cả danh sách ứng viên để log soi được khi Facebook đổi giao diện.
+const FOLLOWER_RE = /([\d][\d.,]*\s*(?:N|Tr|K|M|B|nghìn|triệu|tỷ)?)\s*(?:người theo dõi|người follow|followers)/gi;
+
+async function scrapeFollowers(page) {
+  return page.evaluate((reSrc) => {
+    const out = { picked: null, from: '', candidates: [] };
+    const mk = () => new RegExp(reSrc, 'gi');
+
+    // 1. Link "N người theo dõi" trong header — href chứa /followers.
+    for (const a of document.querySelectorAll("a[href*='followers']")) {
+      const t = (a.innerText || '').replace(/\s+/g, ' ').trim();
+      const m = mk().exec(t);
+      if (m) { out.picked = m[1].trim(); out.from = 'link'; out.candidates.push(t.slice(0, 60)); return out; }
+    }
+
+    // 2. Phần đầu trang: header đứng trên cùng, nên cắt bớt đuôi để tránh vớ
+    //    phải chuỗi trong danh sách gợi ý/bình luận phía dưới.
+    const head = (document.body?.innerText || '').slice(0, 3000);
+    let m; const re = mk();
+    while ((m = re.exec(head))) out.candidates.push(m[1].trim());
+    if (out.candidates.length) { out.from = 'head'; out.picked = out.candidates.slice(); }
+    return out;
+  }, FOLLOWER_RE.source).catch(() => ({ picked: null, from: 'error', candidates: [] }));
+}
+
 async function scrapeTiles(page) {
   return page.evaluate(() => {
     const out = new Map();
@@ -67,8 +104,11 @@ async function scrapeTiles(page) {
 }
 
 async function run({ page, payload, log }) {
-  const { channel_id, page_url } = payload || {};
+  const { channel_id, page_url, mode = 'deep' } = payload || {};
   if (!channel_id) throw new Error('payload.channel_id required');
+  const scrolls = Number.isFinite(Number(payload?.scroll)) && Number(payload.scroll) > 0
+    ? Number(payload.scroll)
+    : (mode === 'fresh' ? 2 : 6);
   let tabUrl = null;
   if (page_url && /sk=reels_tab/.test(page_url)) tabUrl = page_url;
   if (!tabUrl) {
@@ -77,19 +117,34 @@ async function run({ page, payload, log }) {
     tabUrl = await findReelsTabHref(page);
   }
   if (!tabUrl) throw new Error('không tìm được link tab Reels của page');
-  log('info', `[fb-stats] reels_tab: ${tabUrl.slice(0, 100)}`);
+  log('info', `[fb-stats] ${mode} · reels_tab: ${tabUrl.slice(0, 100)}`);
   await page.goto(tabUrl, { waitUntil: 'domcontentloaded', timeout: 45_000 });
   await page.waitForTimeout(5000);
-  // Cuộn vài lần để tải thêm tile (mỗi lần ~12 reel). 6 lần ≈ 60-80 reel gần
-  // nhất — đủ cho cửa sổ 28 ngày của bộ chỉnh trọng số.
+
+  // Follower chỉ đọc ở lượt nền: lượt bám bài chạy 2-3 lần/ngày mà con số này
+  // gần như không đổi trong ngày. Đọc hỏng thì bỏ qua — KHÔNG được làm hỏng
+  // lượt đọc view, hai việc độc lập nhau.
+  let followers = null;
+  if (mode === 'deep') {
+    const f = await scrapeFollowers(page);
+    // Từ link header thì tin thẳng; quét phần đầu trang thì lấy số LỚN NHẤT
+    // trong các ứng viên — chuỗi nhiễu ("1 người theo dõi") luôn thua số thật.
+    const nums = (Array.isArray(f.picked) ? f.picked : [f.picked]).map(parseViews).filter((n) => Number.isFinite(n) && n > 0);
+    followers = nums.length ? Math.max(...nums) : null;
+    log('info', `[fb-stats] follower: ${followers ?? 'không đọc được'} (nguồn ${f.from || 'none'}, ứng viên: ${JSON.stringify(f.candidates).slice(0, 200)})`);
+  }
+
+  // Cuộn để tải thêm tile (mỗi lần ~12 reel). 6 lần ≈ 60-80 reel gần nhất — đủ
+  // cho cửa sổ 28 ngày của bộ chỉnh trọng số. Lượt bám bài chỉ cần 2.
   let last = 0;
-  for (let i = 0; i < 6; i++) {
+  for (let i = 0; i < scrolls; i++) {
     await page.mouse.wheel(0, 2400).catch(() => {});
     await page.waitForTimeout(1800);
     const n = await page.evaluate(() => document.querySelectorAll("a[href*='/reel/']").length).catch(() => 0);
     if (n === last) break;
     last = n;
   }
+  const scannedAt = new Date().toISOString();
   const tiles = await scrapeTiles(page);
   const items = tiles.map((t) => ({ ...t, views: parseViews(t.views_text) })).filter((t) => t.views != null);
   log('info', `[fb-stats] ${tiles.length} tile, đọc được lượt xem ${items.length}` + (items[0] ? ` (vd ${items[0].post_id} "${items[0].views_text}" → ${items[0].views})` : ''));
@@ -100,11 +155,11 @@ async function run({ page, payload, log }) {
   if (typeof log.apiRequest !== 'function') throw new Error('log.apiRequest không có — cần channel-worker ≥ 2.5.55');
   // api-client.request trả thẳng `data` (ném lỗi khi success=false).
   const d = await log.apiRequest('POST', '/analytics/post-stats', {
-    channel_id, platform: 'facebook',
+    channel_id, platform: 'facebook', mode, at: scannedAt, followers,
     items: items.map(({ post_id, views, views_text }) => ({ post_id, views, views_text })),
   });
-  log('info', `[fb-stats] đã ghi ${d?.written} bài, khớp idea ${d?.matched}`);
-  return { ok: true, tiles: tiles.length, written: d?.written || 0, matched: d?.matched || 0 };
+  log('info', `[fb-stats] đã ghi ${d?.written} điểm đo, khớp idea ${d?.matched}, đang lên ${d?.rising || 0}, chuông ${d?.alerts || 0}`);
+  return { ok: true, mode, tiles: tiles.length, written: d?.written || 0, matched: d?.matched || 0, rising: d?.rising || 0, alerts: d?.alerts || 0, followers };
 }
 
-module.exports = { run, __testables: { parseViews } };
+module.exports = { run, __testables: { parseViews, scrapeFollowers } };