channel-worker 2.5.98 → 2.5.100

package/package.json

@@ -1,6 +1,6 @@
 {
   "name": "channel-worker",
-  "version": "2.5.98",
+  "version": "2.5.100",
   "description": "Channel Manager worker daemon — runs on remote machines to execute video pipeline jobs",
   "main": "lib/daemon.js",
   "bin": {

package/scripts/fetch_facebook_reel_stats.js

@@ -28,22 +28,17 @@ function parseViews(txt) {
   return Math.round(num * mul);
 }
 
-async function findReelsTabHref(page) {
-  return page.evaluate(() => {
-    const direct = document.querySelectorAll("a[href*='sk=reels_tab']");
-    for (const a of direct) { const h = a.getAttribute('href') || ''; if (h) return h.startsWith('http') ? h : `https://www.facebook.com${h}`; }
-    for (const a of document.querySelectorAll("a[href*='/profile.php?id=']")) {
-      const m = (a.getAttribute('href') || '').match(/\/profile\.php\?id=(\d+)/);
-      if (m) return `https://www.facebook.com/profile.php?id=${m[1]}&sk=reels_tab`;
-    }
-    for (const a of document.querySelectorAll("a[aria-label*='Dòng thời gian'], a[aria-label*='Timeline']")) {
-      const h = a.getAttribute('href') || '';
-      const m = h.match(/^\/([A-Za-z0-9._-]{3,})\/?(?:\?|$)/);
-      if (m && !['profile.php', 'reel', 'video', 'videos'].includes(m[1])) return `https://www.facebook.com/${m[1]}/?sk=reels_tab`;
-    }
-    return null;
-  }).catch(() => null);
-}
+// Tìm link tab Reels: DÙNG CHUNG với script đăng (upload_facebook), không giữ
+// bản riêng nữa. Bản riêng cũ chỉ có 3 chiến lược (sk=reels_tab / profile.php
+// / "Dòng thời gian") — trên TRANG CHỦ của Page hiện nay không có anchor nào
+// như thế, chỉ có shortcut /<id số>/ hoặc /<handle>/reels/ (chiến lược 4-5,
+// thêm ở script đăng 09/09). Đo 30h tới 10/09 15:15: 15/21 lượt bám bài hỏng
+// là "không tìm được link tab Reels" — Góc Người Trồng Nấm 6 lượt, Chuyện Nhà
+// Nông 3, Nông Trại Phục Linh 2… — trong khi CÙNG profile đó script đăng đêm
+// 09/09 tìm được tab để so trước/sau. Bản riêng còn thiếu cả bộ lọc "anchor
+// của bài trong bảng tin" (gốc 2 link page lạ sáng 10/09) nên có thể quét
+// nhầm tab Reels của page KHÁC mà không hay.
+const { discoverReelsTabUrl } = require('./upload_facebook').__testables;
 
 // Số người theo dõi của page, đọc ngay trên chính trang đang đứng (header hiện
 // ở mọi tab của page/profile) — không tốn thêm lượt mở profile nào. Ô
@@ -421,18 +416,71 @@ async function readAudiencePage(page, log) {
   return a;
 }
 
+// Trang Insights hỏng thì chụp lại — script này trước 10/09 không dump gì nên
+// 8 kênh kẹt chip "Hôm nay" hai ngày liền mà không có lấy một tấm ảnh để hiểu.
+// Ngoài ảnh, liệt kê mọi chữ có thể là nhãn khoảng thời gian kèm vị trí: để
+// biết chip thật đang ghi gì, và có cái "Hôm nay" lạ nào đứng TRƯỚC chip trong
+// DOM (currentRangeLabel lấy phần tử khớp đầu tiên) hay không.
+async function dumpInsightsFailure(page, tag, log) {
+  try {
+    const os = require('os'); const fs = require('fs'); const path = require('path');
+    const dir = path.join(os.tmpdir(), 'cm-worker-pw');
+    fs.mkdirSync(dir, { recursive: true });
+    const png = path.join(dir, `fb-${tag}-${Date.now()}.png`);
+    await page.screenshot({ path: png, fullPage: false, timeout: 8000 }).catch(() => {});
+    const labels = await page.evaluate(() => {
+      const clean = (v) => String(v || '').replace(/\s+/g, ' ').trim();
+      const out = [];
+      for (const e of document.querySelectorAll('div[role="button"],div,span')) {
+        const t = clean(e.innerText);
+        if (!t || t.length >= 70) continue;
+        if (!/(Hôm nay|Today|Tùy chỉnh|Custom|ngày qua|Last \d+ days|Năm nay|This year)/i.test(t)) continue;
+        const r = e.getBoundingClientRect();
+        out.push(`${e.tagName.toLowerCase()}[${e.getAttribute('role') || ''}] y=${Math.round(r.y)} w=${Math.round(r.width)} "${t}"`);
+        if (out.length >= 25) break;
+      }
+      return out;
+    }).catch(() => []);
+    labels.forEach((l, i) => log('info', `  ${tag} label[${i}] ${l}`));
+    let shot = null;
+    if (fs.existsSync(png) && typeof log.uploadDebugScreenshot === 'function') {
+      try { shot = await log.uploadDebugScreenshot(png, { tag }); } catch (e) { log('warn', `[insights] tải ảnh dump hỏng: ${e.message}`); }
+    }
+    log('warn', `[insights] dump ${tag} — url=${page.url()} screenshot=${shot?.signed_url || png}`,
+      shot ? { debug_screenshot: shot } : { debug_screenshot_local_path: png });
+  } catch {}
+}
+
 // Lượt nền: hai trang view + một trang đối tượng, rồi gửi thẳng số thô về API.
 // Việc khớp bài với idea và tính hiệu để lòi ra "bài cũ đang nổ" làm ở API —
 // worker không giữ trạng thái ngày hôm qua.
-async function runInsights({ page, payload, log }) {
-  // 7 ngày trước để làm ấm trang (lần điều hướng ĐẦU hay bị bỏ qua tham số),
-  // rồi mới tới ngày hôm qua.
-  const week = await readViewsPage(page, 'LAST_7D', log);
+//
+// THỨ TỰ (đổi 10/09): NGÀY HÔM QUA → FOLLOWER → 7 NGÀY, và "7 ngày" hỏng
+// KHÔNG chết cả lượt. Bản cũ đọc "7 ngày qua" trước (làm ấm trang) và ném lỗi
+// khi chip không đổi — mà trang đó chỉ để lấy danh sách bài. Đo 10/09: 8/63
+// kênh (09/09: 11/61) kẹt chip "Hôm nay" đúng ở trang này, trong khi trang
+// ngày hôm qua + follower của CHÍNH các kênh đó vẫn đọc được (log win-worker:
+// chip "Tùy chỉnh: 9 Tháng 9" ra đều). Một chip kẹt làm mất view hôm qua +
+// follower — hai số quan trọng nhất — cho cả ngày, /analytics báo "Chưa quét".
+// Ngày hôm qua tự có vòng nạp lại 3 lần nên không cần trang khác làm ấm.
+const DEFAULT_READERS = { readOneDay, readAudiencePage, readViewsPage, dump: dumpInsightsFailure };
+async function runInsights({ page, payload, log }, R = DEFAULT_READERS) {
   const yIso = vnYesterdayIso();
-  const yest = await readOneDay(page, yIso, log);
-  const audience = await readAudiencePage(page, log);
+  const yest = await R.readOneDay(page, yIso, log);
+  const audience = await R.readAudiencePage(page, log);
+  let week = { range: 'LAST_7D', label: '', total: null, pct: null, posts: [] };
+  let weekError = null;
+  try {
+    week = await R.readViewsPage(page, 'LAST_7D', log);
+  } catch (e) {
+    weekError = String((e && e.message) || e);
+    log('warn', `[insights] 7 ngày qua hỏng (${weekError}) — vẫn ghi ngày hôm qua + follower, chỉ mất danh sách bài`);
+    await R.dump(page, 'insights-week', log);
+  }
   if (yest.views == null && week.total == null) {
-    throw new Error('không đọc được tổng lượt xem trên trang Insights — FB đổi giao diện?');
+    throw new Error(weekError
+      ? `không đọc được cả ngày hôm qua lẫn 7 ngày — ${weekError}`
+      : 'không đọc được tổng lượt xem trên trang Insights — FB đổi giao diện?');
   }
   if (typeof log.apiRequest !== 'function') throw new Error('log.apiRequest không có — cần channel-worker ≥ 2.5.55');
   const d = await log.apiRequest('POST', '/analytics/fb-insights', {
@@ -448,6 +496,7 @@ async function runInsights({ page, payload, log }) {
     views_yesterday: yest.views, views_7d: week.total,
     posts: week.posts.length, matched: d?.matched ?? null,
     followers: audience.followers, unattributed: d?.unattributed ?? null,
+    ...(weekError ? { week_error: weekError } : {}),
   };
 }
 
@@ -463,7 +512,7 @@ async function run({ page, payload, log }) {
   if (!tabUrl) {
     await page.goto(page_url || 'https://www.facebook.com/', { waitUntil: 'domcontentloaded', timeout: 45_000 });
     await page.waitForTimeout(4000);
-    tabUrl = await findReelsTabHref(page);
+    tabUrl = await discoverReelsTabUrl(page, log); // có log → in mẫu href khi không khớp
   }
   if (!tabUrl) throw new Error('không tìm được link tab Reels của page');
   log('info', `[fb-stats] ${mode} · reels_tab: ${tabUrl.slice(0, 100)}`);
@@ -511,4 +560,4 @@ async function run({ page, payload, log }) {
   return { ok: true, mode, tiles: tiles.length, written: d?.written || 0, matched: d?.matched || 0, rising: d?.rising || 0, alerts: d?.alerts || 0, followers };
 }
 
-module.exports = { run, __testables: { parseViews, scrapeFollowers, parseExact, parseVnPostTime } };
+module.exports = { run, __testables: { parseViews, scrapeFollowers, parseExact, parseVnPostTime, runInsights, dumpInsightsFailure, discoverReelsTabUrl } };