channel-worker 2.5.132 → 2.5.133

package/lib/command-poller.js

@@ -388,29 +388,8 @@ class CommandPoller {
         return;
       }
 
-      // Danh sách page đã liên kết với tài khoản Shopee — đi CHUNG lượt này vì
-      // nó dùng đúng phiên vừa mở, thêm một request chứ không thêm lần mở
-      // profile. LỖI MỀM: đọc hỏng thì mất phần cảnh báo liên kết, không được
-      // kéo theo cả lượt đồng bộ click/đơn (đó mới là việc chính).
-      let mediaAccounts = null;
-      let mediaError = null;
-      try {
-        const media = await report.fetchSocialMediaAccounts(conn.context, {
-          log: (message) => console.log(message),
-        });
-        if (media.status === 'ok') mediaAccounts = media.accounts;
-        else mediaError = media.reason || media.status;
-      } catch (err) {
-        mediaError = String(err.message || err).slice(0, 200);
-      }
-      if (mediaError) console.warn(`[shopee-report] không đọc được danh sách liên kết: ${mediaError}`);
-
       const saved = await this.api.affiliateReportResult(result.rows, {
         clicks: clickResult.rows,
-        // `null` = KHÔNG đọc được, khác hẳn `[]` = đọc được và tài khoản chưa
-        // liên kết page nào. API phải phân biệt để không xoá sạch bản ghi cũ
-        // chỉ vì một lượt đọc hỏng.
-        media_accounts: mediaAccounts,
         last_report_date: result.last_report_date,
         last_update_time: result.last_update_time,
         from: result.from,
@@ -427,8 +406,6 @@ class CommandPoller {
           click_saved: saved?.click_saved || 0,
           click_matched: saved?.click_matched || 0,
           click_unmatched: saved?.click_unmatched || 0,
-          media_accounts: mediaAccounts ? mediaAccounts.length : null,
-          media_error: mediaError || undefined,
           last_report_date: result.last_report_date,
         },
       });

package/lib/shopee-report.js

@@ -183,78 +183,4 @@ async function fetchClickReport(ctx, {
   }
 }
 
-// Danh sách tài khoản mạng xã hội ĐÃ LIÊN KẾT với tài khoản affiliate — cùng
-// thứ trang `account_setting` hiện ở tab "Media Information".
-//
-// KHÔNG mở account_setting và KHÔNG bấm tab: đo thật 22/09/2026 trên phiên
-// Shopee1, endpoint này trả đủ dữ liệu khi gọi từ MỘT tab affiliate bất kỳ
-// (thử từ /dashboard). Đi đường DOM thì phải mở thêm trang, bấm đúng nhãn
-// tiếng Anh "Media Information", và nhãn đó đổi theo ngôn ngữ giao diện.
-//
-// Mỗi dòng có `user_id` là ID Facebook THẬT của page (vd 1298751909986110) —
-// đúng con số nằm trong link `facebook.com/profile.php?id=…`. Nhờ vậy việc so
-// khớp với kênh của mình không phải parse URL, vốn có nhiều biến thể
-// (?referral_source=…, /<handle>/, m.facebook.com…).
-//
-// `platform`: 6 = Facebook, 3 = TikTok (đo được trên tài khoản thật; các mã
-// khác giữ nguyên số để sau này đọc lại, không đoán tên).
-const SM_PLATFORM = { 6: 'facebook', 3: 'tiktok' };
-
-async function fetchSocialMediaAccounts(ctx, { timeoutMs = 45000, log = null } = {}) {
-  let page = findAffiliatePage(ctx.pages());
-  let opened = false;
-  if (!page) {
-    page = await ctx.newPage();
-    opened = true;
-  }
-
-  try {
-    if (!page.url().includes('affiliate.shopee.vn/')) {
-      await page.goto('https://affiliate.shopee.vn/offer/product_offer', {
-        waitUntil: 'domcontentloaded', timeout: timeoutMs,
-      }).catch(() => {});
-      await sleep(1500);
-    }
-    if (isBlockedState(page.url(), null)) {
-      return { status: 'needs_verify', accounts: [], reason: 'session at captcha/login — re-verify via VNC' };
-    }
-
-    const result = await page.evaluate(async () => {
-      try {
-        const r = await fetch('/api/v3/affiliates/social_media_accounts', { credentials: 'include' });
-        return { status: r.status, json: await r.json().catch(() => null) };
-      } catch (e) {
-        return { status: 0, error: String(e?.message || e) };
-      }
-    });
-
-    if (isBlockedState(page.url(), result) || result.json?.code === 90309999) {
-      return { status: 'needs_verify', accounts: [], reason: `blocked while reading media info (http ${result.status}, code ${result.json?.code})` };
-    }
-    if (result.status !== 200 || result.json?.code !== 0) {
-      return { status: 'failed', accounts: [], reason: result.json?.msg || result.error || `media info HTTP ${result.status}` };
-    }
-
-    const list = Array.isArray(result.json?.data?.accounts) ? result.json.data.accounts : [];
-    const accounts = list.map((row) => ({
-      media_user_id: String(row.user_id || row.unique_id || '').trim(),
-      media_name: String(row.user_name || '').trim(),
-      website_url: String(row.website_url || '').trim(),
-      platform_code: Number(row.platform) || 0,
-      platform: SM_PLATFORM[Number(row.platform)] || 'other',
-      link_status: Number(row.link_status) || 0,
-      facebook_page_type: Number(row.facebook_page_type) || 0,
-      partner_link_status: Number(row.partner_link_status) || 0,
-      follower_number: Number(row.follower_number) || 0,
-      // Shopee trả giây, không phải mili-giây.
-      verification_time: Number(row.verification_time) || 0,
-    })).filter((a) => a.media_user_id || a.website_url);
-
-    if (log) log(`[shopee-report] media: ${accounts.length} tài khoản liên kết (${accounts.filter((a) => a.platform === 'facebook').length} Facebook)`);
-    return { status: 'ok', accounts };
-  } finally {
-    if (opened) await page.close().catch(() => {});
-  }
-}
-
-module.exports = { fetchConversionReport, fetchClickReport, fetchSocialMediaAccounts, reportWindow, SM_PLATFORM };
+module.exports = { fetchConversionReport, fetchClickReport, reportWindow };

package/lib/shopee-scraper.js

@@ -436,6 +436,29 @@ function cleanSubId(v) {
 // `/opaanlp/` — KHÁC hẳn `long_link` của offer list (universal-link + chữ ký
 // Google Ads, không qua đường ghi nhận affiliate nên không ra hoa hồng).
 //
+// Vì sao Shopee không trả link — gom mọi chỗ nó có thể nhét lý do vào.
+//
+// Nó KHÔNG phải lúc nào cũng dùng `errors[]` của GraphQL: đã gặp lượt trả
+// `code 599` + `data: null` (ca sub-id có gạch dưới, 09/09/2026) với
+// `businessCode` nằm thẳng trong thân. Đọc không ra thì in nguyên văn đã cắt
+// ngắn — còn hơn một câu rỗng nghĩa bắt người sau mở trình duyệt ra mò lại.
+function linkFailureReason(res, wanted = 0) {
+  const j = res && res.json;
+  const bits = [];
+  if (res && res.error) bits.push(String(res.error));
+  if (res && res.status && res.status !== 200) bits.push(`http ${res.status}`);
+  const msg = j?.errors?.[0]?.message || j?.msg || j?.message || j?.error_msg;
+  if (msg) bits.push(String(msg));
+  for (const k of ['businessCode', 'business_code', 'code', 'error']) {
+    const v = j?.[k];
+    if (v !== undefined && v !== null && v !== 0 && v !== '') { bits.push(`${k} ${v}`); break; }
+  }
+  if (!bits.length) {
+    bits.push(`Shopee trả 0 link cho ${wanted} sản phẩm: ${JSON.stringify(j ?? res ?? null).slice(0, 300)}`);
+  }
+  return bits.join(' · ').slice(0, 500);
+}
+
 // subIds: mảng tối đa 5 phần tử. Quy ước của mình: [kênh, video, đợt].
 async function generateOfferLink(ctx, { items = [], subIds = [], timeoutMs = 45000, log = null } = {}) {
   const list = (items || [])
@@ -483,27 +506,53 @@ async function generateOfferLink(ctx, { items = [], subIds = [], timeoutMs = 450
     }
     const err = res.json?.errors?.[0]?.message;
     if (err) return { status: 'failed', links: [], reason: err };
-    const rows = res.json?.data?.productOfferLinks || [];
-    return {
-      status: 'ok',
-      sub_ids: subs,
-      links: rows.map((r) => ({ item_id: String(r.itemId), shop_id: String(r.shopId), link: r.productOfferLink })),
-    };
+
+    // CHỈ nhận link của đúng những món đã hỏi, và chỉ nhận dòng CÓ link.
+    // Shopee trả `itemId` kèm từng link nên khớp được — không khớp mà vẫn lấy
+    // là có ngày ghi link của món khác vào bài, mà `workerLink` bên API khoá
+    // theo chính `item_id` này nên sai một chỗ là sai hết chuỗi.
+    const wanted = new Set(list.map((it) => it.itemId));
+    const rows = Array.isArray(res.json?.data?.productOfferLinks) ? res.json.data.productOfferLinks : [];
+    const links = rows
+      .map((r) => ({
+        item_id: String(r?.itemId ?? ''),
+        shop_id: String(r?.shopId ?? ''),
+        link: String(r?.productOfferLink || ''),
+      }))
+      .filter((r) => wanted.has(r.item_id) && r.link);
+    const missing = list.map((it) => it.itemId).filter((id) => !links.some((l) => l.item_id === id));
+
+    // KHÔNG có link nào = THẤT BẠI, không phải "xong với 0 kết quả". Bản đầu
+    // trả `status: 'ok'` cho ca này nên lệnh ghi 'done' và giao diện chỉ nói
+    // được "Worker không trả về link" — mù nguyên nhân. Mọi kiểu Shopee từ
+    // chối mà không đi qua `errors[]` (http 5xx, `data: null`, businessCode
+    // nằm trong thân) đều rơi vào đây.
+    if (!links.length) {
+      return { status: 'failed', links: [], sub_ids: subs, reason: linkFailureReason(res, list.length) };
+    }
+    if (missing.length && log) log(`[shopee] thiếu link cho ${missing.length}/${list.length} món: ${missing.join(', ')}`);
+    return { status: 'ok', sub_ids: subs, links, missing };
   } finally {
     if (opened) await page.close().catch(() => {});
   }
 }
 
+// Dạng `-i.<shop>.<item>` neo hai đầu: mở bằng `-` hoặc `/`, đóng ở cuối
+// đường dẫn. Cùng một luật với `api/services/ShopeeUrl.js` (ghi chú dài ở đó)
+// — hai bên lệch nhau thì cùng một link cho ra hai mã sản phẩm khác nhau tuỳ
+// đường đi. Đo 23/09/2026: bản cũ đọc "Mini.2.4G" ra shop 2 / item 4.
+const I_FORM = /[-/]i\.(\d+)\.(\d+)\/?(?:[?#]|$)/;
+
 // Parse a Shopee product URL → { shop_id, item_id }. Accepts
 // /product/<shop>/<item> and i.<shop>.<item> forms.
 function parseProductUrl(url = '') {
   // `/opaanlp/` là đích của link affiliate (đo 12/09: link rút gọn s.shopee.vn
   // đá về đúng dạng này) — vẫn là một sản phẩm, vẫn lấy được shop/item.
-  let m = url.match(/\/(?:product|opaanlp)\/(\d+)\/(\d+)/);
+  let m = String(url || '').match(/\/(?:product|opaanlp)\/(\d+)\/(\d+)/);
   if (m) return { shop_id: m[1], item_id: m[2] };
-  m = url.match(/i\.(\d+)\.(\d+)/);
+  m = String(url || '').match(I_FORM);
   if (m) return { shop_id: m[1], item_id: m[2] };
   return null;
 }
 
-module.exports = { ingestProduct, scrapeOffers, generateOfferLink, cleanSubId, parseProductUrl, parseOfferRow, parsePdpItem, categoryGroup, pctToNumber, AFFILIATE_CATEGORIES, applyFilters, isBlockedState, findAffiliatePage, pruneTabs, isJunkTab };
+module.exports = { ingestProduct, scrapeOffers, generateOfferLink, linkFailureReason, cleanSubId, parseProductUrl, parseOfferRow, parsePdpItem, categoryGroup, pctToNumber, AFFILIATE_CATEGORIES, applyFilters, isBlockedState, findAffiliatePage, pruneTabs, isJunkTab };

package/package.json

@@ -1,6 +1,6 @@
 {
   "name": "channel-worker",
-  "version": "2.5.132",
+  "version": "2.5.133",
   "description": "Channel Manager worker daemon — runs on remote machines to execute video pipeline jobs",
   "main": "lib/daemon.js",
   "bin": {

package/scripts/fetch_facebook_reel_stats.js

@@ -38,7 +38,7 @@ function parseViews(txt) {
 // 09/09 tìm được tab để so trước/sau. Bản riêng còn thiếu cả bộ lọc "anchor
 // của bài trong bảng tin" (gốc 2 link page lạ sáng 10/09) nên có thể quét
 // nhầm tab Reels của page KHÁC mà không hay.
-const { discoverReelsTabUrl, discoverReelsTabUrls, openReelsTabWithTiles, parsePageRef, readPageIdFromDom } = require('./upload_facebook').__testables;
+const { discoverReelsTabUrl, discoverReelsTabUrls, openReelsTabWithTiles, parsePageRef } = require('./upload_facebook').__testables;
 
 // Số người theo dõi của page, đọc ngay trên chính trang đang đứng (header hiện
 // ở mọi tab của page/profile) — không tốn thêm lượt mở profile nào. Ô
@@ -821,20 +821,6 @@ async function run({ page, payload, log }) {
   // được với danh sách page đã liên kết bên Shopee. Không có thì bỏ qua, lượt
   // ghi số liệu không phụ thuộc vào nó.
   const pageRef = opened.verified ? parsePageRef(opened.url) : null;
-  // URL chỉ có TÊN RIÊNG thì chưa đủ để đối chiếu với Shopee: 6/8 page đang liên
-  // kết bên đó lưu dạng `profile.php?id=…`, không mang tên riêng. Thiếu số ID là
-  // kênh bị báo "chưa liên kết" oan. Đọc thêm từ chính trang đang mở (đã chứng
-  // minh có tile ⇒ đúng page của kênh). Đọc hỏng thì giữ nguyên tên riêng, không
-  // làm hỏng lượt ghi số liệu.
-  if (pageRef && !pageRef.id) {
-    const hit = await readPageIdFromDom(page).catch(() => null);
-    if (hit) {
-      pageRef.id = hit.id;
-      log('info', `[fb-stats] page id đọc từ trang: ${hit.id} (${hit.sources} nguồn khớp: ${hit.from.join(', ')})`);
-    } else {
-      log('warn', '[fb-stats] URL chỉ có tên riêng và KHÔNG đọc được id từ trang — kênh sẽ hiện "chưa rõ Page" thay vì báo sai liên kết');
-    }
-  }
   if (pageRef) log('info', `[fb-stats] page: ${pageRef.id ? `id ${pageRef.id}` : `handle ${pageRef.handle}`}`);
 
   const d = await log.apiRequest('POST', '/analytics/post-stats', {

package/scripts/upload_facebook.js

@@ -1155,73 +1155,6 @@ function parsePageRef(reelsTabUrl) {
   return { id: '', handle: seg, url: raw };
 }
 
-// ID page ĐỌC TỪ CHÍNH TRANG, cho ca URL chỉ có tên riêng (`/<handle>/?sk=reels_tab`).
-//
-// Vì sao cần: bên Shopee, 6/8 page đang liên kết được lưu dạng
-// `profile.php?id=…`, KHÔNG có tên riêng trong link. Kênh nào chỉ biết tên riêng
-// thì không có gì để so → bị báo "chưa liên kết" OAN (đo bằng
-// services/AffiliateMediaLink 22/09). Dạng tên riêng có thật: ca "Chuyện Nghề
-// Nhà Nông" 14/09 — dạng profile.php ra 0 tile, chỉ `/chuyennghenhanong/` chạy.
-//
-// CHỈ gọi khi đang đứng trên trang tab Reels ĐÃ chứng minh có tile. Đứng ở trang
-// khác thì mấy khoá dưới đây là của trang đó, không phải của page mình.
-//
-// Đo thật 22/09 trên 6 profile của đàn (Toc-xinh, Meo-luoi, Tam-cai-tao-nha,
-// Beo-banh-beo, duong-nhan-cung-anh, Do-nghe-len-hinh):
-//   `profile_id` == `actorID` == ID page trong URL ở CẢ 6/6.
-//   ⛔ `delegate_page_id` LUÔN là một số KHÁC (vd page 61591917189886 →
-//      delegate 1240255979169594). Bắt nhầm khoá này là ghi sai danh tính rồi
-//      báo sai liên kết cho đúng cái kênh mình định cứu.
-//
-// Cổng an toàn: phải có **ít nhất hai nguồn độc lập cùng ra một số** mới nhận.
-// Một khoá JSON đứng lẻ không đủ — trang Facebook đầy số 15-16 chữ số, và nếu
-// profile đang đăng nhập bằng tài khoản CÁ NHÂN quản lý page thì `userID` là của
-// người, không phải của page. Hai nguồn khớp nhau thì khả năng cùng sai rất thấp.
-const PAGE_ID_JSON_KEYS = ['profile_id', 'actorID', 'pageID'];
-
-async function readPageIdFromDom(page) {
-  const votes = await page.evaluate((keys) => {
-    const out = {};
-    const add = (src, v) => {
-      if (!/^\d{5,25}$/.test(String(v || ''))) return;
-      (out[src] = out[src] || []).push(String(v));
-    };
-    // Nguồn 1: anchor profile.php NGOÀI bảng tin. Anchor trong feed là của bài
-    // người khác — đúng cái bẫy đã đẻ ra 2 link sai sáng 10/09.
-    for (const a of document.querySelectorAll('a[href]')) {
-      const href = a.getAttribute('href') || '';
-      if (/[?&]__cft__|[?&]__tn__/.test(href)) continue;
-      if (a.closest("[role='feed'], [role='article'], [aria-posinset]")) continue;
-      const m = href.match(/profile\.php\?id=(\d{5,25})/);
-      if (m) add('anchor', m[1]);
-    }
-    // Nguồn 2..n: khoá JSON trong bundle. `delegate_page_id` cố ý KHÔNG có mặt.
-    const html = document.documentElement.innerHTML;
-    for (const key of keys) {
-      const re = new RegExp(`"${key}"\\s*:\\s*"?(\\d{5,25})"?`, 'g');
-      let m; let n = 0;
-      while ((m = re.exec(html)) && n < 8) { add(key, m[1]); n++; }
-    }
-    return out;
-  }, PAGE_ID_JSON_KEYS).catch(() => ({}));
-
-  // Đếm theo NGUỒN, không theo số lần xuất hiện: một khoá lặp 8 lần trong bundle
-  // vẫn chỉ là MỘT nguồn, không được tự nó đủ phiếu.
-  const bySource = new Map();
-  for (const [src, vals] of Object.entries(votes || {})) {
-    for (const v of new Set(vals)) {
-      if (!bySource.has(v)) bySource.set(v, new Set());
-      bySource.get(v).add(src);
-    }
-  }
-  let best = null;
-  for (const [id, srcs] of bySource) {
-    if (srcs.size < 2) continue;
-    if (!best || srcs.size > best.sources) best = { id, sources: srcs.size, from: [...srcs].sort() };
-  }
-  return best;
-}
-
 async function hasVisibleReelComposer(page) {
   return page.evaluate(() => {
     for (const dlg of document.querySelectorAll("[role='dialog']")) {
@@ -3758,7 +3691,6 @@ module.exports.__testables = {
   pickReelsTabUrl,
   pickReelsTabUrls,
   parsePageRef,
-  readPageIdFromDom,
   discoverReelsTabUrls,
   openReelsTabWithTiles,
   networkIdVerdict,