channel-worker 2.5.126 → 2.5.128

package/lib/shopee-scraper.js

@@ -292,13 +292,30 @@ async function scrapeOffers(ctx, {
   category = null,        // key in AFFILIATE_CATEGORIES (e.g. 'women_clothes')
   match_id = null,        // explicit category id override
   // Tìm theo TỪ KHOÁ thay vì duyệt tab ngành hàng. Cùng endpoint, khác tham số:
-  // `list_type=0&keyword=<kw>&filter_types=2` (đo 09/09/2026 — ghi chú cũ bảo
-  // "cần signed header" là sai/lạc hậu).
+  // `list_type=0&keyword=<kw>` (đo 09/09/2026 — ghi chú cũ bảo "cần signed
+  // header" là sai/lạc hậu). Bản đầu còn kèm `filter_types=2`; 22/09 đo ra nó
+  // cắt mất 5/7 món và giao diện thật không hề gửi — xem ghi chú ở tham số
+  // `filter_types` bên dưới.
   //
   // Đây là thứ gỡ bế tắc kho bão hoà: 6 tab ngành hàng luôn trả về top N giống
   // nhau nên kho đứng yên ở 34 sản phẩm. Từ khoá thì mở ra đúng món hợp với
   // từng video.
   keyword = null,
+  // Bộ lọc của chính trang affiliate. Để null = KHÔNG lọc, đúng như giao diện.
+  //
+  // Đo 22/09/2026 trên profile Shopee1, từ khoá "vợt bắt hải sản":
+  //   filter_types=2   → 2 món     ← thứ mình gắn cứng từ 09/09
+  //   không filter     → 7 món     ← thứ GIAO DIỆN thật sự gọi
+  //   filter_types=0/1/3 → 0 món
+  // `filter_types=2` = chỉ lấy món người bán TỰ CỘNG hoa hồng
+  // (`seller_commission_rate > 0`): 2 món lọt có seller 7% và 4%, 5 món bị
+  // giấu đều seller 0% nhưng default 7%. Tức nó vứt phần lớn thị trường.
+  //
+  // Bắt tận tay bằng cách cho giao diện tự tìm rồi nghe request nó gửi:
+  //   /api/v3/offer/product/list?list_type=0&keyword=…&sort_type=1
+  //     &page_offset=0&page_limit=20&client_type=1
+  // — không có filter_types. Mình tự thêm vào, và tự làm hẹp kết quả.
+  filter_types = null,
   sort_types = [2],      // [2]=commission; pass [2,3] to merge commission+sales
   pages = 2,
   page_limit = 20,
@@ -357,7 +374,7 @@ async function scrapeOffers(ctx, {
           // thì Shopee bỏ qua keyword và mình tưởng đang tìm mà thật ra vẫn
           // đang duyệt tab cũ.
           const cat = q.kw
-            ? `&list_type=0&keyword=${encodeURIComponent(q.kw)}&filter_types=2`
+            ? `&list_type=0&keyword=${encodeURIComponent(q.kw)}${q.ft != null ? `&filter_types=${q.ft}` : ''}`
             : (q.listType
               ? `&list_type=${q.listType}`
               : (q.mid ? `&list_type=3&match_type=2&match_id=${q.mid}` : '&list_type=0'));
@@ -366,7 +383,7 @@ async function scrapeOffers(ctx, {
             const r = await fetch(url, { credentials: 'include' });
             return { status: r.status, json: await r.json().catch(() => null) };
           } catch (e) { return { status: 0, error: String(e.message) }; }
-        }, { st, offset, page_limit, mid, listType, kw });
+        }, { st, offset, page_limit, mid, listType, kw, ft: filter_types });
 
         if (isBlockedState(page.url(), res) || res.json?.code === 90309999) {
           return { status: 'needs_verify', products: [...byId.values()], raw_count: rawCount, reason: `blocked mid-scrape (http ${res.status}, code ${res.json?.code})` };

package/package.json

@@ -1,6 +1,6 @@
 {
   "name": "channel-worker",
-  "version": "2.5.126",
+  "version": "2.5.128",
   "description": "Channel Manager worker daemon — runs on remote machines to execute video pipeline jobs",
   "main": "lib/daemon.js",
   "bin": {

package/scripts/comment_facebook.js

@@ -1,20 +1,27 @@
-// Thả link affiliate xuống BÌNH LUẬN của một bài Facebook đã đăng, rồi ghim.
+// Thả link affiliate xuống BÌNH LUẬN của một bài Facebook đã đăng.
 //
 // Vì sao là bình luận chứ không phải caption: bài đang lên view thì không ai đi
 // sửa caption của nó — sửa caption là bài quay lại hàng đợi xét duyệt của
-// Facebook giữa lúc nó đang được phân phối. Bình luận thì ghim được, sửa được,
-// xoá được, không đụng vào bài.
+// Facebook giữa lúc nó đang được phân phối. Bình luận thì sửa được, xoá được,
+// không đụng vào bài.
 //
 // Chạy trên chính profile NST của kênh (máy đăng bài) chứ không phải máy
-// Shopee: bình luận phải mang danh Page thì mới ghim được, và một link lạ dưới
-// bài của mình do tài khoản khác thả thì người xem đọc ra là spam.
+// Shopee: bình luận phải mang danh Page — Facebook mới gắn nhãn "Author" và ưu
+// tiên hiển thị nó, còn một link lạ dưới bài của mình do tài khoản khác thả thì
+// người xem đọc ra là spam.
 //
-// Payload: { post_url, text, link, pin?, idea_id?, channel_id? }
+// Payload: { post_url, text, link, idea_id?, channel_id? }
 //   post_url: link bài đã XÁC MINH (API chặn sẵn ô rỗng — services/AffComment)
 //   text:     nguyên câu bình luận sẽ gõ, đã gồm link
 //   link:     riêng chuỗi link, dùng để ĐỌC LẠI xác minh — xem `verified`
 //
-// Trả về { verified, comment_url, commented_as, pinned, post_url }.
+// Trả về { verified, comment_url, commented_as, post_url }.
+//
+// KHÔNG có bước ghim. Facebook không cho ghim bình luận dưới reel ở giao diện
+// web — chủ tịch mở tận nơi kiểm 21/09, menu ⋯ của bình luận không có mục đó,
+// kể cả khi bình luận đã mang nhãn "Author" (tức của chính chủ bài). Bản cũ
+// vẫn đi dò nút ấy mỗi lượt rồi ghi một dòng log nghe như mình làm hỏng việc.
+// Bỏ luôn: bình luận của tác giả bài vốn được Facebook ưu tiên hiển thị.
 //
 // ⚠️ LUẬT LÕI CỦA SCRIPT NÀY: `verified` chỉ được true khi đã đọc lại thấy một
 // bình luận THẬT trên trang mang đúng chuỗi link. Gõ xong + bấm Enter KHÔNG
@@ -191,16 +198,28 @@ async function findPostedComment(page, link) {
       if (node.querySelector("[contenteditable='true']") && !node.getAttribute('aria-label')) continue;
       const label = node.getAttribute('aria-label') || '';
       const m = /(?:Bình luận của|Comment by)\s+(.+)$/i.exec(label.trim());
-      // Không có aria-label dạng bình luận = nhiều khả năng đây là khối BÀI
-      // chứa chuỗi link trong caption, không phải bình luận.
-      if (!m) continue;
-      out.found = true;
-      out.author = m[1].trim().slice(0, 120);
+      // Khối bình luận KHÔNG phải lúc nào cũng mang aria-label "Bình luận của
+      // <Tên>" — giao diện reel không dùng nhãn đó, nên mọi lượt thả reel đều
+      // về `commented_as` rỗng và `comment_url` rỗng (21/09). Bằng chứng chắc
+      // chắn khác, không phụ thuộc chữ nghĩa giao diện: khối có link permalink
+      // mang `comment_id=`. Khối BÀI không bao giờ có thứ đó, nên vẫn né được
+      // đúng cái bẫy mà nhãn kia sinh ra để né — caption bài chứa chuỗi link.
       const a = node.querySelector("a[href*='comment_id=']");
+      if (!m && !a) continue;
+      out.found = true;
       if (a) {
         const href = a.getAttribute('href') || '';
         out.comment_url = href.startsWith('http') ? href : `https://www.facebook.com${href}`;
       }
+      if (m) {
+        out.author = m[1].trim().slice(0, 120);
+      } else {
+        // Facebook gắn nhãn "Author"/"Tác giả" cho bình luận của chính chủ bài
+        // — với luồng này thì đó CHÍNH LÀ điều cần biết: bình luận mang danh
+        // Page chứ không phải một tài khoản lạ đi rải link dưới bài của kênh.
+        const badge = /(^|\s)(Author|Tác giả)(\s|$)/i.test(node.innerText || '');
+        out.author = badge ? 'Author' : '';
+      }
       return out;
     }
     return out;
@@ -225,46 +244,6 @@ async function waitForPostedComment(page, link, log, timeoutMs = VERIFY_TIMEOUT_
   return { ...meta, found: false, count: n };
 }
 
-// ─── ghim ───────────────────────────────────────────────────────────────────
-
-// Ghim là việc CÓ CŨNG TỐT, không có cũng xong: link đã nằm dưới bài rồi. Nên
-// mọi lỗi ở đây chỉ ghi log và trả false, KHÔNG ném — hỏng bước ghim mà đánh
-// cả lệnh thành thất bại thì lượt chạy lại sẽ thả bình luận thứ hai.
-async function pinComment(page, link, log) {
-  try {
-    const menuBtn = await page.evaluateHandle((needle) => {
-      const nodes = [...document.querySelectorAll("[role='article']")];
-      for (const node of nodes) {
-        if (!(node.innerText || '').includes(needle)) continue;
-        if (!/(Bình luận của|Comment by)/i.test(node.getAttribute('aria-label') || '')) continue;
-        const btn = [...node.querySelectorAll("[role='button'], [aria-haspopup='menu']")]
-          .find((b) => /hành động|tùy chọn|tuỳ chọn|options|actions/i.test(b.getAttribute('aria-label') || ''));
-        if (btn) { btn.scrollIntoView({ block: 'center' }); return btn; }
-      }
-      return null;
-    }, link);
-    const el = menuBtn.asElement();
-    if (!el) { log('info', '[fb-cmt] không thấy nút ⋯ của bình luận — bỏ qua bước ghim'); return false; }
-    await el.click({ timeout: 5000 }).catch(() => {});
-    await pause(page, 1200);
-
-    const item = page.locator("[role='menuitem'], [role='menu'] [role='button']")
-      .filter({ hasText: /Ghim bình luận|Ghim|Pin comment|Pin/i }).first();
-    if (!(await item.isVisible().catch(() => false))) {
-      log('info', '[fb-cmt] menu không có mục Ghim (thường là chưa bình luận bằng danh Page) — bỏ qua');
-      await page.keyboard.press('Escape').catch(() => {});
-      return false;
-    }
-    await item.click({ timeout: 5000 }).catch(() => {});
-    await pause(page, 1500);
-    log('info', '[fb-cmt] đã bấm Ghim bình luận');
-    return true;
-  } catch (e) {
-    log('warn', `[fb-cmt] ghim hỏng (bỏ qua, link vẫn nằm dưới bài): ${e.message.slice(0, 120)}`);
-    return false;
-  }
-}
-
 // ─── thân ───────────────────────────────────────────────────────────────────
 
 async function run({ page, payload = {}, log }) {
@@ -357,23 +336,19 @@ async function run({ page, payload = {}, log }) {
     // 'failed' kèm nguyên văn. Ném lỗi ở đây thì lượt chạy lại sẽ gõ thêm một
     // bình luận nữa, mà bình luận trước có thể đã nằm đó rồi.
     log('warn', '[fb-cmt] gõ và gửi xong nhưng KHÔNG đọc lại thấy bình luận — coi như chưa thả, người phải vào kiểm');
-    return { verified: false, post_url: postUrl, comment_url: '', commented_as: '', pinned: false };
+    return { verified: false, post_url: postUrl, comment_url: '', commented_as: '' };
   }
 
   log('info', `[fb-cmt] xác minh được bình luận — danh nghĩa "${found.author}"${found.comment_url ? ` · ${found.comment_url}` : ''}`);
 
-  let pinned = false;
-  if (payload.pin !== false) pinned = await pinComment(page, link, log);
-
   return {
     verified: true,
     post_url: postUrl,
     comment_url: found.comment_url || '',
-    // Tên hiện trên bình luận. Phải là tên Page — ra tên người thì profile đang
-    // bình luận bằng tài khoản cá nhân, link nằm dưới bài mà không ghim được và
-    // người xem đọc ra là spam của người lạ.
+    // Tên hiện trên bình luận, hoặc 'Author' khi Facebook gắn nhãn tác giả.
+    // Ra tên người lạ nghĩa là profile đang bình luận bằng tài khoản cá nhân —
+    // người xem đọc ra là spam dưới bài của kênh.
     commented_as: found.author || '',
-    pinned,
   };
 }