@noobdemon/noob-cli 1.10.19 → 1.11.0

package/src/sessions.js

@@ -1,11 +1,11 @@
 // Lưu & khôi phục lịch sử hội thoại (giống --continue / --resume của Claude Code).
 // Mỗi phiên là một file JSON trong ~/.noob/sessions/. Ghi sau mỗi lượt nên có rớt
 // mạng / tắt máy vẫn resume được.
-import fs from "node:fs";
-import path from "node:path";
-import os from "node:os";
+import fs from 'node:fs';
+import path from 'node:path';
+import os from 'node:os';
 
-const DIR = path.join(os.homedir(), ".noob", "sessions");
+const DIR = path.join(os.homedir(), '.noob', 'sessions');
 
 function ensure() {
   try {
@@ -17,15 +17,15 @@ function ensure() {
 
 function genId() {
   const d = new Date();
-  const p = (n) => String(n).padStart(2, "0");
+  const p = (n) => String(n).padStart(2, '0');
   const stamp = `${d.getFullYear()}${p(d.getMonth() + 1)}${p(d.getDate())}-${p(d.getHours())}${p(d.getMinutes())}${p(d.getSeconds())}`;
   return `${stamp}-${Math.random().toString(36).slice(2, 6)}`;
 }
 
 function titleFrom(history = []) {
-  const first = history.find((m) => m.role === "user");
-  if (!first) return "";
-  return String(first.content).replace(/\s+/g, " ").trim().slice(0, 60);
+  const first = history.find((m) => m.role === 'user');
+  if (!first) return '';
+  return String(first.content).replace(/\s+/g, ' ').trim().slice(0, 60);
 }
 
 export function newSession({ cwd, model } = {}) {
@@ -35,8 +35,8 @@ export function newSession({ cwd, model } = {}) {
     createdAt: now,
     updatedAt: now,
     cwd: cwd || process.cwd(),
-    model: model || "",
-    title: "",
+    model: model || '',
+    title: '',
     history: [],
   };
 }
@@ -47,7 +47,7 @@ export function save(session) {
   session.updatedAt = Date.now();
   if (!session.title) session.title = titleFrom(session.history);
   try {
-    fs.writeFileSync(path.join(DIR, session.id + ".json"), JSON.stringify(session), "utf8");
+    fs.writeFileSync(path.join(DIR, session.id + '.json'), JSON.stringify(session), 'utf8');
     return true;
   } catch {
     return false;
@@ -57,7 +57,7 @@ export function save(session) {
 export function load(id) {
   if (!id) return null;
   try {
-    return JSON.parse(fs.readFileSync(path.join(DIR, id + ".json"), "utf8"));
+    return JSON.parse(fs.readFileSync(path.join(DIR, id + '.json'), 'utf8'));
   } catch {
     return null;
   }
@@ -66,8 +66,8 @@ export function load(id) {
 // Chuẩn hoá thư mục workspace để so khớp: resolve + lowercase trên Windows nên
 // "D:\x", "D:\x\" và "d:\x" coi là một.
 const normDir = (p) => {
-  const r = path.resolve(p || "");
-  return process.platform === "win32" ? r.toLowerCase() : r;
+  const r = path.resolve(p || '');
+  return process.platform === 'win32' ? r.toLowerCase() : r;
 };
 
 /**
@@ -79,22 +79,22 @@ export function list(limit = 30, cwd = null) {
   const want = cwd != null ? normDir(cwd) : null;
   let files;
   try {
-    files = fs.readdirSync(DIR).filter((f) => f.endsWith(".json"));
+    files = fs.readdirSync(DIR).filter((f) => f.endsWith('.json'));
   } catch {
     return [];
   }
   const out = [];
   for (const f of files) {
     try {
-      const s = JSON.parse(fs.readFileSync(path.join(DIR, f), "utf8"));
+      const s = JSON.parse(fs.readFileSync(path.join(DIR, f), 'utf8'));
       if (want != null && normDir(s.cwd) !== want) continue; // khác workspace → bỏ
       out.push({
         id: s.id,
         updatedAt: s.updatedAt || s.createdAt || 0,
-        cwd: s.cwd || "",
-        model: s.model || "",
+        cwd: s.cwd || '',
+        model: s.model || '',
         title: s.title || titleFrom(s.history || []),
-        turns: (s.history || []).filter((m) => m.role === "user").length,
+        turns: (s.history || []).filter((m) => m.role === 'user').length,
       });
     } catch {
       /* bỏ qua file hỏng */
@@ -113,7 +113,7 @@ export function latest(cwd = null) {
 export function remove(id) {
   if (!id) return false;
   try {
-    fs.unlinkSync(path.join(DIR, id + ".json"));
+    fs.unlinkSync(path.join(DIR, id + '.json'));
     return true;
   } catch {
     return false;

package/src/skills.js

@@ -14,22 +14,26 @@
 //   listSkills()     -> string[]       (tên skill có sẵn, gộp 2 nguồn)
 //   skillPath(name)  -> string | null  (đường dẫn tuyệt đối SKILL.md đã resolve)
 
-import fs from "node:fs";
-import path from "node:path";
-import { fileURLToPath } from "node:url";
+import fs from 'node:fs';
+import path from 'node:path';
+import { fileURLToPath } from 'node:url';
 
 // Thư mục `skills/` đi kèm package (cùng cấp với `src/`, `bin/`).
 // `import.meta.url` -> .../noob-cli/src/skills.js  =>  ../skills
-const PACKAGE_SKILLS_DIR = path.resolve(path.dirname(fileURLToPath(import.meta.url)), "..", "skills");
+const PACKAGE_SKILLS_DIR = path.resolve(
+  path.dirname(fileURLToPath(import.meta.url)),
+  '..',
+  'skills'
+);
 
 function userSkillsDir() {
-  return path.join(process.cwd(), "skills");
+  return path.join(process.cwd(), 'skills');
 }
 
 function candidatePaths(name) {
   return [
-    path.join(userSkillsDir(), name, "SKILL.md"), // user override trước
-    path.join(PACKAGE_SKILLS_DIR, name, "SKILL.md"), // built-in của CLI
+    path.join(userSkillsDir(), name, 'SKILL.md'), // user override trước
+    path.join(PACKAGE_SKILLS_DIR, name, 'SKILL.md'), // built-in của CLI
   ];
 }
 
@@ -44,7 +48,7 @@ export function loadSkill(name) {
   try {
     const p = skillPath(name);
     if (!p) return null;
-    return fs.readFileSync(p, "utf8");
+    return fs.readFileSync(p, 'utf8');
   } catch {
     return null;
   }
@@ -55,7 +59,7 @@ function listIn(dir) {
     if (!fs.existsSync(dir)) return [];
     return fs
       .readdirSync(dir, { withFileTypes: true })
-      .filter((e) => e.isDirectory() && fs.existsSync(path.join(dir, e.name, "SKILL.md")))
+      .filter((e) => e.isDirectory() && fs.existsSync(path.join(dir, e.name, 'SKILL.md')))
       .map((e) => e.name);
   } catch {
     return [];

package/src/subagent.js

@@ -47,14 +47,14 @@ export async function runSubAgent({
   const history = [{ role: 'user', content: userPrompt }];
 
   // Nếu chưa chạm trần depth, cho phép spawn cháu. Chạm trần → bỏ doc.
-  const extraToolsDoc =
-    depth < MAX_SUBAGENT_DEPTH ? spawnAgentToolsDoc(depth) : '';
+  const extraToolsDoc = depth < MAX_SUBAGENT_DEPTH ? spawnAgentToolsDoc(depth) : '';
 
   // onTool: forward thẳng dispatcher cha. Cha sẽ tự tăng depth khi spawn lồng
   // (xem repl.js line 1027: `(n, inp) => dispatchTool(n, inp, depth + 1)`).
   const onTool = async (name, input) => dispatchTool(name, input);
 
-  if (onLog) onLog(`▶ sub-agent depth=${depth} bắt đầu: ${task.slice(0, 80)}${task.length > 80 ? '…' : ''}`);
+  if (onLog)
+    onLog(`▶ sub-agent depth=${depth} bắt đầu: ${task.slice(0, 80)}${task.length > 80 ? '…' : ''}`);
 
   const result = await runAgent({
     history,

package/src/tokens.js

@@ -1,12 +1,37 @@
-// Đếm token cục bộ bằng gpt-tokenizer (cl100k_base - tokenizer của GPT-4).
-// CHÍNH XÁC cho GPT, XẤP XỈ cho Claude/Gemini/khác (sai số ~5-15%) — đủ để
+// Đếm token cục bộ. Chọn encoder theo model:
+// - o200k_base: GPT-4o, GPT-5*, o1/o3/o4 (OpenAI thế hệ mới)
+// - cl100k_base: GPT-4/3.5 legacy + fallback cho Claude/Gemini/khác (xấp xỉ).
+// CHÍNH XÁC cho OpenAI, XẤP XỈ cho provider khác (sai số ~5-15%) — đủ để
 // hiển thị mang tính tham khảo realtime trong CLI.
-import { encode } from "gpt-tokenizer";
+import { encode as encodeCl100k } from 'gpt-tokenizer/encoding/cl100k_base';
+import { encode as encodeO200k } from 'gpt-tokenizer/encoding/o200k_base';
+
+// Encoder hiện tại — mặc định cl100k để giữ tương thích ngược với mọi model
+// không phải OpenAI. setEncodingForModel() đổi sang o200k khi cần.
+let currentEncode = encodeCl100k;
+
+// Map model id → encoder. Heuristic theo id (không phải provider) vì cùng OpenAI
+// nhưng GPT-3.5 vẫn dùng cl100k. ID pattern khớp `MODELS` trong src/models.js.
+export function pickEncoderForModel(modelId) {
+  if (!modelId || typeof modelId !== 'string') return encodeCl100k;
+  const id = modelId.toLowerCase();
+  // OpenAI thế hệ mới: GPT-4o, GPT-5*, o1/o3/o4 → o200k_base.
+  // Khớp các id gateway: gateway-gpt-4o, gateway-gpt-5*, gateway-gpt-o3*, gateway-gpt-o4*.
+  if (/gpt-?4o/.test(id) || /gpt-?5/.test(id) || /gpt-?o[1-9]/.test(id) || /\bo[1-9]\b/.test(id)) {
+    return encodeO200k;
+  }
+  // Còn lại (Claude, Gemini, DeepSeek, Grok, Qwen, Kimi, Llama, GPT-4.1/3.5) → cl100k.
+  return encodeCl100k;
+}
+
+export function setEncodingForModel(modelId) {
+  currentEncode = pickEncoderForModel(modelId);
+}
 
 export function countTokens(text) {
   if (!text) return 0;
   try {
-    return encode(String(text)).length;
+    return currentEncode(String(text)).length;
   } catch {
     // Fallback heuristic nếu encoder lỗi: ~4 ký tự / token.
     return Math.ceil(String(text).length / 4);
@@ -18,7 +43,7 @@ export function countTokens(text) {
 export function countMessages(messages = []) {
   let n = 0;
   for (const m of messages) {
-    n += countTokens(m?.content || "") + 4;
+    n += countTokens(m?.content || '') + 4;
   }
   return n;
 }
@@ -29,7 +54,7 @@ export function countMessages(messages = []) {
 // Vấn đề cũ: pushOutputDelta encode TOÀN buffer mỗi delta → O(N²) trên stream dài.
 // Fix: sliding window. BPE chỉ phụ thuộc context cục bộ (vài chục byte) nên ta
 // chỉ cần encode đoạn TAIL gần đây, phần trước đó "commit" dứt khoát. Safety
-// window đủ rộng (256 chars) để qua mọi ranh giới token thực tế của cl100k_base
+// window đủ rộng (256 chars) để qua mọi ranh giới token thực tế của cl100k/o200k
 // (token dài nhất ~ vài chục byte).
 const TAIL_WINDOW = 256;
 // Context window tối đa của model (300k tokens). Dùng để tính % usage realtime.
@@ -46,7 +71,7 @@ export class TokenMeter {
     this._committedChars = 0; // số ký tự đã đẩy qua khỏi tail window
     this._committedTokens = 0; // tổng token tương ứng đã cộng vào this.output
     // Tail buffer: TAIL_WINDOW ký tự cuối, dùng để re-encode khi có delta mới.
-    this._tail = "";
+    this._tail = '';
     this._tailTokens = 0; // token count hiện tại của _tail (đã cộng vào this.output)
   }
   addInput(n) {
@@ -86,7 +111,7 @@ export class TokenMeter {
   endOutput() {
     this._committedChars = 0;
     this._committedTokens = 0;
-    this._tail = "";
+    this._tail = '';
     this._tailTokens = 0;
   }
   get total() {
@@ -94,7 +119,7 @@ export class TokenMeter {
   }
   // Định dạng ngắn để hiển thị ở status bar: "↑1.2k ↓340 (1.5k)".
   format() {
-    const fmt = (n) => (n >= 1000 ? (n / 1000).toFixed(1) + "k" : String(n));
+    const fmt = (n) => (n >= 1000 ? (n / 1000).toFixed(1) + 'k' : String(n));
     return `↑${fmt(this.input)} ↓${fmt(this.output)} (${fmt(this.total)})`;
   }
   // Định dạng kèm context usage: "↑1.2k ↓340 (1.5k) · ctx 45%".
@@ -119,7 +144,7 @@ export class TokenMeter {
     this.contextTokens = 0;
     this._committedChars = 0;
     this._committedTokens = 0;
-    this._tail = "";
+    this._tail = '';
     this._tailTokens = 0;
   }
   // Serialize counter để persist qua --continue/--resume. Tail buffer là transient
@@ -130,12 +155,12 @@ export class TokenMeter {
   }
   // Khôi phục từ snapshot — chỉ set 2 counter, tail giữ rỗng (lượt mới bắt đầu).
   restore(data) {
-    if (!data || typeof data !== "object") return;
+    if (!data || typeof data !== 'object') return;
     this.input = Math.max(0, data.input | 0);
     this.output = Math.max(0, data.output | 0);
     this._committedChars = 0;
     this._committedTokens = 0;
-    this._tail = "";
+    this._tail = '';
     this._tailTokens = 0;
   }
 }