amenbo 0.1.0

package/dist/extract/geometry.js

@@ -0,0 +1,77 @@
+/**
+ * extract/geometry.ts — Phase 4 ジオメトリ抽出(構造化が甘いdiv soup/テーブルレイアウト対策)。
+ *
+ * Readability+J4スコアの抽出結果が貧弱(本文が短い)かつJ7アダプタが非該当のページに対する
+ * 最終フォールバック。ブラウザ昇格時に採取したテキストブロック(要素単位。真の意味での
+ * テキストノード粒度ではなく、p/li/td等の「テキストを直接持つリーフ要素」単位で近似する)の
+ * bounding boxから、縦方向に連続し水平位置(左端)が揃うブロック群を1つの「カラム」として
+ * クラスタリングし、最もテキスト量の多いクラスタを主コンテンツ領域とみなす。
+ *
+ * 「セマンティックなDOMではなくレンダリング結果の見た目(ジオメトリ)を一次情報にする」
+ * というplan.mdの前提認識(§0)を素朴な形で実装したもの。
+ */
+/**
+ * 表/canvas/svgのbounding box面積の合計 / ページ全体面積(0-1)。
+ * Phase 2まではDOM要素数ベースの近似だった「視覚要素占有率」を、実ジオメトリで置き換える。
+ * 要素同士の重なりは考慮しない単純合計(重なりは稀なため許容する近似)。
+ */
+export function computeVisualAreaRatio(visualElements, pageWidth, pageHeight) {
+    const pageArea = pageWidth * pageHeight;
+    if (pageArea <= 0)
+        return 0;
+    const visualArea = visualElements.reduce((sum, el) => sum + el.width * el.height, 0);
+    return Math.min(visualArea / pageArea, 1);
+}
+/** 直前ブロックとの縦方向ギャップが、直前後の平均ブロック高さの何倍まで許容されるか。 */
+const MAX_VERTICAL_GAP_RATIO = 2.5;
+/** 同じカラムとみなす左端座標のズレ許容(px)。 */
+const HORIZONTAL_ALIGN_TOLERANCE_PX = 40;
+function buildCluster(blocks) {
+    const totalTextLength = blocks.reduce((sum, b) => sum + b.textLength, 0);
+    const left = Math.min(...blocks.map((b) => b.x));
+    const right = Math.max(...blocks.map((b) => b.x + b.width));
+    const top = Math.min(...blocks.map((b) => b.y));
+    const bottom = Math.max(...blocks.map((b) => b.y + b.height));
+    return { blockIds: blocks.map((b) => b.id), totalTextLength, top, bottom, left, right };
+}
+/**
+ * テキストブロック群を、縦方向に連続し左端座標が揃うクラスタ(カラム)へ分割する(純関数)。
+ * テキスト量の多い順にソートして返す(先頭が最も本文らしいクラスタ)。
+ *
+ * 実装上の注意: y昇順に処理する際、複数カラム(本文とサイドバー等)が同じy範囲に
+ * 交互に出現しうるため、「直前に処理した1ブロックとだけ」比較する単純な線形走査では
+ * カラムが混ざってしまう。そのため現在「進行中」の全カラム候補(OpenColumn)を保持し、
+ * 各ブロックについて左端座標が近い進行中カラムを探して追加する(見つからなければ新規カラム)。
+ */
+export function clusterTextBlocks(blocks) {
+    const sorted = [...blocks]
+        .filter((b) => b.textLength > 0 && b.width > 0 && b.height > 0)
+        .sort((a, b) => a.y - b.y || a.x - b.x);
+    if (sorted.length === 0)
+        return [];
+    const openColumns = [];
+    for (const block of sorted) {
+        const target = openColumns.find((column) => {
+            const sameColumn = Math.abs(block.x - column.lastX) <= HORIZONTAL_ALIGN_TOLERANCE_PX;
+            const verticalGap = block.y - column.lastBottom;
+            const avgHeight = (column.lastHeight + block.height) / 2;
+            return sameColumn && verticalGap <= Math.max(avgHeight, 1) * MAX_VERTICAL_GAP_RATIO;
+        });
+        if (target) {
+            target.blocks.push(block);
+            target.lastX = block.x;
+            target.lastBottom = block.y + block.height;
+            target.lastHeight = block.height;
+        }
+        else {
+            openColumns.push({ blocks: [block], lastX: block.x, lastBottom: block.y + block.height, lastHeight: block.height });
+        }
+    }
+    return openColumns.map((column) => buildCluster(column.blocks)).sort((a, b) => b.totalTextLength - a.totalTextLength);
+}
+/** 最もテキスト量が多い(=本文らしい)クラスタを主コンテンツ領域として選ぶ。無ければnull。 */
+export function selectMainContentCluster(blocks) {
+    const clusters = clusterTextBlocks(blocks);
+    return clusters[0] ?? null;
+}
+//# sourceMappingURL=geometry.js.map

package/dist/extract/geometry.js.map

@@ -0,0 +1 @@
+{"version":3,"file":"geometry.js","sourceRoot":"","sources":["../../src/extract/geometry.ts"],"names":[],"mappings":"AAAA;;;;;;;;;;;GAWG;AAuCH;;;;GAIG;AACH,MAAM,UAAU,sBAAsB,CAAC,cAAuC,EAAE,SAAiB,EAAE,UAAkB;IACnH,MAAM,QAAQ,GAAG,SAAS,GAAG,UAAU,CAAC;IACxC,IAAI,QAAQ,IAAI,CAAC;QAAE,OAAO,CAAC,CAAC;IAC5B,MAAM,UAAU,GAAG,cAAc,CAAC,MAAM,CAAC,CAAC,GAAG,EAAE,EAAE,EAAE,EAAE,CAAC,GAAG,GAAG,EAAE,CAAC,KAAK,GAAG,EAAE,CAAC,MAAM,EAAE,CAAC,CAAC,CAAC;IACrF,OAAO,IAAI,CAAC,GAAG,CAAC,UAAU,GAAG,QAAQ,EAAE,CAAC,CAAC,CAAC;AAC5C,CAAC;AAED,gDAAgD;AAChD,MAAM,sBAAsB,GAAG,GAAG,CAAC;AACnC,8BAA8B;AAC9B,MAAM,6BAA6B,GAAG,EAAE,CAAC;AAEzC,SAAS,YAAY,CAAC,MAA2B;IAC/C,MAAM,eAAe,GAAG,MAAM,CAAC,MAAM,CAAC,CAAC,GAAG,EAAE,CAAC,EAAE,EAAE,CAAC,GAAG,GAAG,CAAC,CAAC,UAAU,EAAE,CAAC,CAAC,CAAC;IACzE,MAAM,IAAI,GAAG,IAAI,CAAC,GAAG,CAAC,GAAG,MAAM,CAAC,GAAG,CAAC,CAAC,CAAC,EAAE,EAAE,CAAC,CAAC,CAAC,CAAC,CAAC,CAAC,CAAC;IACjD,MAAM,KAAK,GAAG,IAAI,CAAC,GAAG,CAAC,GAAG,MAAM,CAAC,GAAG,CAAC,CAAC,CAAC,EAAE,EAAE,CAAC,CAAC,CAAC,CAAC,GAAG,CAAC,CAAC,KAAK,CAAC,CAAC,CAAC;IAC5D,MAAM,GAAG,GAAG,IAAI,CAAC,GAAG,CAAC,GAAG,MAAM,CAAC,GAAG,CAAC,CAAC,CAAC,EAAE,EAAE,CAAC,CAAC,CAAC,CAAC,CAAC,CAAC,CAAC;IAChD,MAAM,MAAM,GAAG,IAAI,CAAC,GAAG,CAAC,GAAG,MAAM,CAAC,GAAG,CAAC,CAAC,CAAC,EAAE,EAAE,CAAC,CAAC,CAAC,CAAC,GAAG,CAAC,CAAC,MAAM,CAAC,CAAC,CAAC;IAC9D,OAAO,EAAE,QAAQ,EAAE,MAAM,CAAC,GAAG,CAAC,CAAC,CAAC,EAAE,EAAE,CAAC,CAAC,CAAC,EAAE,CAAC,EAAE,eAAe,EAAE,GAAG,EAAE,MAAM,EAAE,IAAI,EAAE,KAAK,EAAE,CAAC;AAC1F,CAAC;AASD;;;;;;;;GAQG;AACH,MAAM,UAAU,iBAAiB,CAAC,MAA2B;IAC3D,MAAM,MAAM,GAAG,CAAC,GAAG,MAAM,CAAC;SACvB,MAAM,CAAC,CAAC,CAAC,EAAE,EAAE,CAAC,CAAC,CAAC,UAAU,GAAG,CAAC,IAAI,CAAC,CAAC,KAAK,GAAG,CAAC,IAAI,CAAC,CAAC,MAAM,GAAG,CAAC,CAAC;SAC9D,IAAI,CAAC,CAAC,CAAC,EAAE,CAAC,EAAE,EAAE,CAAC,CAAC,CAAC,CAAC,GAAG,CAAC,CAAC,CAAC,IAAI,CAAC,CAAC,CAAC,GAAG,CAAC,CAAC,CAAC,CAAC,CAAC;IAE1C,IAAI,MAAM,CAAC,MAAM,KAAK,CAAC;QAAE,OAAO,EAAE,CAAC;IAEnC,MAAM,WAAW,GAAiB,EAAE,CAAC;IAErC,KAAK,MAAM,KAAK,IAAI,MAAM,EAAE,CAAC;QAC3B,MAAM,MAAM,GAAG,WAAW,CAAC,IAAI,CAAC,CAAC,MAAM,EAAE,EAAE;YACzC,MAAM,UAAU,GAAG,IAAI,CAAC,GAAG,CAAC,KAAK,CAAC,CAAC,GAAG,MAAM,CAAC,KAAK,CAAC,IAAI,6BAA6B,CAAC;YACrF,MAAM,WAAW,GAAG,KAAK,CAAC,CAAC,GAAG,MAAM,CAAC,UAAU,CAAC;YAChD,MAAM,SAAS,GAAG,CAAC,MAAM,CAAC,UAAU,GAAG,KAAK,CAAC,MAAM,CAAC,GAAG,CAAC,CAAC;YACzD,OAAO,UAAU,IAAI,WAAW,IAAI,IAAI,CAAC,GAAG,CAAC,SAAS,EAAE,CAAC,CAAC,GAAG,sBAAsB,CAAC;QACtF,CAAC,CAAC,CAAC;QAEH,IAAI,MAAM,EAAE,CAAC;YACX,MAAM,CAAC,MAAM,CAAC,IAAI,CAAC,KAAK,CAAC,CAAC;YAC1B,MAAM,CAAC,KAAK,GAAG,KAAK,CAAC,CAAC,CAAC;YACvB,MAAM,CAAC,UAAU,GAAG,KAAK,CAAC,CAAC,GAAG,KAAK,CAAC,MAAM,CAAC;YAC3C,MAAM,CAAC,UAAU,GAAG,KAAK,CAAC,MAAM,CAAC;QACnC,CAAC;aAAM,CAAC;YACN,WAAW,CAAC,IAAI,CAAC,EAAE,MAAM,EAAE,CAAC,KAAK,CAAC,EAAE,KAAK,EAAE,KAAK,CAAC,CAAC,EAAE,UAAU,EAAE,KAAK,CAAC,CAAC,GAAG,KAAK,CAAC,MAAM,EAAE,UAAU,EAAE,KAAK,CAAC,MAAM,EAAE,CAAC,CAAC;QACtH,CAAC;IACH,CAAC;IAED,OAAO,WAAW,CAAC,GAAG,CAAC,CAAC,MAAM,EAAE,EAAE,CAAC,YAAY,CAAC,MAAM,CAAC,MAAM,CAAC,CAAC,CAAC,IAAI,CAAC,CAAC,CAAC,EAAE,CAAC,EAAE,EAAE,CAAC,CAAC,CAAC,eAAe,GAAG,CAAC,CAAC,eAAe,CAAC,CAAC;AACxH,CAAC;AAED,qDAAqD;AACrD,MAAM,UAAU,wBAAwB,CAAC,MAA2B;IAClE,MAAM,QAAQ,GAAG,iBAAiB,CAAC,MAAM,CAAC,CAAC;IAC3C,OAAO,QAAQ,CAAC,CAAC,CAAC,IAAI,IAAI,CAAC;AAC7B,CAAC"}

package/dist/extract/markdown.d.ts

@@ -0,0 +1,24 @@
+import { type PageGeometrySnapshot } from "./geometry.js";
+import { type QualityScoreInput } from "./qualityScore.js";
+export interface ExtractOptions {
+    url?: string;
+    /** CSSセレクタでDOMを絞り込んでから変換する(指定時はアダプタ/Readability/J4 pruning/ジオメトリ抽出をスキップ)。 */
+    selector?: string;
+    /** Phase 4: ブラウザ昇格時に採取したジオメトリデータ(HTTP tierやhttp未昇格時はnull/未指定)。 */
+    geometry?: PageGeometrySnapshot | null;
+}
+/** どの経路で本文候補HTMLを得たか(観測性向上・メタデータ表示用)。 */
+export type ExtractionMethod = "selector" | "adapter" | "readability" | "geometry" | "body-fallback";
+export interface ExtractResult {
+    title: string | null;
+    markdown: string;
+    /** J4 fit-pruningで除去したブロック数(selector指定時は常に0)。 */
+    prunedBlockCount: number;
+    /** 品質スコア(mode: autoでのスクリーンショット自動切替判定)の入力統計。 */
+    qualityInput: QualityScoreInput;
+    /** J7サイトアダプタが適用された場合、その識別名(selector指定時・未一致時はnull)。 */
+    adapterName: string | null;
+    extractionMethod: ExtractionMethod;
+}
+/** HTML文字列をMarkdownへ変換する。 */
+export declare function extractMarkdown(html: string, options?: ExtractOptions): ExtractResult;

package/dist/extract/markdown.js

@@ -0,0 +1,221 @@
+/**
+ * extract/markdown.ts — HTML→Markdown変換パイプライン。
+ *
+ * linkedomでパース → J2 ruby除去 → J8 同意バナー除去 → 品質スコア用統計の採取(元DOM全体)
+ * → 本文抽出(優先順: selector指定 > J7サイトアダプタ > Readability > Phase 4ジオメトリ抽出
+ *   > body全体フォールバック) → turndown(GFM)でMarkdown化 → J3 CJK正規化。
+ *
+ * 設計判断:
+ * - selectorは「抽出前にDOMへ適用」(plan.md)の記述に基づき、アダプタ・Readability・
+ *   ジオメトリ抽出の全てより優先する。selector指定時はユーザーが本文位置を明示している
+ *   とみなし、それら全てのヒューリスティックをスキップする(誤って削らないため)。
+ * - J7サイトアダプタは自動判定(ユーザー指定ではない)なので、選択した要素の中にも
+ *   J4 fit-pruningを適用する(アダプタのセレクタがコメント欄等まで含んでしまうケースの保険)。
+ * - 品質スコア用の統計(qualityInput)はプルーニング/バナー除去後・selector適用前の
+ *   ドキュメント全体から採取する。バナーは常にノイズなので統計からは除外し、
+ *   ページ全体が視覚情報に依存しているかどうかを判定したい。
+ * - Phase 4ジオメトリ抽出: Readabilityが本文を特定できない(MIN_READABILITY_TEXT_LENGTH未満)
+ *   場合、body全体ダンプへ即座にフォールバックする前に、ブラウザ昇格時のみ利用可能な
+ *   ジオメトリデータ(bounding box)から主コンテンツ領域を推定する(div soup/テーブル
+ *   レイアウト対策)。それも失敗した場合のみ最終手段としてbody全体を使う。
+ */
+import { Readability } from "@mozilla/readability";
+import { gfm } from "@joplin/turndown-plugin-gfm";
+import { parseHTML } from "linkedom";
+import TurndownService from "turndown";
+import { findAdapter } from "../adapters/index.js";
+import { ExtractionError } from "../errors.js";
+import { normalizeCjkText, stripRubyAnnotations } from "../jp/normalize.js";
+import { removeConsentBanners } from "../jp/consentBanner.js";
+import { estimateTokens } from "../tokens.js";
+import { computeVisualAreaRatio, selectMainContentCluster } from "./geometry.js";
+import { pruneLowValueBlocks } from "./pruning.js";
+const MIN_READABILITY_TEXT_LENGTH = 200;
+const LEAF_ELEMENT_SELECTOR = "p, li, td, th, span, div, canvas, svg, img, h1, h2, h3, h4, h5, h6, a, blockquote";
+// J6の画像面積比の基準ページ面積(px^2)。実レイアウトを取得できないHTTP tierでも使える
+// 固定近似値として、screenshot.tsの既定タイルサイズ(1280x1080)に揃えている。
+const REFERENCE_PAGE_AREA = 1280 * 1080;
+function createTurndownService() {
+    const service = new TurndownService({ headingStyle: "atx", codeBlockStyle: "fenced" });
+    service.use(gfm);
+    return service;
+}
+/** J6: img要素の面積占有率(近似)とalt欠落率を集計する。 */
+function collectImageStats(body) {
+    const imgs = Array.from(body.querySelectorAll("img"));
+    let totalArea = 0;
+    let missingAlt = 0;
+    for (const img of imgs) {
+        const width = Number(img.getAttribute("width")) || 0;
+        const height = Number(img.getAttribute("height")) || 0;
+        totalArea += width * height;
+        if (img.getAttribute("alt") === null)
+            missingAlt++;
+    }
+    return {
+        imgCount: imgs.length,
+        imgMissingAltCount: missingAlt,
+        imgAreaRatio: Math.min(totalArea / REFERENCE_PAGE_AREA, 1),
+    };
+}
+/** 品質スコア判定用の統計を、元ドキュメント全体(script/style除く)から採取する。 */
+function collectQualityInput(document, geometry) {
+    const body = document.body;
+    if (!body) {
+        return {
+            extractedTextLength: 0,
+            visibleTextLength: 0,
+            tableCellCount: 0,
+            canvasCount: 0,
+            svgCount: 0,
+            totalLeafElementCount: 0,
+            imgCount: 0,
+            imgMissingAltCount: 0,
+            imgAreaRatio: 0,
+            extractedTokenEstimate: 0,
+        };
+    }
+    // 元のDOMを変更しないよう、複製上でscript/style/noscriptを取り除いてから可視テキストを測る
+    const clone = body.cloneNode(true);
+    for (const el of Array.from(clone.querySelectorAll("script, style, noscript"))) {
+        el.remove();
+    }
+    const visibleTextLength = (clone.textContent ?? "").replace(/\s+/g, "").length;
+    const tableCellCount = body.querySelectorAll("td, th").length;
+    const canvasCount = body.querySelectorAll("canvas").length;
+    const svgCount = body.querySelectorAll("svg").length;
+    const totalLeafElementCount = body.querySelectorAll(LEAF_ELEMENT_SELECTOR).length;
+    const imageStats = collectImageStats(body);
+    // Phase 4: ブラウザ昇格時は実ジオメトリから視覚要素占有率を計算し、近似値より優先させる。
+    // table要素分の占有率も別途計算し、qualityScore.ts側で表由来分/canvas・svg由来分を
+    // 分離できるようにする(表がGFMテーブルとして正しく抽出できているページの誤判定対策)。
+    const validGeometry = geometry && geometry.pageWidth > 0 && geometry.pageHeight > 0 ? geometry : null;
+    const geometryAreaRatios = validGeometry
+        ? {
+            realVisualAreaRatio: computeVisualAreaRatio(validGeometry.visualElements, validGeometry.pageWidth, validGeometry.pageHeight),
+            realTableAreaRatio: computeVisualAreaRatio(validGeometry.visualElements.filter((el) => el.tag === "table"), validGeometry.pageWidth, validGeometry.pageHeight),
+        }
+        : null;
+    return {
+        extractedTextLength: 0, // Markdown生成後に上書きする
+        visibleTextLength,
+        tableCellCount,
+        canvasCount,
+        svgCount,
+        totalLeafElementCount,
+        ...imageStats,
+        extractedTokenEstimate: 0, // Markdown生成後に上書きする
+        ...(geometryAreaRatios ?? {}),
+    };
+}
+/** J7: アダプタのcontentSelectors候補を先頭から試し、最初に見つかった要素を返す。 */
+function selectAdapterContent(document, selectors) {
+    for (const selector of selectors) {
+        const match = document.querySelector(selector);
+        if (match)
+            return match;
+    }
+    return null;
+}
+/**
+ * Phase 4: ジオメトリクラスタ(主コンテンツ領域と推定されたテキストブロック群)から、
+ * 対応するDOM要素(data-amenbo-gid経由で再選択)のHTMLをクラスタ内の並び順で組み立てる。
+ * クラスタの総テキスト量がReadabilityと同じ最低ラインに満たない場合はnullを返す
+ * (ジオメトリでも本文らしきものが見つからなかった、という扱い)。
+ */
+function extractByGeometry(document, geometry) {
+    const cluster = selectMainContentCluster(geometry.textBlocks);
+    if (!cluster || cluster.totalTextLength < MIN_READABILITY_TEXT_LENGTH)
+        return null;
+    const elementById = new Map();
+    for (const el of Array.from(document.querySelectorAll("[data-amenbo-gid]"))) {
+        const id = Number(el.getAttribute("data-amenbo-gid"));
+        if (!Number.isNaN(id))
+            elementById.set(id, el);
+    }
+    const htmlParts = cluster.blockIds.map((id) => elementById.get(id)?.outerHTML).filter((part) => Boolean(part));
+    return htmlParts.length > 0 ? htmlParts.join("\n") : null;
+}
+/** HTML文字列をMarkdownへ変換する。 */
+export function extractMarkdown(html, options = {}) {
+    const url = options.url ?? "about:blank";
+    const { document } = parseHTML(html);
+    stripRubyAnnotations(document);
+    removeConsentBanners(document);
+    // レンダリング可視テキストに近い統計を、プルーニング/selector適用前の元ドキュメントから採取する
+    const qualityInput = collectQualityInput(document, options.geometry);
+    let contentHtml;
+    let title = document.title || null;
+    let prunedBlockCount = 0;
+    let adapterName = null;
+    let extractionMethod;
+    if (options.selector) {
+        const matched = Array.from(document.querySelectorAll(options.selector));
+        if (matched.length === 0) {
+            throw new ExtractionError(url, `selectorに一致する要素がありません: ${options.selector}`);
+        }
+        contentHtml = matched.map((el) => el.outerHTML).join("\n");
+        extractionMethod = "selector";
+    }
+    else {
+        const hostname = (() => {
+            try {
+                return new URL(url).hostname;
+            }
+            catch {
+                return "";
+            }
+        })();
+        const adapter = hostname ? findAdapter(hostname) : null;
+        const adapterElement = adapter ? selectAdapterContent(document, adapter.contentSelectors) : null;
+        if (adapter && adapterElement) {
+            for (const removeSelector of adapter.removeSelectors ?? []) {
+                for (const el of Array.from(adapterElement.querySelectorAll(removeSelector))) {
+                    el.remove();
+                }
+            }
+            prunedBlockCount = pruneLowValueBlocks(adapterElement);
+            contentHtml = adapterElement.outerHTML;
+            adapterName = adapter.name;
+            extractionMethod = "adapter";
+        }
+        else {
+            if (document.body) {
+                prunedBlockCount = pruneLowValueBlocks(document.body);
+            }
+            const article = new Readability(document).parse();
+            const geometryHtml = options.geometry ? extractByGeometry(document, options.geometry) : null;
+            if (article && article.content && (article.textContent ?? "").trim().length >= MIN_READABILITY_TEXT_LENGTH) {
+                contentHtml = article.content;
+                title = article.title || title;
+                extractionMethod = "readability";
+            }
+            else if (geometryHtml) {
+                // Phase 4: Readabilityが貧弱(かつアダプタ非該当)な場合、body全体ダンプの前に
+                // ブラウザ昇格時のジオメトリ(bounding box)から主コンテンツ領域を推定する
+                contentHtml = geometryHtml;
+                extractionMethod = "geometry";
+            }
+            else if (document.body) {
+                // Readability/ジオメトリいずれも本文を特定できない場合はbody全体にフォールバックする
+                contentHtml = document.body.innerHTML;
+                extractionMethod = "body-fallback";
+            }
+            else {
+                throw new ExtractionError(url, "本文と判定できる要素がありません");
+            }
+        }
+    }
+    const turndown = createTurndownService();
+    const rawMarkdown = turndown.turndown(contentHtml).trim();
+    const markdown = normalizeCjkText(rawMarkdown);
+    return {
+        title,
+        markdown,
+        prunedBlockCount,
+        qualityInput: { ...qualityInput, extractedTextLength: markdown.length, extractedTokenEstimate: estimateTokens(markdown) },
+        adapterName,
+        extractionMethod,
+    };
+}
+//# sourceMappingURL=markdown.js.map

package/dist/extract/markdown.js.map

@@ -0,0 +1 @@
+{"version":3,"file":"markdown.js","sourceRoot":"","sources":["../../src/extract/markdown.ts"],"names":[],"mappings":"AAAA;;;;;;;;;;;;;;;;;;;;GAoBG;AACH,OAAO,EAAE,WAAW,EAAE,MAAM,sBAAsB,CAAC;AACnD,OAAO,EAAE,GAAG,EAAE,MAAM,6BAA6B,CAAC;AAClD,OAAO,EAAE,SAAS,EAAE,MAAM,UAAU,CAAC;AACrC,OAAO,eAAe,MAAM,UAAU,CAAC;AACvC,OAAO,EAAE,WAAW,EAAE,MAAM,sBAAsB,CAAC;AACnD,OAAO,EAAE,eAAe,EAAE,MAAM,cAAc,CAAC;AAC/C,OAAO,EAAE,gBAAgB,EAAE,oBAAoB,EAAE,MAAM,oBAAoB,CAAC;AAC5E,OAAO,EAAE,oBAAoB,EAAkC,MAAM,wBAAwB,CAAC;AAC9F,OAAO,EAAE,cAAc,EAAE,MAAM,cAAc,CAAC;AAC9C,OAAO,EAAE,sBAAsB,EAAE,wBAAwB,EAA6B,MAAM,eAAe,CAAC;AAE5G,OAAO,EAAE,mBAAmB,EAAyB,MAAM,cAAc,CAAC;AAyB1E,MAAM,2BAA2B,GAAG,GAAG,CAAC;AACxC,MAAM,qBAAqB,GAAG,mFAAmF,CAAC;AAClH,qDAAqD;AACrD,oDAAoD;AACpD,MAAM,mBAAmB,GAAG,IAAI,GAAG,IAAI,CAAC;AAExC,SAAS,qBAAqB;IAC5B,MAAM,OAAO,GAAG,IAAI,eAAe,CAAC,EAAE,YAAY,EAAE,KAAK,EAAE,cAAc,EAAE,QAAQ,EAAE,CAAC,CAAC;IACvF,OAAO,CAAC,GAAG,CAAC,GAAG,CAAC,CAAC;IACjB,OAAO,OAAO,CAAC;AACjB,CAAC;AAaD,uCAAuC;AACvC,SAAS,iBAAiB,CAAC,IAAwB;IACjD,MAAM,IAAI,GAAG,KAAK,CAAC,IAAI,CAAC,IAAI,CAAC,gBAAgB,CAAC,KAAK,CAAC,CAAC,CAAC;IACtD,IAAI,SAAS,GAAG,CAAC,CAAC;IAClB,IAAI,UAAU,GAAG,CAAC,CAAC;IAEnB,KAAK,MAAM,GAAG,IAAI,IAAI,EAAE,CAAC;QACvB,MAAM,KAAK,GAAG,MAAM,CAAC,GAAG,CAAC,YAAY,CAAC,OAAO,CAAC,CAAC,IAAI,CAAC,CAAC;QACrD,MAAM,MAAM,GAAG,MAAM,CAAC,GAAG,CAAC,YAAY,CAAC,QAAQ,CAAC,CAAC,IAAI,CAAC,CAAC;QACvD,SAAS,IAAI,KAAK,GAAG,MAAM,CAAC;QAC5B,IAAI,GAAG,CAAC,YAAY,CAAC,KAAK,CAAC,KAAK,IAAI;YAAE,UAAU,EAAE,CAAC;IACrD,CAAC;IAED,OAAO;QACL,QAAQ,EAAE,IAAI,CAAC,MAAM;QACrB,kBAAkB,EAAE,UAAU;QAC9B,YAAY,EAAE,IAAI,CAAC,GAAG,CAAC,SAAS,GAAG,mBAAmB,EAAE,CAAC,CAAC;KAC3D,CAAC;AACJ,CAAC;AAED,oDAAoD;AACpD,SAAS,mBAAmB,CAAC,QAA6C,EAAE,QAAiD;IAC3H,MAAM,IAAI,GAAG,QAAQ,CAAC,IAAI,CAAC;IAC3B,IAAI,CAAC,IAAI,EAAE,CAAC;QACV,OAAO;YACL,mBAAmB,EAAE,CAAC;YACtB,iBAAiB,EAAE,CAAC;YACpB,cAAc,EAAE,CAAC;YACjB,WAAW,EAAE,CAAC;YACd,QAAQ,EAAE,CAAC;YACX,qBAAqB,EAAE,CAAC;YACxB,QAAQ,EAAE,CAAC;YACX,kBAAkB,EAAE,CAAC;YACrB,YAAY,EAAE,CAAC;YACf,sBAAsB,EAAE,CAAC;SAC1B,CAAC;IACJ,CAAC;IAED,2DAA2D;IAC3D,MAAM,KAAK,GAAG,IAAI,CAAC,SAAS,CAAC,IAAI,CAAC,CAAC;IACnC,KAAK,MAAM,EAAE,IAAI,KAAK,CAAC,IAAI,CAAC,KAAK,CAAC,gBAAgB,CAAC,yBAAyB,CAAC,CAAC,EAAE,CAAC;QAC/E,EAAE,CAAC,MAAM,EAAE,CAAC;IACd,CAAC;IAED,MAAM,iBAAiB,GAAG,CAAC,KAAK,CAAC,WAAW,IAAI,EAAE,CAAC,CAAC,OAAO,CAAC,MAAM,EAAE,EAAE,CAAC,CAAC,MAAM,CAAC;IAC/E,MAAM,cAAc,GAAG,IAAI,CAAC,gBAAgB,CAAC,QAAQ,CAAC,CAAC,MAAM,CAAC;IAC9D,MAAM,WAAW,GAAG,IAAI,CAAC,gBAAgB,CAAC,QAAQ,CAAC,CAAC,MAAM,CAAC;IAC3D,MAAM,QAAQ,GAAG,IAAI,CAAC,gBAAgB,CAAC,KAAK,CAAC,CAAC,MAAM,CAAC;IACrD,MAAM,qBAAqB,GAAG,IAAI,CAAC,gBAAgB,CAAC,qBAAqB,CAAC,CAAC,MAAM,CAAC;IAClF,MAAM,UAAU,GAAG,iBAAiB,CAAC,IAAI,CAAC,CAAC;IAE3C,mDAAmD;IACnD,0DAA0D;IAC1D,+CAA+C;IAC/C,MAAM,aAAa,GAAG,QAAQ,IAAI,QAAQ,CAAC,SAAS,GAAG,CAAC,IAAI,QAAQ,CAAC,UAAU,GAAG,CAAC,CAAC,CAAC,CAAC,QAAQ,CAAC,CAAC,CAAC,IAAI,CAAC;IACtG,MAAM,kBAAkB,GAAG,aAAa;QACtC,CAAC,CAAC;YACE,mBAAmB,EAAE,sBAAsB,CAAC,aAAa,CAAC,cAAc,EAAE,aAAa,CAAC,SAAS,EAAE,aAAa,CAAC,UAAU,CAAC;YAC5H,kBAAkB,EAAE,sBAAsB,CACxC,aAAa,CAAC,cAAc,CAAC,MAAM,CAAC,CAAC,EAAE,EAAE,EAAE,CAAC,EAAE,CAAC,GAAG,KAAK,OAAO,CAAC,EAC/D,aAAa,CAAC,SAAS,EACvB,aAAa,CAAC,UAAU,CACzB;SACF;QACH,CAAC,CAAC,IAAI,CAAC;IAET,OAAO;QACL,mBAAmB,EAAE,CAAC,EAAE,oBAAoB;QAC5C,iBAAiB;QACjB,cAAc;QACd,WAAW;QACX,QAAQ;QACR,qBAAqB;QACrB,GAAG,UAAU;QACb,sBAAsB,EAAE,CAAC,EAAE,oBAAoB;QAC/C,GAAG,CAAC,kBAAkB,IAAI,EAAE,CAAC;KAC9B,CAAC;AACJ,CAAC;AAYD,wDAAwD;AACxD,SAAS,oBAAoB,CAAC,QAA6B,EAAE,SAAmB;IAC9E,KAAK,MAAM,QAAQ,IAAI,SAAS,EAAE,CAAC;QACjC,MAAM,KAAK,GAAG,QAAQ,CAAC,aAAa,CAAC,QAAQ,CAAC,CAAC;QAC/C,IAAI,KAAK;YAAE,OAAO,KAAK,CAAC;IAC1B,CAAC;IACD,OAAO,IAAI,CAAC;AACd,CAAC;AAWD;;;;;GAKG;AACH,SAAS,iBAAiB,CAAC,QAA8B,EAAE,QAA8B;IACvF,MAAM,OAAO,GAAG,wBAAwB,CAAC,QAAQ,CAAC,UAAU,CAAC,CAAC;IAC9D,IAAI,CAAC,OAAO,IAAI,OAAO,CAAC,eAAe,GAAG,2BAA2B;QAAE,OAAO,IAAI,CAAC;IAEnF,MAAM,WAAW,GAAG,IAAI,GAAG,EAA+B,CAAC;IAC3D,KAAK,MAAM,EAAE,IAAI,KAAK,CAAC,IAAI,CAAC,QAAQ,CAAC,gBAAgB,CAAC,mBAAmB,CAAC,CAAC,EAAE,CAAC;QAC5E,MAAM,EAAE,GAAG,MAAM,CAAC,EAAE,CAAC,YAAY,CAAC,iBAAiB,CAAC,CAAC,CAAC;QACtD,IAAI,CAAC,MAAM,CAAC,KAAK,CAAC,EAAE,CAAC;YAAE,WAAW,CAAC,GAAG,CAAC,EAAE,EAAE,EAAE,CAAC,CAAC;IACjD,CAAC;IAED,MAAM,SAAS,GAAG,OAAO,CAAC,QAAQ,CAAC,GAAG,CAAC,CAAC,EAAE,EAAE,EAAE,CAAC,WAAW,CAAC,GAAG,CAAC,EAAE,CAAC,EAAE,SAAS,CAAC,CAAC,MAAM,CAAC,CAAC,IAAI,EAAkB,EAAE,CAAC,OAAO,CAAC,IAAI,CAAC,CAAC,CAAC;IAC/H,OAAO,SAAS,CAAC,MAAM,GAAG,CAAC,CAAC,CAAC,CAAC,SAAS,CAAC,IAAI,CAAC,IAAI,CAAC,CAAC,CAAC,CAAC,IAAI,CAAC;AAC5D,CAAC;AAED,6BAA6B;AAC7B,MAAM,UAAU,eAAe,CAAC,IAAY,EAAE,OAAO,GAAmB,EAAE;IACxE,MAAM,GAAG,GAAG,OAAO,CAAC,GAAG,IAAI,aAAa,CAAC;IACzC,MAAM,EAAE,QAAQ,EAAE,GAAG,SAAS,CAAC,IAAI,CAAC,CAAC;IAErC,oBAAoB,CAAC,QAAQ,CAAC,CAAC;IAC/B,oBAAoB,CAAC,QAAgD,CAAC,CAAC;IAEvE,sDAAsD;IACtD,MAAM,YAAY,GAAG,mBAAmB,CAAC,QAA0D,EAAE,OAAO,CAAC,QAAQ,CAAC,CAAC;IAEvH,IAAI,WAAmB,CAAC;IACxB,IAAI,KAAK,GAAkB,QAAQ,CAAC,KAAK,IAAI,IAAI,CAAC;IAClD,IAAI,gBAAgB,GAAG,CAAC,CAAC;IACzB,IAAI,WAAW,GAAkB,IAAI,CAAC;IACtC,IAAI,gBAAkC,CAAC;IAEvC,IAAI,OAAO,CAAC,QAAQ,EAAE,CAAC;QACrB,MAAM,OAAO,GAAG,KAAK,CAAC,IAAI,CAAC,QAAQ,CAAC,gBAAgB,CAAC,OAAO,CAAC,QAAQ,CAAC,CAAC,CAAC;QACxE,IAAI,OAAO,CAAC,MAAM,KAAK,CAAC,EAAE,CAAC;YACzB,MAAM,IAAI,eAAe,CAAC,GAAG,EAAE,0BAA0B,OAAO,CAAC,QAAQ,EAAE,CAAC,CAAC;QAC/E,CAAC;QACD,WAAW,GAAG,OAAO,CAAC,GAAG,CAAC,CAAC,EAAE,EAAE,EAAE,CAAC,EAAE,CAAC,SAAS,CAAC,CAAC,IAAI,CAAC,IAAI,CAAC,CAAC;QAC3D,gBAAgB,GAAG,UAAU,CAAC;IAChC,CAAC;SAAM,CAAC;QACN,MAAM,QAAQ,GAAG,CAAC,GAAG,EAAE;YACrB,IAAI,CAAC;gBACH,OAAO,IAAI,GAAG,CAAC,GAAG,CAAC,CAAC,QAAQ,CAAC;YAC/B,CAAC;YAAC,MAAM,CAAC;gBACP,OAAO,EAAE,CAAC;YACZ,CAAC;QACH,CAAC,CAAC,EAAE,CAAC;QACL,MAAM,OAAO,GAAG,QAAQ,CAAC,CAAC,CAAC,WAAW,CAAC,QAAQ,CAAC,CAAC,CAAC,CAAC,IAAI,CAAC;QACxD,MAAM,cAAc,GAAG,OAAO,CAAC,CAAC,CAAC,oBAAoB,CAAC,QAA0C,EAAE,OAAO,CAAC,gBAAgB,CAAC,CAAC,CAAC,CAAC,IAAI,CAAC;QAEnI,IAAI,OAAO,IAAI,cAAc,EAAE,CAAC;YAC9B,KAAK,MAAM,cAAc,IAAI,OAAO,CAAC,eAAe,IAAI,EAAE,EAAE,CAAC;gBAC3D,KAAK,MAAM,EAAE,IAAI,KAAK,CAAC,IAAI,CAAC,cAAc,CAAC,gBAAgB,CAAC,cAAc,CAAC,CAAC,EAAE,CAAC;oBAC7E,EAAE,CAAC,MAAM,EAAE,CAAC;gBACd,CAAC;YACH,CAAC;YACD,gBAAgB,GAAG,mBAAmB,CAAC,cAAc,CAAC,CAAC;YACvD,WAAW,GAAG,cAAc,CAAC,SAAS,CAAC;YACvC,WAAW,GAAG,OAAO,CAAC,IAAI,CAAC;YAC3B,gBAAgB,GAAG,SAAS,CAAC;QAC/B,CAAC;aAAM,CAAC;YACN,IAAI,QAAQ,CAAC,IAAI,EAAE,CAAC;gBAClB,gBAAgB,GAAG,mBAAmB,CAAC,QAAQ,CAAC,IAAI,CAAC,CAAC;YACxD,CAAC;YAED,MAAM,OAAO,GAAG,IAAI,WAAW,CAAC,QAAQ,CAAC,CAAC,KAAK,EAAE,CAAC;YAClD,MAAM,YAAY,GAAG,OAAO,CAAC,QAAQ,CAAC,CAAC,CAAC,iBAAiB,CAAC,QAA2C,EAAE,OAAO,CAAC,QAAQ,CAAC,CAAC,CAAC,CAAC,IAAI,CAAC;YAEhI,IAAI,OAAO,IAAI,OAAO,CAAC,OAAO,IAAI,CAAC,OAAO,CAAC,WAAW,IAAI,EAAE,CAAC,CAAC,IAAI,EAAE,CAAC,MAAM,IAAI,2BAA2B,EAAE,CAAC;gBAC3G,WAAW,GAAG,OAAO,CAAC,OAAO,CAAC;gBAC9B,KAAK,GAAG,OAAO,CAAC,KAAK,IAAI,KAAK,CAAC;gBAC/B,gBAAgB,GAAG,aAAa,CAAC;YACnC,CAAC;iBAAM,IAAI,YAAY,EAAE,CAAC;gBACxB,qDAAqD;gBACrD,6CAA6C;gBAC7C,WAAW,GAAG,YAAY,CAAC;gBAC3B,gBAAgB,GAAG,UAAU,CAAC;YAChC,CAAC;iBAAM,IAAI,QAAQ,CAAC,IAAI,EAAE,CAAC;gBACzB,oDAAoD;gBACpD,WAAW,GAAG,QAAQ,CAAC,IAAI,CAAC,SAAS,CAAC;gBACtC,gBAAgB,GAAG,eAAe,CAAC;YACrC,CAAC;iBAAM,CAAC;gBACN,MAAM,IAAI,eAAe,CAAC,GAAG,EAAE,kBAAkB,CAAC,CAAC;YACrD,CAAC;QACH,CAAC;IACH,CAAC;IAED,MAAM,QAAQ,GAAG,qBAAqB,EAAE,CAAC;IACzC,MAAM,WAAW,GAAG,QAAQ,CAAC,QAAQ,CAAC,WAAW,CAAC,CAAC,IAAI,EAAE,CAAC;IAC1D,MAAM,QAAQ,GAAG,gBAAgB,CAAC,WAAW,CAAC,CAAC;IAE/C,OAAO;QACL,KAAK;QACL,QAAQ;QACR,gBAAgB;QAChB,YAAY,EAAE,EAAE,GAAG,YAAY,EAAE,mBAAmB,EAAE,QAAQ,CAAC,MAAM,EAAE,sBAAsB,EAAE,cAAc,CAAC,QAAQ,CAAC,EAAE;QACzH,WAAW;QACX,gBAAgB;KACjB,CAAC;AACJ,CAAC"}

package/dist/extract/outline.d.ts

@@ -0,0 +1,33 @@
+export interface OutlineSection {
+    id: string;
+    level: number;
+    heading: string;
+    excerpt: string;
+    tokens: number;
+}
+export interface OutlineResult {
+    sections: OutlineSection[];
+    totalTokens: number;
+}
+export interface MarkdownSection {
+    id: string;
+    level: number;
+    heading: string;
+    /** 見出し行自身+ネストした子見出しを含む、この節の全内容(Markdown)。fetchツールのsection取得用。 */
+    content: string;
+    /**
+     * 見出し行自身+子見出し(h5/h6等、outlineには現れないもの含む)を挟まない直接の内容のみ。
+     * 子節の変更が親節にも「変更あり」として伝播してしまうのを避けるため、diff.ts専用に用意する。
+     */
+    ownContent: string;
+}
+/**
+ * 見出し行を境界に、ネストを考慮した節データを構築する。
+ * 見出しが1つも無いページは、全文を単一のsection "s1" として扱う。
+ * diff.ts(§3-3 差分応答)からも再利用される共通処理。
+ */
+export declare function splitSections(markdown: string): MarkdownSection[];
+/** 見出しツリー(h1-h4)+各節冒頭1文+概算トークン数の一覧を作る。 */
+export declare function buildOutline(markdown: string): OutlineResult;
+/** section IDに対応する節のMarkdown本文(ネストした子見出しを含む)を取得する。無ければnull。 */
+export declare function extractSection(markdown: string, sectionId: string): string | null;

package/dist/extract/outline.js

@@ -0,0 +1,128 @@
+/**
+ * extract/outline.ts — outlineモード。
+ *
+ * 変換済みMarkdownから見出しツリー(h1-h4)を抽出し、各節の冒頭1文+概算トークン数を
+ * 返す(数百トークンに収める段階開示)。各節にはsection IDを付与し、
+ * fetchツールの `section` パラメータでその節のMarkdown本文のみを取得できるようにする。
+ *
+ * 設計判断: section IDは見出しテキストのスラッグ化ではなく連番("s1","s2",...)にする。
+ * 日本語見出しはローマ字化が一意に定まらずスラッグが不安定になるため、
+ * 連番の方が単純・決定的で `section` パラメータとして扱いやすい。
+ */
+import { estimateTokens } from "../tokens.js";
+const MAX_OUTLINE_LEVEL = 4;
+const EXCERPT_MAX_LENGTH = 80;
+const HEADING_PATTERN = /^(#{1,6})\s+(.*)$/;
+/** フェンスコードブロック内は見出しとして扱わないよう考慮しつつ、見出し行を収集する。 */
+function findHeadingLines(lines) {
+    const headings = [];
+    let inFence = false;
+    lines.forEach((line, lineIndex) => {
+        if (/^\s*```/.test(line)) {
+            inFence = !inFence;
+            return;
+        }
+        if (inFence)
+            return;
+        const match = HEADING_PATTERN.exec(line);
+        if (match?.[1] && match[2] !== undefined) {
+            headings.push({ lineIndex, level: match[1].length, text: match[2].trim() });
+        }
+    });
+    return headings;
+}
+/**
+ * 見出し行を境界に、ネストを考慮した節データを構築する。
+ * 見出しが1つも無いページは、全文を単一のsection "s1" として扱う。
+ * diff.ts(§3-3 差分応答)からも再利用される共通処理。
+ */
+export function splitSections(markdown) {
+    const lines = markdown.split("\n");
+    const headings = findHeadingLines(lines);
+    if (headings.length === 0) {
+        if (markdown.trim().length === 0)
+            return [];
+        return [{ id: "s1", level: 1, heading: "(見出しなし)", content: markdown, ownContent: markdown }];
+    }
+    const stack = [];
+    const emitted = [];
+    let counter = 0;
+    for (let i = 0; i < headings.length; i++) {
+        const heading = headings[i];
+        if (!heading)
+            continue;
+        while (stack.length > 0 && (stack[stack.length - 1]?.level ?? 0) >= heading.level) {
+            stack.pop();
+        }
+        counter++;
+        const headingLine = lines[heading.lineIndex] ?? `${"#".repeat(heading.level)} ${heading.text}`;
+        const section = {
+            id: `s${counter}`,
+            level: heading.level,
+            heading: heading.text,
+            lines: [],
+            ownLines: [],
+            content: "",
+            ownContent: "",
+        };
+        for (const open of stack)
+            open.lines.push(headingLine);
+        section.lines.push(headingLine);
+        stack.push(section);
+        if (heading.level <= MAX_OUTLINE_LEVEL)
+            emitted.push(section);
+        // h5/h6等outlineに現れない深い見出しの内容は、直近のemitted(h1-h4)祖先のownContentへ
+        // 折り畳む(独立したdiffエントリを持たない代わりに、変更が検知されない事態を防ぐ)
+        const ownOwner = [...stack].reverse().find((open) => open.level <= MAX_OUTLINE_LEVEL) ?? null;
+        if (ownOwner)
+            ownOwner.ownLines.push(headingLine);
+        const contentStart = heading.lineIndex + 1;
+        const contentEnd = headings[i + 1]?.lineIndex ?? lines.length;
+        const contentLines = lines.slice(contentStart, contentEnd);
+        for (const line of contentLines) {
+            for (const open of stack)
+                open.lines.push(line);
+        }
+        if (ownOwner)
+            ownOwner.ownLines.push(...contentLines);
+    }
+    return emitted.map((section) => ({
+        id: section.id,
+        level: section.level,
+        heading: section.heading,
+        content: section.lines.join("\n"),
+        // 末尾の空行の有無は意味的な差ではないため、比較用のownContentはtrimして正規化する
+        // (前後の節の増減で「次の見出しの直前の空行の数」が変わるだけの見かけ上の差分を防ぐ)
+        ownContent: section.ownLines.join("\n").trim(),
+    }));
+}
+/** 節の内容から、見出し行を除いた本文の冒頭1文を抜き出す。 */
+function extractExcerpt(content) {
+    const bodyLines = content.split("\n").filter((line) => !HEADING_PATTERN.test(line));
+    const body = bodyLines.join("\n").trim();
+    if (body.length === 0)
+        return "";
+    const sentenceMatch = /[^。!?\n]*[。!?]/u.exec(body);
+    const raw = sentenceMatch ? sentenceMatch[0] : (body.split("\n").find((l) => l.trim().length > 0) ?? "");
+    return raw.trim().slice(0, EXCERPT_MAX_LENGTH);
+}
+/** 見出しツリー(h1-h4)+各節冒頭1文+概算トークン数の一覧を作る。 */
+export function buildOutline(markdown) {
+    const sections = splitSections(markdown);
+    return {
+        sections: sections.map((section) => ({
+            id: section.id,
+            level: section.level,
+            heading: section.heading,
+            excerpt: extractExcerpt(section.content),
+            tokens: estimateTokens(section.content),
+        })),
+        totalTokens: estimateTokens(markdown),
+    };
+}
+/** section IDに対応する節のMarkdown本文(ネストした子見出しを含む)を取得する。無ければnull。 */
+export function extractSection(markdown, sectionId) {
+    const sections = splitSections(markdown);
+    return sections.find((section) => section.id === sectionId)?.content ?? null;
+}
+//# sourceMappingURL=outline.js.map

package/dist/extract/outline.js.map

@@ -0,0 +1 @@
+{"version":3,"file":"outline.js","sourceRoot":"","sources":["../../src/extract/outline.ts"],"names":[],"mappings":"AAAA;;;;;;;;;;GAUG;AACH,OAAO,EAAE,cAAc,EAAE,MAAM,cAAc,CAAC;AAe9C,MAAM,iBAAiB,GAAG,CAAC,CAAC;AAC5B,MAAM,kBAAkB,GAAG,EAAE,CAAC;AAC9B,MAAM,eAAe,GAAG,mBAAmB,CAAC;AAQ5C,gDAAgD;AAChD,SAAS,gBAAgB,CAAC,KAAe;IACvC,MAAM,QAAQ,GAAkB,EAAE,CAAC;IACnC,IAAI,OAAO,GAAG,KAAK,CAAC;IAEpB,KAAK,CAAC,OAAO,CAAC,CAAC,IAAI,EAAE,SAAS,EAAE,EAAE;QAChC,IAAI,SAAS,CAAC,IAAI,CAAC,IAAI,CAAC,EAAE,CAAC;YACzB,OAAO,GAAG,CAAC,OAAO,CAAC;YACnB,OAAO;QACT,CAAC;QACD,IAAI,OAAO;YAAE,OAAO;QAEpB,MAAM,KAAK,GAAG,eAAe,CAAC,IAAI,CAAC,IAAI,CAAC,CAAC;QACzC,IAAI,KAAK,EAAE,CAAC,CAAC,CAAC,IAAI,KAAK,CAAC,CAAC,CAAC,KAAK,SAAS,EAAE,CAAC;YACzC,QAAQ,CAAC,IAAI,CAAC,EAAE,SAAS,EAAE,KAAK,EAAE,KAAK,CAAC,CAAC,CAAC,CAAC,MAAM,EAAE,IAAI,EAAE,KAAK,CAAC,CAAC,CAAC,CAAC,IAAI,EAAE,EAAE,CAAC,CAAC;QAC9E,CAAC;IACH,CAAC,CAAC,CAAC;IAEH,OAAO,QAAQ,CAAC;AAClB,CAAC;AAoBD;;;;GAIG;AACH,MAAM,UAAU,aAAa,CAAC,QAAgB;IAC5C,MAAM,KAAK,GAAG,QAAQ,CAAC,KAAK,CAAC,IAAI,CAAC,CAAC;IACnC,MAAM,QAAQ,GAAG,gBAAgB,CAAC,KAAK,CAAC,CAAC;IAEzC,IAAI,QAAQ,CAAC,MAAM,KAAK,CAAC,EAAE,CAAC;QAC1B,IAAI,QAAQ,CAAC,IAAI,EAAE,CAAC,MAAM,KAAK,CAAC;YAAE,OAAO,EAAE,CAAC;QAC5C,OAAO,CAAC,EAAE,EAAE,EAAE,IAAI,EAAE,KAAK,EAAE,CAAC,EAAE,OAAO,EAAE,SAAS,EAAE,OAAO,EAAE,QAAQ,EAAE,UAAU,EAAE,QAAQ,EAAE,CAAC,CAAC;IAC/F,CAAC;IAED,MAAM,KAAK,GAAkB,EAAE,CAAC;IAChC,MAAM,OAAO,GAAkB,EAAE,CAAC;IAClC,IAAI,OAAO,GAAG,CAAC,CAAC;IAEhB,KAAK,IAAI,CAAC,GAAG,CAAC,EAAE,CAAC,GAAG,QAAQ,CAAC,MAAM,EAAE,CAAC,EAAE,EAAE,CAAC;QACzC,MAAM,OAAO,GAAG,QAAQ,CAAC,CAAC,CAAC,CAAC;QAC5B,IAAI,CAAC,OAAO;YAAE,SAAS;QAEvB,OAAO,KAAK,CAAC,MAAM,GAAG,CAAC,IAAI,CAAC,KAAK,CAAC,KAAK,CAAC,MAAM,GAAG,CAAC,CAAC,EAAE,KAAK,IAAI,CAAC,CAAC,IAAI,OAAO,CAAC,KAAK,EAAE,CAAC;YAClF,KAAK,CAAC,GAAG,EAAE,CAAC;QACd,CAAC;QAED,OAAO,EAAE,CAAC;QACV,MAAM,WAAW,GAAG,KAAK,CAAC,OAAO,CAAC,SAAS,CAAC,IAAI,GAAG,GAAG,CAAC,MAAM,CAAC,OAAO,CAAC,KAAK,CAAC,IAAI,OAAO,CAAC,IAAI,EAAE,CAAC;QAC/F,MAAM,OAAO,GAAgB;YAC3B,EAAE,EAAE,IAAI,OAAO,EAAE;YACjB,KAAK,EAAE,OAAO,CAAC,KAAK;YACpB,OAAO,EAAE,OAAO,CAAC,IAAI;YACrB,KAAK,EAAE,EAAE;YACT,QAAQ,EAAE,EAAE;YACZ,OAAO,EAAE,EAAE;YACX,UAAU,EAAE,EAAE;SACf,CAAC;QAEF,KAAK,MAAM,IAAI,IAAI,KAAK;YAAE,IAAI,CAAC,KAAK,CAAC,IAAI,CAAC,WAAW,CAAC,CAAC;QACvD,OAAO,CAAC,KAAK,CAAC,IAAI,CAAC,WAAW,CAAC,CAAC;QAChC,KAAK,CAAC,IAAI,CAAC,OAAO,CAAC,CAAC;QACpB,IAAI,OAAO,CAAC,KAAK,IAAI,iBAAiB;YAAE,OAAO,CAAC,IAAI,CAAC,OAAO,CAAC,CAAC;QAE9D,8DAA8D;QAC9D,6CAA6C;QAC7C,MAAM,QAAQ,GAAG,CAAC,GAAG,KAAK,CAAC,CAAC,OAAO,EAAE,CAAC,IAAI,CAAC,CAAC,IAAI,EAAE,EAAE,CAAC,IAAI,CAAC,KAAK,IAAI,iBAAiB,CAAC,IAAI,IAAI,CAAC;QAC9F,IAAI,QAAQ;YAAE,QAAQ,CAAC,QAAQ,CAAC,IAAI,CAAC,WAAW,CAAC,CAAC;QAElD,MAAM,YAAY,GAAG,OAAO,CAAC,SAAS,GAAG,CAAC,CAAC;QAC3C,MAAM,UAAU,GAAG,QAAQ,CAAC,CAAC,GAAG,CAAC,CAAC,EAAE,SAAS,IAAI,KAAK,CAAC,MAAM,CAAC;QAC9D,MAAM,YAAY,GAAG,KAAK,CAAC,KAAK,CAAC,YAAY,EAAE,UAAU,CAAC,CAAC;QAC3D,KAAK,MAAM,IAAI,IAAI,YAAY,EAAE,CAAC;YAChC,KAAK,MAAM,IAAI,IAAI,KAAK;gBAAE,IAAI,CAAC,KAAK,CAAC,IAAI,CAAC,IAAI,CAAC,CAAC;QAClD,CAAC;QACD,IAAI,QAAQ;YAAE,QAAQ,CAAC,QAAQ,CAAC,IAAI,CAAC,GAAG,YAAY,CAAC,CAAC;IACxD,CAAC;IAED,OAAO,OAAO,CAAC,GAAG,CAAC,CAAC,OAAO,EAAE,EAAE,CAAC,CAAC;QAC/B,EAAE,EAAE,OAAO,CAAC,EAAE;QACd,KAAK,EAAE,OAAO,CAAC,KAAK;QACpB,OAAO,EAAE,OAAO,CAAC,OAAO;QACxB,OAAO,EAAE,OAAO,CAAC,KAAK,CAAC,IAAI,CAAC,IAAI,CAAC;QACjC,kDAAkD;QAClD,6CAA6C;QAC7C,UAAU,EAAE,OAAO,CAAC,QAAQ,CAAC,IAAI,CAAC,IAAI,CAAC,CAAC,IAAI,EAAE;KAC/C,CAAC,CAAC,CAAC;AACN,CAAC;AAED,mCAAmC;AACnC,SAAS,cAAc,CAAC,OAAe;IACrC,MAAM,SAAS,GAAG,OAAO,CAAC,KAAK,CAAC,IAAI,CAAC,CAAC,MAAM,CAAC,CAAC,IAAI,EAAE,EAAE,CAAC,CAAC,eAAe,CAAC,IAAI,CAAC,IAAI,CAAC,CAAC,CAAC;IACpF,MAAM,IAAI,GAAG,SAAS,CAAC,IAAI,CAAC,IAAI,CAAC,CAAC,IAAI,EAAE,CAAC;IACzC,IAAI,IAAI,CAAC,MAAM,KAAK,CAAC;QAAE,OAAO,EAAE,CAAC;IAEjC,MAAM,aAAa,GAAG,iBAAiB,CAAC,IAAI,CAAC,IAAI,CAAC,CAAC;IACnD,MAAM,GAAG,GAAG,aAAa,CAAC,CAAC,CAAC,aAAa,CAAC,CAAC,CAAC,CAAC,CAAC,CAAC,CAAC,IAAI,CAAC,KAAK,CAAC,IAAI,CAAC,CAAC,IAAI,CAAC,CAAC,CAAC,EAAE,EAAE,CAAC,CAAC,CAAC,IAAI,EAAE,CAAC,MAAM,GAAG,CAAC,CAAC,IAAI,EAAE,CAAC,CAAC;IACzG,OAAO,GAAG,CAAC,IAAI,EAAE,CAAC,KAAK,CAAC,CAAC,EAAE,kBAAkB,CAAC,CAAC;AACjD,CAAC;AAED,0CAA0C;AAC1C,MAAM,UAAU,YAAY,CAAC,QAAgB;IAC3C,MAAM,QAAQ,GAAG,aAAa,CAAC,QAAQ,CAAC,CAAC;IACzC,OAAO;QACL,QAAQ,EAAE,QAAQ,CAAC,GAAG,CAAC,CAAC,OAAO,EAAE,EAAE,CAAC,CAAC;YACnC,EAAE,EAAE,OAAO,CAAC,EAAE;YACd,KAAK,EAAE,OAAO,CAAC,KAAK;YACpB,OAAO,EAAE,OAAO,CAAC,OAAO;YACxB,OAAO,EAAE,cAAc,CAAC,OAAO,CAAC,OAAO,CAAC;YACxC,MAAM,EAAE,cAAc,CAAC,OAAO,CAAC,OAAO,CAAC;SACxC,CAAC,CAAC;QACH,WAAW,EAAE,cAAc,CAAC,QAAQ,CAAC;KACtC,CAAC;AACJ,CAAC;AAED,+DAA+D;AAC/D,MAAM,UAAU,cAAc,CAAC,QAAgB,EAAE,SAAiB;IAChE,MAAM,QAAQ,GAAG,aAAa,CAAC,QAAQ,CAAC,CAAC;IACzC,OAAO,QAAQ,CAAC,IAAI,CAAC,CAAC,OAAO,EAAE,EAAE,CAAC,OAAO,CAAC,EAAE,KAAK,SAAS,CAAC,EAAE,OAAO,IAAI,IAAI,CAAC;AAC/E,CAAC"}

package/dist/extract/pdf.d.ts

@@ -0,0 +1,22 @@
+export declare const DEFAULT_PDF_MAX_BYTES: number;
+export interface PdfTextResult {
+    hasTextLayer: boolean;
+    /** ページ毎のプレーンテキスト(hasTextLayer=falseの場合は空配列)。 */
+    pages: string[];
+    pageCount: number;
+    title: string | null;
+}
+/** URLまたはContent-TypeからPDFかどうかを判定する。 */
+export declare function looksLikePdf(url: string, contentType: string | null): boolean;
+/** PDFバイト列がサイズ上限を超えていないか確認する。超過時は型付きエラーを投げる。 */
+export declare function assertPdfSizeWithinLimit(url: string, byteLength: number, maxBytes?: number): void;
+/** PDFバイト列からテキスト層を抽出する。実質的にテキストが無ければhasTextLayer=false。 */
+export declare function extractPdfText(bytes: Uint8Array): Promise<PdfTextResult>;
+/** テキスト抽出結果をページ見出し付きのMarkdown相当プレーンテキストへ整形する。 */
+export declare function markdownFromPdfText(result: PdfTextResult): string;
+export interface PdfPageImage {
+    page: number;
+    png: Buffer;
+}
+/** テキスト層が無いPDFのフォールバック: 各ページをPNGにラスタライズする(先頭MAX_RENDER_PAGESまで)。 */
+export declare function renderPdfPages(bytes: Uint8Array): Promise<PdfPageImage[]>;

package/dist/extract/pdf.js

@@ -0,0 +1,95 @@
+/**
+ * extract/pdf.ts — PDF対応(plan.md §6 Phase3 / 官公庁PDF想定)。
+ *
+ * pdfjs-distでテキスト層を抽出し、実質的にテキストが無ければ(スキャンPDF)
+ * 各ページを画像化してタイルとして返す(mode:autoの品質スコア→ピクセル切替と同じ流儀)。
+ *
+ * 設計判断: Playwright(Chromium)のヘッドレスビルドは内蔵PDFビューアプラグインが
+ * 無効化されており、`page.goto(pdfUrl)`は描画されずダウンロード扱いになることを実機検証で
+ * 確認した(`<embed type="application/pdf">`経由でも "Couldn't load plugin" となり失敗)。
+ * そのためPDFページの画像化にはPlaywrightを使わず、pdfjs-dist(パース・描画)+
+ * @napi-rs/canvas(cairo等のシステム依存が無いprebuiltネイティブモジュール。
+ * better-sqlite3と同様の配布容易性)を組み合わせる。
+ */
+import { createCanvas } from "@napi-rs/canvas";
+import { getDocument } from "pdfjs-dist/legacy/build/pdf.mjs";
+import { PayloadTooLargeError } from "../errors.js";
+export const DEFAULT_PDF_MAX_BYTES = 20 * 1024 * 1024; // 20MB
+// これ未満(全ページ平均の抽出文字数/ページ)ならテキスト層が実質無い(スキャンPDF)とみなす。
+// 図表ラベル程度の僅かなテキストは残る場合があるため、完全に0でなくとも低いしきい値にする。
+const MIN_TEXT_CHARS_PER_PAGE = 30;
+// 画像フォールバック時、トークン予算保護のため先頭N ページのみラスタライズする
+const MAX_RENDER_PAGES = 10;
+const RENDER_SCALE = 1.5;
+/** URLまたはContent-TypeからPDFかどうかを判定する。 */
+export function looksLikePdf(url, contentType) {
+    if (contentType && /application\/pdf/i.test(contentType))
+        return true;
+    try {
+        return /\.pdf(?:[?#]|$)/i.test(new URL(url).pathname);
+    }
+    catch {
+        return /\.pdf(?:[?#]|$)/i.test(url);
+    }
+}
+/** PDFバイト列がサイズ上限を超えていないか確認する。超過時は型付きエラーを投げる。 */
+export function assertPdfSizeWithinLimit(url, byteLength, maxBytes = DEFAULT_PDF_MAX_BYTES) {
+    if (byteLength > maxBytes) {
+        throw new PayloadTooLargeError(url, byteLength, maxBytes);
+    }
+}
+/** PDFバイト列からテキスト層を抽出する。実質的にテキストが無ければhasTextLayer=false。 */
+export async function extractPdfText(bytes) {
+    // verbosity: 0 (ERRORS)にしてpdf.jsの警告ログでstdout/stderrを汚さないようにする
+    const loadingTask = getDocument({ data: bytes, useSystemFonts: true, verbosity: 0 });
+    try {
+        const doc = await loadingTask.promise;
+        const pageCount = doc.numPages;
+        const pages = [];
+        let totalChars = 0;
+        for (let i = 1; i <= pageCount; i++) {
+            const page = await doc.getPage(i);
+            const content = await page.getTextContent();
+            const pageText = content.items.map((item) => ("str" in item ? item.str : "")).join("");
+            totalChars += pageText.trim().length;
+            pages.push(pageText);
+        }
+        const metadata = await doc.getMetadata().catch(() => null);
+        const infoTitle = metadata?.info?.Title ?? "";
+        const title = infoTitle.trim() || null;
+        const hasTextLayer = pageCount > 0 && totalChars / pageCount >= MIN_TEXT_CHARS_PER_PAGE;
+        return { hasTextLayer, pages: hasTextLayer ? pages : [], pageCount, title };
+    }
+    finally {
+        await loadingTask.destroy();
+    }
+}
+/** テキスト抽出結果をページ見出し付きのMarkdown相当プレーンテキストへ整形する。 */
+export function markdownFromPdfText(result) {
+    return result.pages.map((text, index) => `## ページ ${index + 1}\n\n${text.trim()}`).join("\n\n");
+}
+/** テキスト層が無いPDFのフォールバック: 各ページをPNGにラスタライズする(先頭MAX_RENDER_PAGESまで)。 */
+export async function renderPdfPages(bytes) {
+    // verbosity: 0 (ERRORS)にしてpdf.jsの警告ログでstdout/stderrを汚さないようにする
+    const loadingTask = getDocument({ data: bytes, useSystemFonts: true, verbosity: 0 });
+    try {
+        const doc = await loadingTask.promise;
+        const pageCount = Math.min(doc.numPages, MAX_RENDER_PAGES);
+        const images = [];
+        for (let i = 1; i <= pageCount; i++) {
+            const page = await doc.getPage(i);
+            const viewport = page.getViewport({ scale: RENDER_SCALE });
+            const canvas = createCanvas(Math.ceil(viewport.width), Math.ceil(viewport.height));
+            const context = canvas.getContext("2d");
+            // @napi-rs/canvasのContext2Dは pdf.js が要求するCanvasRenderingContext2D相当のAPIを実装している。
+            // canvas: null + canvasContext指定はDOM非依存(Node)環境向けにpdf.js自身が想定する使い方。
+            await page.render({ canvas: null, canvasContext: context, viewport }).promise;
+            images.push({ page: i, png: canvas.toBuffer("image/png") });
+        }
+        return images;
+    }
+    finally {
+        await loadingTask.destroy();
+    }
+}
+//# sourceMappingURL=pdf.js.map

package/dist/extract/pdf.js.map

@@ -0,0 +1 @@
+{"version":3,"file":"pdf.js","sourceRoot":"","sources":["../../src/extract/pdf.ts"],"names":[],"mappings":"AAAA;;;;;;;;;;;;GAYG;AACH,OAAO,EAAE,YAAY,EAAE,MAAM,iBAAiB,CAAC;AAC/C,OAAO,EAAE,WAAW,EAAE,MAAM,iCAAiC,CAAC;AAE9D,OAAO,EAAE,oBAAoB,EAAE,MAAM,cAAc,CAAC;AAEpD,MAAM,CAAC,MAAM,qBAAqB,GAAG,EAAE,GAAG,IAAI,GAAG,IAAI,CAAC,CAAC,OAAO;AAE9D,mDAAmD;AACnD,gDAAgD;AAChD,MAAM,uBAAuB,GAAG,EAAE,CAAC;AACnC,0CAA0C;AAC1C,MAAM,gBAAgB,GAAG,EAAE,CAAC;AAC5B,MAAM,YAAY,GAAG,GAAG,CAAC;AAUzB,wCAAwC;AACxC,MAAM,UAAU,YAAY,CAAC,GAAW,EAAE,WAA0B;IAClE,IAAI,WAAW,IAAI,mBAAmB,CAAC,IAAI,CAAC,WAAW,CAAC;QAAE,OAAO,IAAI,CAAC;IACtE,IAAI,CAAC;QACH,OAAO,kBAAkB,CAAC,IAAI,CAAC,IAAI,GAAG,CAAC,GAAG,CAAC,CAAC,QAAQ,CAAC,CAAC;IACxD,CAAC;IAAC,MAAM,CAAC;QACP,OAAO,kBAAkB,CAAC,IAAI,CAAC,GAAG,CAAC,CAAC;IACtC,CAAC;AACH,CAAC;AAED,gDAAgD;AAChD,MAAM,UAAU,wBAAwB,CAAC,GAAW,EAAE,UAAkB,EAAE,QAAQ,GAAW,qBAAqB;IAChH,IAAI,UAAU,GAAG,QAAQ,EAAE,CAAC;QAC1B,MAAM,IAAI,oBAAoB,CAAC,GAAG,EAAE,UAAU,EAAE,QAAQ,CAAC,CAAC;IAC5D,CAAC;AACH,CAAC;AAED,2DAA2D;AAC3D,MAAM,CAAC,KAAK,UAAU,cAAc,CAAC,KAAiB;IACpD,8DAA8D;IAC9D,MAAM,WAAW,GAAG,WAAW,CAAC,EAAE,IAAI,EAAE,KAAK,EAAE,cAAc,EAAE,IAAI,EAAE,SAAS,EAAE,CAAC,EAAE,CAAC,CAAC;IACrF,IAAI,CAAC;QACH,MAAM,GAAG,GAAG,MAAM,WAAW,CAAC,OAAO,CAAC;QACtC,MAAM,SAAS,GAAG,GAAG,CAAC,QAAQ,CAAC;QAC/B,MAAM,KAAK,GAAa,EAAE,CAAC;QAC3B,IAAI,UAAU,GAAG,CAAC,CAAC;QAEnB,KAAK,IAAI,CAAC,GAAG,CAAC,EAAE,CAAC,IAAI,SAAS,EAAE,CAAC,EAAE,EAAE,CAAC;YACpC,MAAM,IAAI,GAAG,MAAM,GAAG,CAAC,OAAO,CAAC,CAAC,CAAC,CAAC;YAClC,MAAM,OAAO,GAAG,MAAM,IAAI,CAAC,cAAc,EAAE,CAAC;YAC5C,MAAM,QAAQ,GAAG,OAAO,CAAC,KAAK,CAAC,GAAG,CAAC,CAAC,IAAI,EAAE,EAAE,CAAC,CAAC,KAAK,IAAI,IAAI,CAAC,CAAC,CAAC,IAAI,CAAC,GAAG,CAAC,CAAC,CAAC,EAAE,CAAC,CAAC,CAAC,IAAI,CAAC,EAAE,CAAC,CAAC;YACvF,UAAU,IAAI,QAAQ,CAAC,IAAI,EAAE,CAAC,MAAM,CAAC;YACrC,KAAK,CAAC,IAAI,CAAC,QAAQ,CAAC,CAAC;QACvB,CAAC;QAED,MAAM,QAAQ,GAAG,MAAM,GAAG,CAAC,WAAW,EAAE,CAAC,KAAK,CAAC,GAAG,EAAE,CAAC,IAAI,CAAC,CAAC;QAC3D,MAAM,SAAS,GAAI,QAAQ,EAAE,IAAuC,EAAE,KAAK,IAAI,EAAE,CAAC;QAClF,MAAM,KAAK,GAAG,SAAS,CAAC,IAAI,EAAE,IAAI,IAAI,CAAC;QAEvC,MAAM,YAAY,GAAG,SAAS,GAAG,CAAC,IAAI,UAAU,GAAG,SAAS,IAAI,uBAAuB,CAAC;QAExF,OAAO,EAAE,YAAY,EAAE,KAAK,EAAE,YAAY,CAAC,CAAC,CAAC,KAAK,CAAC,CAAC,CAAC,EAAE,EAAE,SAAS,EAAE,KAAK,EAAE,CAAC;IAC9E,CAAC;YAAS,CAAC;QACT,MAAM,WAAW,CAAC,OAAO,EAAE,CAAC;IAC9B,CAAC;AACH,CAAC;AAED,iDAAiD;AACjD,MAAM,UAAU,mBAAmB,CAAC,MAAqB;IACvD,OAAO,MAAM,CAAC,KAAK,CAAC,GAAG,CAAC,CAAC,IAAI,EAAE,KAAK,EAAE,EAAE,CAAC,UAAU,KAAK,GAAG,CAAC,OAAO,IAAI,CAAC,IAAI,EAAE,EAAE,CAAC,CAAC,IAAI,CAAC,MAAM,CAAC,CAAC;AACjG,CAAC;AAOD,oEAAoE;AACpE,MAAM,CAAC,KAAK,UAAU,cAAc,CAAC,KAAiB;IACpD,8DAA8D;IAC9D,MAAM,WAAW,GAAG,WAAW,CAAC,EAAE,IAAI,EAAE,KAAK,EAAE,cAAc,EAAE,IAAI,EAAE,SAAS,EAAE,CAAC,EAAE,CAAC,CAAC;IACrF,IAAI,CAAC;QACH,MAAM,GAAG,GAAG,MAAM,WAAW,CAAC,OAAO,CAAC;QACtC,MAAM,SAAS,GAAG,IAAI,CAAC,GAAG,CAAC,GAAG,CAAC,QAAQ,EAAE,gBAAgB,CAAC,CAAC;QAC3D,MAAM,MAAM,GAAmB,EAAE,CAAC;QAElC,KAAK,IAAI,CAAC,GAAG,CAAC,EAAE,CAAC,IAAI,SAAS,EAAE,CAAC,EAAE,EAAE,CAAC;YACpC,MAAM,IAAI,GAAiB,MAAM,GAAG,CAAC,OAAO,CAAC,CAAC,CAAC,CAAC;YAChD,MAAM,QAAQ,GAAG,IAAI,CAAC,WAAW,CAAC,EAAE,KAAK,EAAE,YAAY,EAAE,CAAC,CAAC;YAC3D,MAAM,MAAM,GAAG,YAAY,CAAC,IAAI,CAAC,IAAI,CAAC,QAAQ,CAAC,KAAK,CAAC,EAAE,IAAI,CAAC,IAAI,CAAC,QAAQ,CAAC,MAAM,CAAC,CAAC,CAAC;YACnF,MAAM,OAAO,GAAG,MAAM,CAAC,UAAU,CAAC,IAAI,CAAC,CAAC;YACxC,gFAAgF;YAChF,oEAAoE;YACpE,MAAM,IAAI,CAAC,MAAM,CAAC,EAAE,MAAM,EAAE,IAAI,EAAE,aAAa,EAAE,OAA8C,EAAE,QAAQ,EAAE,CAAC,CAAC,OAAO,CAAC;YACrH,MAAM,CAAC,IAAI,CAAC,EAAE,IAAI,EAAE,CAAC,EAAE,GAAG,EAAE,MAAM,CAAC,QAAQ,CAAC,WAAW,CAAC,EAAE,CAAC,CAAC;QAC9D,CAAC;QAED,OAAO,MAAM,CAAC;IAChB,CAAC;YAAS,CAAC;QACT,MAAM,WAAW,CAAC,OAAO,EAAE,CAAC;IAC9B,CAAC;AACH,CAAC"}