wikiparser-node 1.0.0-beta.3 → 1.0.1-b

package/config/zhwiki.json

@@ -708,472 +708,7 @@
 		]
 	],
 	"protocol": "bitcoin:|ftp://|ftps://|geo:|git://|gopher://|http://|https://|irc://|ircs://|magnet:|mailto:|mms://|news:|nntp://|redis://|sftp://|sip:|sips:|sms:|ssh://|svn://|tel:|telnet://|urn:|worldwind://|xmpp:",
-	"interwiki": [
-		"acronym",
-		"advisory",
-		"advogato",
-		"aew",
-		"appropedia",
-		"aquariumwiki",
-		"arborwiki",
-		"arxiv",
-		"baden",
-		"battlestarwiki",
-		"bcnbio",
-		"beacha",
-		"betawiki",
-		"bibcode",
-		"bibliowiki",
-		"bluwiki",
-		"botwiki",
-		"boxrec",
-		"bugzilla",
-		"bulba",
-		"c",
-		"c2",
-		"c2find",
-		"cache",
-		"ĉej",
-		"centralwikia",
-		"chej",
-		"choralwiki",
-		"citizendium",
-		"comixpedia",
-		"commons",
-		"communityscheme",
-		"communitywiki",
-		"comune",
-		"creativecommons",
-		"creativecommonswiki",
-		"cxej",
-		"dcc",
-		"dcdatabase",
-		"dcma",
-		"debian",
-		"delicious",
-		"devmo",
-		"dico",
-		"dicoado",
-		"dictionary",
-		"dict",
-		"disinfopedia",
-		"distributedproofreaders",
-		"distributedproofreadersca",
-		"dmoz",
-		"dmozs",
-		"doi",
-		"donate",
-		"doom_wiki",
-		"download",
-		"dbdump",
-		"dpd",
-		"dpla",
-		"drae",
-		"dreamhost",
-		"drumcorpswiki",
-		"dwjwiki",
-		"ecoreality",
-		"elibre",
-		"emacswiki",
-		"encyc",
-		"energiewiki",
-		"englyphwiki",
-		"enkol",
-		"eokulturcentro",
-		"esolang",
-		"etherpad",
-		"ethnologue",
-		"ethnologuefamily",
-		"evowiki",
-		"exotica",
-		"fanimutationwiki",
-		"fedora",
-		"finalfantasy",
-		"finnix",
-		"flickruser",
-		"flickrphoto",
-		"floralwiki",
-		"foldoc",
-		"foundation",
-		"foundationsite",
-		"foxwiki",
-		"freebio",
-		"freebsdman",
-		"freeculturewiki",
-		"freedomdefined",
-		"freefeel",
-		"freekiwiki",
-		"freenode",
-		"freesoft",
-		"ganfyd",
-		"gardenology",
-		"gausswiki",
-		"gentoo",
-		"genwiki",
-		"gerrit",
-		"git",
-		"gitlab",
-		"globalcontribs",
-		"glottolog",
-		"glottopedia",
-		"google",
-		"googledefine",
-		"googlegroups",
-		"guildwarswiki",
-		"guildwiki",
-		"gucprefix",
-		"gutenberg",
-		"gutenbergwiki",
-		"hackerspaces",
-		"h2wiki",
-		"hammondwiki",
-		"hdl",
-		"heraldik",
-		"horizonlabs",
-		"hrwiki",
-		"hrfwiki",
-		"hupwiki",
-		"iarchive",
-		"imdbname",
-		"imdbtitle",
-		"imdbcompany",
-		"imdbcharacter",
-		"incubator",
-		"infosecpedia",
-		"infosphere",
-		"irc",
-		"ircs",
-		"ircrc",
-		"rcirc",
-		"iso639-3",
-		"issn",
-		"iuridictum",
-		"jaglyphwiki",
-		"jefo",
-		"jerseydatabase",
-		"jira",
-		"jspwiki",
-		"jstor",
-		"kamelo",
-		"karlsruhe",
-		"kinowiki",
-		"komicawiki",
-		"kontuwiki",
-		"lexemes",
-		"liberachat",
-		"libreplanet",
-		"lingualibre",
-		"linguistlist",
-		"linuxwiki",
-		"linuxwikide",
-		"listarchive",
-		"liswiki",
-		"literateprograms",
-		"livepedia",
-		"localwiki",
-		"lojban",
-		"lokalhistoriewiki",
-		"lostpedia",
-		"lqwiki",
-		"luxo",
-		"mail",
-		"mailarchive",
-		"mariowiki",
-		"marveldatabase",
-		"meatball",
-		"mw",
-		"mediazilla",
-		"memoryalpha",
-		"metawiki",
-		"metawikimedia",
-		"metawikipedia",
-		"mineralienatlas",
-		"mixnmatch",
-		"moinmoin",
-		"monstropedia",
-		"mosapedia",
-		"mozcom",
-		"mozillawiki",
-		"mozillazinekb",
-		"musicbrainz",
-		"mediawikiwiki",
-		"mwod",
-		"mwot",
-		"nkcells",
-		"nlab",
-		"nara",
-		"nosmoke",
-		"nost",
-		"nostalgia",
-		"oeis",
-		"oldwikisource",
-		"olpc",
-		"omegawiki",
-		"onelook",
-		"openlibrary",
-		"openstreetmap",
-		"openwetware",
-		"opera7wiki",
-		"organicdesign",
-		"orthodoxwiki",
-		"osmwiki",
-		"otrs",
-		"otrswiki",
-		"ourmedia",
-		"outreach",
-		"outreachwiki",
-		"owasp",
-		"panawiki",
-		"patwiki",
-		"paws",
-		"personaltelco",
-		"petscan",
-		"phab",
-		"phabricator",
-		"phwiki",
-		"phpwiki",
-		"planetmath",
-		"pmeg",
-		"pmid",
-		"pokewiki",
-		"pokéwiki",
-		"policy",
-		"proofwiki",
-		"pyrev",
-		"pythoninfo",
-		"pythonwiki",
-		"pywiki",
-		"quality",
-		"quarry",
-		"regiowiki",
-		"rev",
-		"revo",
-		"rfc",
-		"rheinneckar",
-		"robowiki",
-		"rodovid",
-		"rowiki",
-		"rt",
-		"s23wiki",
-		"scholar",
-		"schoolswp",
-		"scores",
-		"scoutwiki",
-		"scramble",
-		"seapig",
-		"seattlewiki",
-		"slwiki",
-		"semantic-mw",
-		"senseislibrary",
-		"sep11",
-		"sharemap",
-		"silcode",
-		"slashdot",
-		"sourceforge",
-		"spcom",
-		"species",
-		"squeak",
-		"stats",
-		"stewardry",
-		"strategy",
-		"strategywiki",
-		"sulutil",
-		"swtrain",
-		"svn",
-		"swinbrain",
-		"tabwiki",
-		"tclerswiki",
-		"technorati",
-		"tenwiki",
-		"testwiki",
-		"testwikidata",
-		"test2wiki",
-		"tfwiki",
-		"thelemapedia",
-		"theopedia",
-		"thinkwiki",
-		"ticket",
-		"tmbw",
-		"tmnet",
-		"tmwiki",
-		"toolforge",
-		"toollabs",
-		"tools",
-		"tswiki",
-		"translatewiki",
-		"tviv",
-		"tvtropes",
-		"twiki",
-		"twl",
-		"tyvawiki",
-		"umap",
-		"uncyclopedia",
-		"unihan",
-		"unreal",
-		"urbandict",
-		"usej",
-		"usemod",
-		"usability",
-		"utrs",
-		"vikidia",
-		"viaf",
-		"vlos",
-		"vkol",
-		"votewiki",
-		"vrtwiki",
-		"vrts",
-		"weirdgloop",
-		"werelate",
-		"wg",
-		"wikia",
-		"wikiasite",
-		"wikiapiary",
-		"wikibooks",
-		"wikichristian",
-		"wikicities",
-		"wikicity",
-		"wikiconference",
-		"wikidata",
-		"wikiedudashboard",
-		"wikif1",
-		"wikifur",
-		"wikihow",
-		"wikiindex",
-		"wikilemon",
-		"wikilivres",
-		"wikilivresru",
-		"wikimac-de",
-		"wikimedia",
-		"wikinews",
-		"wikinfo",
-		"wikinvest",
-		"wikiotics",
-		"wikipapers",
-		"wikipedia",
-		"wikipediawikipedia",
-		"wikiquote",
-		"wikisophia",
-		"wikisource",
-		"wikisp",
-		"wikispecies",
-		"wikispot",
-		"wikiskripta",
-		"wikitech",
-		"labsconsole",
-		"wikiti",
-		"wikiversity",
-		"wikivoyage",
-		"betawikiversity",
-		"wikiwikiweb",
-		"wiktionary",
-		"wlug",
-		"wmam",
-		"wmar",
-		"wmat",
-		"wmau",
-		"wmbd",
-		"wmbe",
-		"wmbr",
-		"wmca",
-		"wmch",
-		"wmcl",
-		"wmcn",
-		"wmco",
-		"wmcz",
-		"wmcz_docs",
-		"wmcz_old",
-		"wmdc",
-		"securewikidc",
-		"wmde",
-		"wmdk",
-		"wmee",
-		"wmec",
-		"wmes",
-		"wmet",
-		"wmfdashboard",
-		"wmfi",
-		"wmfr",
-		"wmge",
-		"wmhi",
-		"wmhk",
-		"wmhu",
-		"wmid",
-		"wmil",
-		"wmin",
-		"wmit",
-		"wmke",
-		"wmmk",
-		"wmmx",
-		"wmnl",
-		"wmnyc",
-		"wmno",
-		"wmpa-us",
-		"wmph",
-		"wmpl",
-		"wmplsite",
-		"wmpt",
-		"wmpunjabi",
-		"wmromd",
-		"wmrs",
-		"wmru",
-		"wmse",
-		"wmsk",
-		"wmtr",
-		"wmtw",
-		"wmua",
-		"wmuk",
-		"wmve",
-		"wmza",
-		"wm2005",
-		"wm2006",
-		"wm2007",
-		"wm2008",
-		"wm2009",
-		"wm2010",
-		"wm2011",
-		"wm2012",
-		"wm2013",
-		"wm2014",
-		"wm2015",
-		"wm2016",
-		"wm2017",
-		"wm2018",
-		"wmania",
-		"wikimania",
-		"wikispore",
-		"wmteam",
-		"wmf",
-		"wmfblog",
-		"wmdeblog",
-		"wookieepedia",
-		"wowwiki",
-		"wqy",
-		"wurmpedia",
-		"xtools",
-		"zrhwiki",
-		"zum",
-		"zwiki",
-		"m",
-		"meta",
-		"d",
-		"cz",
-		"dk",
-		"epo",
-		"jp",
-		"minnan",
-		"zh-cfr",
-		"cmn",
-		"en-simple",
-		"w",
-		"wikt",
-		"q",
-		"b",
-		"n",
-		"s",
-		"chapter",
-		"v",
-		"voy"
-	],
+	"interwiki": [],
 	"img": {
 		"thumbnail": "thumbnail",
 		"thumb": "thumbnail",

package/extensions/dist/base.js

@@ -0,0 +1,105 @@
+(() => {
+    const MAX_STAGE = 11;
+    /** web worker */
+    const workerJS = () => {
+        self.importScripts('https://fastly.jsdelivr.net/gh/bhsd-harry/wikiparser-node@1.0.1-b/bundle/bundle.min.js');
+        const { Parser } = self, entities = { '&': 'amp', '<': 'lt', '>': 'gt' };
+        /** @implements */
+        self.onmessage = ({ data }) => {
+            const [command, qid, ...args] = data;
+            switch (command) {
+                case 'setI18N':
+                    Parser.i18n = qid;
+                    break;
+                case 'setConfig':
+                    Parser.config = qid;
+                    break;
+                case 'getConfig':
+                    self.postMessage([qid, Parser.minConfig]);
+                    break;
+                case 'lint':
+                    self.postMessage([qid, Parser.parse(...args).lint(), args[0]]);
+                    break;
+                // case 'print':
+                default: {
+                    const stage = args[2] === undefined ? MAX_STAGE : args[2];
+                    self.postMessage([
+                        qid,
+                        Parser.parse(...args).childNodes.map(child => [
+                            stage,
+                            String(child),
+                            child.type === 'text'
+                                ? String(child).replace(/[&<>]/gu, p => `&${entities[p]};`)
+                                : child.print(),
+                        ]),
+                    ]);
+                }
+            }
+        };
+    };
+    const blob = new Blob([`(${String(workerJS).replace(/MAX_STAGE/gu, String(MAX_STAGE))})()`], { type: 'text/javascript' }), url = URL.createObjectURL(blob), worker = new Worker(url);
+    URL.revokeObjectURL(url);
+    /**
+     * 生成事件监听函数
+     * @param qid 输入id
+     * @param resolve Promise对象的resolve函数
+     * @param raw 原始文本
+     */
+    // eslint-disable-next-line @typescript-eslint/no-explicit-any
+    const getListener = (qid, resolve, raw) => {
+        /**
+         * 事件监听函数
+         * @param {{data: [number, unknown, string]}} e 消息事件
+         */
+        const listener = ({ data: [rid, res, resRaw] }) => {
+            if (rid === qid && (raw === undefined || raw === resRaw)) {
+                worker.removeEventListener('message', listener);
+                resolve(res);
+            }
+        };
+        return listener;
+    };
+    /**
+     * 更新I18N消息
+     * @param i18n I18N消息
+     */
+    const setI18N = (i18n) => {
+        worker.postMessage(['setI18N', i18n]);
+    };
+    /**
+     * 更新解析设置
+     * @param config 设置
+     */
+    const setConfig = (config) => {
+        worker.postMessage(['setConfig', config]);
+    };
+    /** 获取Parser.minConfig */
+    const getConfig = () => new Promise(resolve => {
+        worker.addEventListener('message', getListener(-3, resolve));
+        worker.postMessage(['getConfig', -3]);
+    });
+    /**
+     * 将解析改为异步执行
+     * @param wikitext wikitext
+     * @param include 是否嵌入
+     * @param stage 解析层级
+     * @param qid Printer编号
+     */
+    const print = (wikitext, include, stage, qid = -1) => new Promise(resolve => {
+        worker.addEventListener('message', getListener(qid, resolve));
+        worker.postMessage(['print', qid, wikitext, include, stage]);
+    });
+    /**
+     * 将语法分析改为异步执行
+     * @param wikitext wikitext
+     * @param include 是否嵌入
+     * @param qid Linter编号，暂时固定为`-2`
+     */
+    const lint = (wikitext, include, qid = -2) => new Promise(resolve => {
+        worker.addEventListener('message', getListener(qid, resolve, wikitext));
+        worker.postMessage(['lint', qid, wikitext, include]);
+    });
+    const wikiparse = { MAX_STAGE, id: 0, setI18N, setConfig, getConfig, print, lint };
+    Object.defineProperty(wikiparse, 'MAX_STAGE', { enumerable: true, configurable: true });
+    Object.assign(window, { wikiparse });
+})();