@gerege-systems/eid-mongolia-sdk 0.23.0 → 0.24.0
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- package/README.md +38 -7
- package/bin/convert-assets.mjs +176 -20
- package/dist/convert.d.ts +2 -2
- package/dist/convert.js +2 -2
- package/package.json +1 -1
package/README.md
CHANGED
|
@@ -690,7 +690,7 @@ Go backend-д `complete` хийж болно).
|
|
|
690
690
|
|
|
691
691
|
```bash
|
|
692
692
|
npm install @gerege-systems/eid-mongolia-sdk @matbee/libreoffice-converter@2.7.2 # optional peer — зөвхөн /convert-д
|
|
693
|
-
npx eid-mongolia-convert-assets public/eid-convert # build үед; git-д commit хийхгүй (~
|
|
693
|
+
npx eid-mongolia-convert-assets public/eid-convert # build үед; git-д commit хийхгүй (~190 MB + .br/.gz)
|
|
694
694
|
```
|
|
695
695
|
|
|
696
696
|
```ts
|
|
@@ -711,7 +711,7 @@ if (isWordFile(file)) {
|
|
|
711
711
|
| Функц | Тайлбар |
|
|
712
712
|
|---|---|
|
|
713
713
|
| `wordToPdf(file, { assetsBase, onProgress?, signal?, fileName?, verbose? })` | `{ pdf, pages, warnings }`. Нэг worker-ийг дахин ашиглана, дуудлагууд дараалалд. `verbose: true` — LibreOffice-ийн оношилгооны лог консолд (анхдагч чимээгүй; утга солигдвол worker дахин асна) |
|
|
714
|
-
| `converterStatus({ assetsBase })` | `{ cached, downloadBytes }` — татахаас өмнө хэмжээг хэлэх (
|
|
714
|
+
| `converterStatus({ assetsBase })` | `{ cached, downloadBytes }` — татахаас өмнө хэмжээг хэлэх (brotli хэмжээ, кэштэй бол 0) |
|
|
715
715
|
| `isWordFile(file \| name)` | .docx / .doc эсэх (нэр, MIME). Агуулгыг `wordToPdf` эхний байтаар шалгана |
|
|
716
716
|
| `disposeConverter()` | worker-ийг зогсоож санах ойг чөлөөлнө (кэш үлдэнэ) |
|
|
717
717
|
|
|
@@ -720,9 +720,39 @@ if (isWordFile(file)) {
|
|
|
720
720
|
require-corp` (SharedArrayBuffer). Зөвхөн тэр route-д тавьж болно — тэгвэл тэр хуудас руу **hard navigation**
|
|
721
721
|
(`<a href>`, client-side router биш). Үгүй бол `wordToPdf` шууд `NOT_ISOLATED` (хүлээхгүй). COEP-ийн дор гадны
|
|
722
722
|
CORP/CORS-гүй зураг, iframe ачаалагдахгүй.
|
|
723
|
-
- Asset-ууд **өөрийн хост** дээр (`assetsBase`): `manifest.json` — `Cache-Control: no-cache`;
|
|
724
|
-
(`public, max-age=31536000, immutable`), `.wasm` → `application/wasm
|
|
725
|
-
|
|
723
|
+
- Asset-ууд **өөрийн хост** дээр (`assetsBase`): `manifest.json` — `Cache-Control: no-cache`; `<хувилбар>-<hash>/*` —
|
|
724
|
+
урт кэш (`public, max-age=31536000, immutable`), `.wasm` → `application/wasm`. Эхний удаа татсаныг SDK Cache Storage-д
|
|
725
|
+
хадгална (дахин татахгүй); хавтас солигдвол хуучныг устгана.
|
|
726
|
+
- **Шахалт.** `eid-mongolia-convert-assets` файл бүрийн хажууд `.br` (brotli 11) ба `.gz` (gzip 9) бичнэ —
|
|
727
|
+
серверт `brotli_static` / `gzip_static`-ээр өг (динамик шахалт 147 MB-ийн wasm-д хэт удаан). Хэмжээ (2.7.2):
|
|
728
|
+
|
|
729
|
+
| файл | задарсан | gzip | brotli |
|
|
730
|
+
|---|---|---|---|
|
|
731
|
+
| soffice.wasm | 147.4 MB | 48.5 MB | 33.8 MB |
|
|
732
|
+
| soffice.data | 43.2 MB (upstream 99.7 MB) | 11.9 MB | 7.1 MB |
|
|
733
|
+
| soffice.js + бусад JS | 0.5 MB | 0.1 MB | 0.1 MB |
|
|
734
|
+
|
|
735
|
+
Нийт эхний татал ≈ 41.0 MB brotli / 60.6 MB gzip (өмнө нь 77 MB gzip). brotli 11 нь soffice.wasm-д удаан (M4 Pro
|
|
736
|
+
дээр ~4 мин) — build-ийг хурдасгах бол `EID_CONVERT_BROTLI_QUALITY=9` (wasm 39.2 MB, ~9 с). nginx (ngx_brotli модуль):
|
|
737
|
+
|
|
738
|
+
```nginx
|
|
739
|
+
location /eid-convert/ {
|
|
740
|
+
brotli_static on; # <файл>.br, Accept-Encoding: br үед
|
|
741
|
+
gzip_static on; # <файл>.gz, бусад үед
|
|
742
|
+
types { application/wasm wasm; application/octet-stream data; text/javascript js; application/json json; }
|
|
743
|
+
add_header Cache-Control "public, max-age=31536000, immutable"; # + доорх worker CSP (*.js)
|
|
744
|
+
location = /eid-convert/manifest.json { add_header Cache-Control "no-cache"; }
|
|
745
|
+
}
|
|
746
|
+
```
|
|
747
|
+
|
|
748
|
+
SDK задарсан байтыг тоолж (`onProgress`-ийн `loaded`/`total`) manifest-ийн `bytes`-тэй тулгадаг тул сервер аль
|
|
749
|
+
шахалтаар ч өгсөн progress зөв. Safari brotli-г зөвхөн HTTPS-ээр хүсдэг.
|
|
750
|
+
- **soffice.data-г багасгасан** (99.7 → 43.2 MB): Writer → PDF-д хэрэггүй фонт (араб, еврей, армян, гүрж,
|
|
751
|
+
Libertine…), Calc/Impress/Draw/Math-ийн UI тохиргоо, дүрсний сан, gallery хасагдана; NotoSans/NotoSerif (Ө Ү-ийн
|
|
752
|
+
орлуулагч) ба бүх `registry/*.xcd` (OMML томьёо) үлдэнэ. upstream `soffice.data` / `soffice.js`-ийн sha256 таарахгүй бол
|
|
753
|
+
хуулалт унана. 4 баримт дээр (хүснэгт, зураг, диаграм, томьёо, 11 фонтоор кирилл) PDF пиксел-ижил.
|
|
754
|
+
**Upstream хувилбар шинэчлэхэд** (`@matbee/libreoffice-converter` 2.7.2 → …): `DATA_TRIM`-ийн sha256 ба хасах жагсаалтыг
|
|
755
|
+
шинэ build дээр дахин гаргаж `npm run test:convert-e2e`-ээр (Chromium + WebKit) батал — хүснэгт, Ө Ү, томьёо.
|
|
726
756
|
- Worker-ийн скриптүүдэд (`<assetsBase><хувилбар>/*.js`) **тусдаа CSP**: `default-src 'self'; script-src 'self'
|
|
727
757
|
'wasm-unsafe-eval' 'unsafe-eval'` (Emscripten-д `eval` хэрэгтэй — зөвхөн worker-т). Хуудасны хатуу CSP (nonce +
|
|
728
758
|
`'strict-dynamic'`) хэвээр байна; хуудсанд `connect-src 'self'` хангалттай.
|
|
@@ -730,7 +760,8 @@ if (isWordFile(file)) {
|
|
|
730
760
|
`eid-mongolia-convert-assets` (≥ 0.18.2) upstream worker-ийг (`@matbee/libreoffice-converter@2.7.2`-ийн sha256-аар
|
|
731
761
|
баталгаажсан үед л) patch хийж эдгээрийг `verbose: true`-гүй бол гаргахгүй; `manifest.json`-д `"patched": true`. Hash
|
|
732
762
|
таарахгүй бол patch-гүй хуулж анхааруулна — хувиргалт ажиллана, лог л гарна. SDK шинэчилсний дараа asset-ийг дахин
|
|
733
|
-
хуул (`rev` солигдож worker-ийн immutable кэш шинэчлэгдэнэ; soffice.wasm/.data дахин
|
|
763
|
+
хуул (`rev` солигдож worker-ийн immutable кэш шинэчлэгдэнэ; soffice.js өөрчлөгдөөгүй бол soffice.wasm/.data дахин
|
|
764
|
+
татагдахгүй).
|
|
734
765
|
- Удаан CPU (0.21.0): upstream `soffice.js`-ийн `pthreadPoolSize=4` нь удаан компьютер дээр баримт ачаалахад
|
|
735
766
|
гацдаг (deadlock) тул `eid-mongolia-convert-assets` үүнийг 8 болгоно (`manifest.json`-д `"pthreadPoolSize": 8`;
|
|
736
767
|
зөвхөн JS). `soffice.js`-ийн sha256 мэдэгдэж буй 2.7.2-тэй таарахгүй бол хуулалт унана — asset-ийг дахин хуул.
|
|
@@ -745,7 +776,7 @@ Calibri / Cambria / Courier New-ийн Liberation / Carlito / Caladea орлуу
|
|
|
745
776
|
`limit` — §3d `prepare`-ийн 10 223 616 байт). Фонтын анхааруулга .docx-д л (heuristic); .doc-д үгүй.
|
|
746
777
|
|
|
747
778
|
Шалгасан: Chromium ба WebKit (Playwright, `npm run test:convert-e2e`) — .docx ба .doc → PDF → `prepare`, кэштэй дахин
|
|
748
|
-
ажиллуулахад татахгүй, цуцлалт, COEP-гүй хуудас. Мобайл хөтөчид
|
|
779
|
+
ажиллуулахад татахгүй, цуцлалт, COEP-гүй хуудас. Мобайл хөтөчид 147 MB WASM санах ой их шаардана — сул утсанд унаж
|
|
749
780
|
болзошгүй.
|
|
750
781
|
|
|
751
782
|
## 3f. Гарын үсэгтэй файлыг имэйлээр — `eid.share()` (`SIGN` эрх)
|
package/bin/convert-assets.mjs
CHANGED
|
@@ -1,11 +1,12 @@
|
|
|
1
1
|
#!/usr/bin/env node
|
|
2
2
|
// eid-mongolia-convert-assets <гаралтын хавтас> — `@gerege-systems/eid-mongolia-sdk/convert`-ийн хөтчийн asset-уудыг
|
|
3
|
-
// төслийн node_modules-ийн `@matbee/libreoffice-converter`-оос хуулна (build үед; git-д commit хийхгүй — ~
|
|
3
|
+
// төслийн node_modules-ийн `@matbee/libreoffice-converter`-оос хуулна (build үед; git-д commit хийхгүй — ~190 MB + .br/.gz).
|
|
4
4
|
//
|
|
5
|
-
// <хавтас>/manifest.json — богино кэш (no-cache): хувилбар, файл бүрийн хэмжээ (+ gzip хэмжээ)
|
|
6
|
-
//
|
|
7
|
-
//
|
|
8
|
-
//
|
|
5
|
+
// <хавтас>/manifest.json — богино кэш (no-cache): хувилбар, файл бүрийн хэмжээ (+ gzip, br хэмжээ)
|
|
6
|
+
// <хавтас>/<хувилбар>-<hash>/soffice.* — урт кэш (immutable); <hash> = soffice.js-ийн агуулга (data-ийн хүснэгт)
|
|
7
|
+
// <хавтас>/<хувилбар>-<hash>/eid-convert.worker.js, browser.worker.global.js
|
|
8
|
+
// <хавтас>/<хувилбар>-<hash>/NOTICE.txt
|
|
9
|
+
// <файл>.br, <файл>.gz — урьдчилж шахсан хуулбар (nginx brotli_static / gzip_static), .js/.wasm/.data бүрт
|
|
9
10
|
//
|
|
10
11
|
// browser.worker.global.js-ийг (зөвхөн sha256 нь QUIET_PATCH-тай таарвал) чимээгүй болгоно: upstream LibreOffice-ийн
|
|
11
12
|
// stdout/stderr-ийг (print/printErr) үргэлж console.log/console.error руу илгээдэг — хувиргалт бүрд ~28 улаан мөр
|
|
@@ -14,14 +15,22 @@
|
|
|
14
15
|
//
|
|
15
16
|
// soffice.js-ийн `pthreadPoolSize` 4 → 8 (POOL_PATCH, ЗААВАЛ): 4 нь удаан CPU дээр documentLoad-д deadlock (LO-ийн
|
|
16
17
|
// pthread-ийн MEMFS syscall нь LO worker руу sync proxy, worker нь pthread хүлээж хаагдсан); 5+ ажиллана. Hash эсвэл
|
|
17
|
-
// солилт таарахгүй бол build унана (patch-гүй asset гацаж болзошгүй).
|
|
18
|
+
// солилт таарахгүй бол build унана (patch-гүй asset гацаж болзошгүй).
|
|
19
|
+
//
|
|
20
|
+
// soffice.data-г багасгана (DATA_TRIM, ЗААВАЛ): Writer → PDF-д хэрэггүй фонт, Calc/Impress/Draw/Math-ийн UI тохиргоо,
|
|
21
|
+
// дүрсний сан (99.7 MB → 43.2 MB). Emscripten file_packager-ийн хүснэгт (`loadPackage({files:[…],remote_package_size:N`)
|
|
22
|
+
// soffice.js дотор — offset-уудыг дахин бичнэ. soffice.data эсвэл soffice.js-ийн sha256 мэдэгдэж буй 2.7.2 биш бол
|
|
23
|
+
// build унана (offset тодорхойгүй). wasm хөндөхгүй.
|
|
24
|
+
//
|
|
25
|
+
// Шахалт: .br (brotli 11; `EID_CONVERT_BROTLI_QUALITY=0…11`-ээр бууруулж болно — soffice.wasm-д 11 нь M4 Pro дээр ~4
|
|
26
|
+
// мин) ба .gz (gzip 9). Сервер `Content-Encoding`-оор өгсөн ч SDK задарсан байтыг тоолж manifest-ийн `bytes`-тэй тулгана.
|
|
18
27
|
//
|
|
19
28
|
// `wordToPdf({ assetsBase: "<URL>/" })` нь <хавтас>-ын URL-ийг авна. Хуучин хувилбарын дэд хавтсыг устгана.
|
|
20
29
|
import { createHash } from "node:crypto";
|
|
21
30
|
import { createRequire } from "node:module";
|
|
22
|
-
import { createReadStream, createWriteStream, existsSync, mkdirSync, readdirSync, rmSync, statSync, copyFileSync, writeFileSync, readFileSync } from "node:fs";
|
|
31
|
+
import { closeSync, createReadStream, createWriteStream, existsSync, mkdirSync, openSync, readdirSync, readSync, rmSync, statSync, copyFileSync, writeFileSync, writeSync, readFileSync } from "node:fs";
|
|
23
32
|
import { join, dirname } from "node:path";
|
|
24
|
-
import { createGzip } from "node:zlib";
|
|
33
|
+
import { createBrotliCompress, createGzip, constants as Z } from "node:zlib";
|
|
25
34
|
import { pipeline } from "node:stream/promises";
|
|
26
35
|
import { Writable } from "node:stream";
|
|
27
36
|
|
|
@@ -56,20 +65,35 @@ if (peer && peer !== version) {
|
|
|
56
65
|
process.exit(1);
|
|
57
66
|
}
|
|
58
67
|
|
|
59
|
-
const
|
|
60
|
-
|
|
61
|
-
|
|
62
|
-
|
|
68
|
+
const BROTLI_QUALITY = process.env.EID_CONVERT_BROTLI_QUALITY?.trim() ? Number(process.env.EID_CONVERT_BROTLI_QUALITY) : 11;
|
|
69
|
+
if (!Number.isInteger(BROTLI_QUALITY) || BROTLI_QUALITY < 0 || BROTLI_QUALITY > 11) {
|
|
70
|
+
console.error("EID_CONVERT_BROTLI_QUALITY нь 0…11 бүхэл тоо");
|
|
71
|
+
process.exit(2);
|
|
63
72
|
}
|
|
64
73
|
|
|
65
|
-
|
|
66
|
-
|
|
67
|
-
|
|
68
|
-
|
|
74
|
+
/** `<файл>.br` (brotli) ба `<файл>.gz` (gzip 9) — nginx brotli_static / gzip_static; хэмжээг буцаана. */
|
|
75
|
+
async function compress(path) {
|
|
76
|
+
const size = statSync(path).size;
|
|
77
|
+
const one = async (ext, z) => {
|
|
78
|
+
await pipeline(createReadStream(path), z, createWriteStream(path + ext));
|
|
79
|
+
return statSync(path + ext).size;
|
|
80
|
+
};
|
|
81
|
+
// zlib нь libuv-ийн thread pool-д — файлууд зэрэгцээ шахагдана (soffice.wasm-ийн brotli хамгийн удаан).
|
|
82
|
+
const [br, gzip] = await Promise.all([
|
|
83
|
+
one(".br", createBrotliCompress({ params: { [Z.BROTLI_PARAM_QUALITY]: BROTLI_QUALITY, [Z.BROTLI_PARAM_SIZE_HINT]: size } })),
|
|
84
|
+
one(".gz", createGzip({ level: 9 })),
|
|
85
|
+
]);
|
|
86
|
+
return { bytes: size, gzip, br };
|
|
69
87
|
}
|
|
70
88
|
|
|
71
89
|
const sha256 = (buf) => createHash("sha256").update(buf).digest("hex");
|
|
72
90
|
|
|
91
|
+
async function sha256File(path) {
|
|
92
|
+
const h = createHash("sha256");
|
|
93
|
+
await pipeline(createReadStream(path), new Writable({ write(c, _e, cb) { h.update(c); cb(); } }));
|
|
94
|
+
return h.digest("hex");
|
|
95
|
+
}
|
|
96
|
+
|
|
73
97
|
/** Мэдэгдэж буй upstream файл → яг нэг удаа таарах ёстой солилтууд. */
|
|
74
98
|
const QUIET_PATCH = {
|
|
75
99
|
file: "browser.worker.global.js",
|
|
@@ -123,9 +147,136 @@ function pool(buf) {
|
|
|
123
147
|
return Buffer.from(s.replace(POOL_PATCH.from, () => POOL_PATCH.to), "utf8");
|
|
124
148
|
}
|
|
125
149
|
|
|
126
|
-
|
|
150
|
+
/**
|
|
151
|
+
* soffice.data-аас (Emscripten file_packager) Word → PDF-д хэрэггүй файлуудыг хасна. 2026-10-19 хэмжсэн: sample.docx,
|
|
152
|
+
* sample.doc, бодит гэрээ, стресс docx (хүснэгт, зураг, диаграм, OMML томьёо, текст хайрцаг, 11 фонтоор Ө ө Ү ү) — PDF
|
|
153
|
+
* пиксел-ижил. Хасахгүй (тусгайлан):
|
|
154
|
+
* - NotoSans / NotoSerif Латин-Кирилл — Cambria (Caladea-д кирилл алга) зэрэг фонтын Ө Ү-г эдгээрээр орлуулдаг;
|
|
155
|
+
* - registry/*.xcd бүгд — жишээ нь math.xcd-гүй бол .docx-ийн OMML томьёо PDF-ээс алга болдог.
|
|
156
|
+
*/
|
|
157
|
+
const DATA_TRIM = {
|
|
158
|
+
// @matbee/libreoffice-converter@2.7.2 wasm/soffice.data ба wasm/soffice.js (POOL_PATCH-аас өмнө)
|
|
159
|
+
data: "8f4e98aa67e108e161cecc7906d7ac0dd3941ef9347f999c3b9dbc049f165020",
|
|
160
|
+
js: "b67acadcb30171e6ec018754fcbe5b527443a3ef1c84f352e29aecff6d210e43",
|
|
161
|
+
drop: [
|
|
162
|
+
// Фонт: Writer-ийн баримтад ердийн бус бичиг (араб, еврей, армян, гүрж, лао, лису) ба тусгай гэр бүл.
|
|
163
|
+
/\/fonts\/truetype\/(LinLibertine|LinBiolinum|Amiri|Scheherazade|ReemKufi|Rubik|Alef|David|Frank|Miriam|Nachlieli|GenBas|GenBkBas|Noto(Sans|Serif|Kufi|Naskh)(Arabic|Hebrew|Armenian|Georgian|Lao|Lisu)|NotoKufiArabic|NotoNaskhArabic|DejaVuSans-ExtraLight|DejaVuSansCondensed|DejaVuSerifCondensed)/,
|
|
164
|
+
// Writer-ээс бусад модулийн UI тохиргоо (толгойгүй хувиргалтад ачаалагддаггүй).
|
|
165
|
+
/\/soffice\.cfg\/modules\/(scalc|simpress|sdraw|sweb|swform|swreport|swxform|sbibliography|dbapp|dbbrowser|dbquery|dbrelation|dbtable|dbtdata|sabpilot|scanner|spropctrlr|BasicIDE|smath|schart|sglobal)\//,
|
|
166
|
+
/\/soffice\.cfg\/simpress\//,
|
|
167
|
+
// Нүүр зураг, About, Android жишээ баримт, дүрсний сан, gallery.
|
|
168
|
+
/\/intro(-highres)?\.png$|\/shell\/about\.svg$|^\/android\//,
|
|
169
|
+
/images_colibre\.zip$|\/share\/gallery\//,
|
|
170
|
+
],
|
|
171
|
+
/** `opens___.ttf` (OpenSymbol) хэд хэдэн замд давхардсан — эхнийхийг үлдээнэ. */
|
|
172
|
+
dedupe: /opens___\.ttf$/,
|
|
173
|
+
};
|
|
174
|
+
|
|
175
|
+
const LOAD_PACKAGE = "loadPackage({files:";
|
|
176
|
+
const PACKAGE_SIZE = "remote_package_size:";
|
|
177
|
+
// Минификатор тоог заримдаа «14924e3» гэж бичдэг.
|
|
178
|
+
const ENTRY = /\{filename:"([^"]*)",start:(\d+(?:e\d+)?),end:(\d+(?:e\d+)?)\}/g;
|
|
179
|
+
|
|
180
|
+
/** soffice.js-ийн file_packager хүснэгт: [ { name, start, end } ], хүснэгтийн [from, to) байрлал, нийт хэмжээ. */
|
|
181
|
+
function packageTable(js) {
|
|
182
|
+
if (js.split(LOAD_PACKAGE + "[").length !== 2 || js.split(PACKAGE_SIZE).length !== 2) {
|
|
183
|
+
console.error(`soffice.js-д «${LOAD_PACKAGE}[» ба «${PACKAGE_SIZE}» тус бүр яг нэг биш — DATA_TRIM зогсов`);
|
|
184
|
+
process.exit(1);
|
|
185
|
+
}
|
|
186
|
+
const from = js.indexOf(LOAD_PACKAGE) + LOAD_PACKAGE.length;
|
|
187
|
+
const sizeAt = js.indexOf("]," + PACKAGE_SIZE, from);
|
|
188
|
+
const num = /^(\d+)\}/.exec(js.slice(sizeAt + 2 + PACKAGE_SIZE.length));
|
|
189
|
+
if (sizeAt < 0 || !num) {
|
|
190
|
+
console.error("soffice.js-ийн file_packager хүснэгт танигдсангүй — DATA_TRIM зогсов");
|
|
191
|
+
process.exit(1);
|
|
192
|
+
}
|
|
193
|
+
const body = js.slice(from + 1, sizeAt);
|
|
194
|
+
const entries = [...body.matchAll(ENTRY)].map((m) => ({ raw: m[0], name: m[1], start: Number(m[2]), end: Number(m[3]) }));
|
|
195
|
+
// Бүх мөр танигдсан (өөр талбаргүй), offset-ууд тасралтгүй, нийлбэр = remote_package_size.
|
|
196
|
+
let pos = 0;
|
|
197
|
+
for (const e of entries) {
|
|
198
|
+
if (e.start !== pos || e.end < e.start) {
|
|
199
|
+
console.error(`soffice.js-ийн хүснэгт тасралттай (${e.name}) — DATA_TRIM зогсов`);
|
|
200
|
+
process.exit(1);
|
|
201
|
+
}
|
|
202
|
+
pos = e.end;
|
|
203
|
+
}
|
|
204
|
+
if (entries.map((e) => e.raw).join(",") !== body || pos !== Number(num[1])) {
|
|
205
|
+
console.error("soffice.js-ийн file_packager хүснэгт хүлээгдсэн хэлбэрийн биш — DATA_TRIM зогсов");
|
|
206
|
+
process.exit(1);
|
|
207
|
+
}
|
|
208
|
+
return { entries, from, to: sizeAt + 2 + PACKAGE_SIZE.length + num[1].length, size: pos };
|
|
209
|
+
}
|
|
210
|
+
|
|
211
|
+
/** Хасах эсэх (`seen` — давхардсан файлын нэг дэх нь өнгөрсөн эсэх). */
|
|
212
|
+
function dropped(name, seen) {
|
|
213
|
+
if (DATA_TRIM.dedupe.test(name)) {
|
|
214
|
+
if (seen.has("dedupe")) return true;
|
|
215
|
+
seen.add("dedupe");
|
|
216
|
+
return false;
|
|
217
|
+
}
|
|
218
|
+
return DATA_TRIM.drop.some((re) => re.test(name));
|
|
219
|
+
}
|
|
220
|
+
|
|
221
|
+
/**
|
|
222
|
+
* Upstream soffice.js (patch-аас өмнө — `upstream`) ба soffice.data-г sha256-аар шалгаж хасах төлөвлөгөө гаргана;
|
|
223
|
+
* хүснэгтийг `patched` (POOL_PATCH-тай) js-д дахин бичнэ — гаралт нэг soffice.js.
|
|
224
|
+
*/
|
|
225
|
+
async function trimPlan(upstream, patched, dataPath) {
|
|
226
|
+
const [gotJs, gotData] = [sha256(upstream), await sha256File(dataPath)];
|
|
227
|
+
if (gotJs !== DATA_TRIM.js || gotData !== DATA_TRIM.data) {
|
|
228
|
+
console.error(`${PKG}/wasm/soffice.js sha256 ${gotJs}, soffice.data sha256 ${gotData} — мэдэгдэж буй ${DATA_TRIM.js} / ${DATA_TRIM.data} биш; soffice.data-ийн offset тодорхойгүй тул зогсов — SDK-ийн peerDependency хувилбарыг суулга`);
|
|
229
|
+
process.exit(1);
|
|
230
|
+
}
|
|
231
|
+
const js = patched.toString("utf8");
|
|
232
|
+
const t = packageTable(js);
|
|
233
|
+
if (t.size !== statSync(dataPath).size) {
|
|
234
|
+
console.error(`soffice.data ${statSync(dataPath).size} байт, хүснэгтэд ${t.size} — DATA_TRIM зогсов`);
|
|
235
|
+
process.exit(1);
|
|
236
|
+
}
|
|
237
|
+
const seen = new Set();
|
|
238
|
+
const keep = t.entries.filter((e) => !dropped(e.name, seen));
|
|
239
|
+
let pos = 0;
|
|
240
|
+
const table = keep.map((e) => {
|
|
241
|
+
const s = pos;
|
|
242
|
+
pos += e.end - e.start;
|
|
243
|
+
return `{filename:"${e.name}",start:${s},end:${pos}}`;
|
|
244
|
+
});
|
|
245
|
+
return { js: Buffer.from(js.slice(0, t.from) + "[" + table.join(",") + "]," + PACKAGE_SIZE + pos + js.slice(t.to), "utf8"), keep, files: t.entries.length };
|
|
246
|
+
}
|
|
247
|
+
|
|
248
|
+
/** Үлдэх мөрүүдийг upstream soffice.data-аас дарааллаар нь хуулна (бүтэн файлыг санах ойд барихгүй). */
|
|
249
|
+
function writeTrimmed(from, to, keep) {
|
|
250
|
+
const src = openSync(from, "r");
|
|
251
|
+
const dst = openSync(to, "w");
|
|
252
|
+
try {
|
|
253
|
+
let buf = Buffer.alloc(1 << 20);
|
|
254
|
+
for (const e of keep) {
|
|
255
|
+
const n = e.end - e.start;
|
|
256
|
+
if (buf.length < n) buf = Buffer.alloc(n);
|
|
257
|
+
if (readSync(src, buf, 0, n, e.start) !== n) throw new Error(`soffice.data: ${e.name} дутуу уншигдав`);
|
|
258
|
+
writeSync(dst, buf, 0, n);
|
|
259
|
+
}
|
|
260
|
+
} finally {
|
|
261
|
+
closeSync(src);
|
|
262
|
+
closeSync(dst);
|
|
263
|
+
}
|
|
264
|
+
}
|
|
265
|
+
|
|
266
|
+
// soffice.js (POOL_PATCH + DATA_TRIM-ийн хүснэгт) — хавтасны нэрийг агуулгаар нь тогтооно: soffice.js/.data-г
|
|
267
|
+
// `<хувилбар>/` дор immutable кэшлэдэг тул агуулга солигдвол (хуучин хүснэгт + шинэ data) URL ч солигдох ёстой.
|
|
268
|
+
const upstreamJs = readFileSync(join(src, FILES["soffice.js"]));
|
|
269
|
+
const plan = await trimPlan(upstreamJs, pool(upstreamJs), join(src, FILES["soffice.data"]));
|
|
270
|
+
const sofficeJs = plan.js;
|
|
271
|
+
const dir = `${version}-${sha256(sofficeJs).slice(0, 12)}/`;
|
|
272
|
+
mkdirSync(join(out, dir), { recursive: true });
|
|
273
|
+
for (const e of readdirSync(out)) {
|
|
274
|
+
if (e + "/" !== dir && e !== "manifest.json" && statSync(join(out, e)).isDirectory() && /^\d+\.\d+\.\d+/.test(e)) rmSync(join(out, e), { recursive: true });
|
|
275
|
+
}
|
|
276
|
+
|
|
127
277
|
let patched = false;
|
|
128
278
|
const rev = createHash("sha256");
|
|
279
|
+
const written = [];
|
|
129
280
|
for (const [name, rel] of Object.entries(FILES)) {
|
|
130
281
|
const from = rel === null ? new URL(name, import.meta.url).pathname : join(src, rel);
|
|
131
282
|
if (!existsSync(from)) {
|
|
@@ -139,14 +290,18 @@ for (const [name, rel] of Object.entries(FILES)) {
|
|
|
139
290
|
patched = q !== null;
|
|
140
291
|
writeFileSync(to, q ?? buf);
|
|
141
292
|
} else if (name === POOL_PATCH.file) {
|
|
142
|
-
writeFileSync(to,
|
|
293
|
+
writeFileSync(to, sofficeJs);
|
|
294
|
+
} else if (name === "soffice.data") {
|
|
295
|
+
writeTrimmed(from, to, plan.keep);
|
|
143
296
|
} else {
|
|
144
297
|
copyFileSync(from, to);
|
|
145
298
|
}
|
|
146
299
|
// Worker-ийн скриптүүд `<хувилбар>/` дор immutable кэштэй — агуулга солигдвол (patch, SDK шинэчлэл) rev-ээр URL солино.
|
|
147
300
|
if (name.endsWith(".js")) rev.update(name).update("\0").update(readFileSync(to));
|
|
148
|
-
|
|
301
|
+
written.push([name, to]);
|
|
149
302
|
}
|
|
303
|
+
const t0 = Date.now();
|
|
304
|
+
const files = Object.fromEntries(await Promise.all(written.map(async ([name, to]) => [name, await compress(to)])));
|
|
150
305
|
// MPL-2.0 §3.2: эх кодын байршил ба лиценз дагалдана.
|
|
151
306
|
writeFileSync(join(out, dir, "NOTICE.txt"),
|
|
152
307
|
`${PKG}@${version} (${license}) — LibreOffice WebAssembly build.\n` +
|
|
@@ -154,4 +309,5 @@ writeFileSync(join(out, dir, "NOTICE.txt"),
|
|
|
154
309
|
`License text: https://www.mozilla.org/MPL/2.0/\n`);
|
|
155
310
|
writeFileSync(join(out, "manifest.json"), JSON.stringify({ format: 1, converter: PKG, version, dir, rev: rev.digest("hex").slice(0, 16), patched, pthreadPoolSize: PTHREAD_POOL_SIZE, files }, null, 2) + "\n");
|
|
156
311
|
const sum = (k) => Object.values(files).reduce((s, f) => s + f[k], 0);
|
|
157
|
-
console.log(`${PKG}@${version} → ${join(out, dir)} (${(sum("bytes") / 1e6).toFixed(1)} MB, gzip ${(sum("gzip") / 1e6).toFixed(1)} MB
|
|
312
|
+
console.log(`${PKG}@${version} → ${join(out, dir)} (${(sum("bytes") / 1e6).toFixed(1)} MB, gzip ${(sum("gzip") / 1e6).toFixed(1)} MB, br ${(sum("br") / 1e6).toFixed(1)} MB — шахалт ${Math.round((Date.now() - t0) / 1000)} с)` +
|
|
313
|
+
`, soffice.data ${plan.keep.length}/${plan.files} файл${patched ? ", лог чимээгүй (patch)" : ""}`);
|
package/dist/convert.d.ts
CHANGED
|
@@ -82,7 +82,7 @@ interface WordToPdfResult {
|
|
|
82
82
|
interface ConverterStatus {
|
|
83
83
|
/** Бүх asset кэшэд бий — татах шаардлагагүй. */
|
|
84
84
|
cached: boolean;
|
|
85
|
-
/** Татах хэмжээ (байт): manifest-ийн gzip хэмжээ
|
|
85
|
+
/** Татах хэмжээ (байт): manifest-ийн brotli (эсвэл gzip) хэмжээ — сервер урьдчилж шахсан `.br`/`.gz`-г өгдөг бол; эс бөгөөс задарсан. Кэштэй бол 0. */
|
|
86
86
|
downloadBytes: number;
|
|
87
87
|
}
|
|
88
88
|
/**
|
|
@@ -106,7 +106,7 @@ declare function docxFonts(docx: Uint8Array): string[];
|
|
|
106
106
|
/**
|
|
107
107
|
* Word (.docx / .doc) баримтыг ХӨТӨЧ ДОТОР PDF болгоно. Файл хаашаа ч илгээгдэхгүй.
|
|
108
108
|
*
|
|
109
|
-
* Эхний удаа ~
|
|
109
|
+
* Эхний удаа ~191 MB (brotli ~41 MB, gzip ~61 MB) asset-ийг `assetsBase`-ээс татаж Cache Storage-д хадгална (`converterStatus`-аар
|
|
110
110
|
* урьдчилж мэд); дараагийн дуудлагууд нэг worker-ийг дахин ашиглана. Үр дүнг иргэнд ХАРУУЛЖ, зөвшөөрүүлсний дараа л
|
|
111
111
|
* `/pades` `prepare`-д өг — хувиргалтад загвар (фонт, мөр, хуудас) өөрчлөгдөж болно (`warnings`).
|
|
112
112
|
*
|
package/dist/convert.js
CHANGED
|
@@ -1231,7 +1231,7 @@ async function loadManifest(root, signal) {
|
|
|
1231
1231
|
return parseManifest(json);
|
|
1232
1232
|
}
|
|
1233
1233
|
function cacheName(m) {
|
|
1234
|
-
return CACHE_PREFIX + m.
|
|
1234
|
+
return CACHE_PREFIX + m.dir.slice(0, -1);
|
|
1235
1235
|
}
|
|
1236
1236
|
async function openCache(m) {
|
|
1237
1237
|
try {
|
|
@@ -1254,7 +1254,7 @@ async function converterStatus(opts) {
|
|
|
1254
1254
|
let missing = 0;
|
|
1255
1255
|
for (const a of BIG) {
|
|
1256
1256
|
const f = m.files[a];
|
|
1257
|
-
if (!await has(cache, root + m.dir + a)) missing += f.gzip ?? f.bytes;
|
|
1257
|
+
if (!await has(cache, root + m.dir + a)) missing += f.br ?? f.gzip ?? f.bytes;
|
|
1258
1258
|
}
|
|
1259
1259
|
return { cached: missing === 0, downloadBytes: missing };
|
|
1260
1260
|
}
|
package/package.json
CHANGED
|
@@ -1,6 +1,6 @@
|
|
|
1
1
|
{
|
|
2
2
|
"name": "@gerege-systems/eid-mongolia-sdk",
|
|
3
|
-
"version": "0.
|
|
3
|
+
"version": "0.24.0",
|
|
4
4
|
"description": "e-ID Mongolia Relying Party SDK — иргэнээр утсаар нь нэвтрэлт ба хууль ёсны цахим гарын үсэг (RP-API v3, Smart-ID нийцтэй).",
|
|
5
5
|
"license": "MIT",
|
|
6
6
|
"type": "module",
|