jtcsv 2.1.0 → 2.1.3
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- package/README.md +63 -17
- package/bin/jtcsv.js +1013 -117
- package/csv-to-json.js +385 -311
- package/examples/simple-usage.js +2 -3
- package/index.d.ts +288 -5
- package/index.js +23 -0
- package/json-to-csv.js +130 -89
- package/package.json +47 -19
- package/plugins/README.md +146 -2
- package/plugins/hono/README.md +25 -0
- package/plugins/hono/index.d.ts +12 -0
- package/plugins/hono/index.js +36 -0
- package/plugins/hono/package.json +35 -0
- package/plugins/nestjs/README.md +33 -0
- package/plugins/nestjs/index.d.ts +25 -0
- package/plugins/nestjs/index.js +77 -0
- package/plugins/nestjs/package.json +37 -0
- package/plugins/nuxt/README.md +25 -0
- package/plugins/nuxt/index.js +21 -0
- package/plugins/nuxt/package.json +35 -0
- package/plugins/nuxt/runtime/composables/useJtcsv.js +6 -0
- package/plugins/nuxt/runtime/plugin.js +6 -0
- package/plugins/remix/README.md +26 -0
- package/plugins/remix/index.d.ts +16 -0
- package/plugins/remix/index.js +62 -0
- package/plugins/remix/package.json +35 -0
- package/plugins/sveltekit/README.md +28 -0
- package/plugins/sveltekit/index.d.ts +17 -0
- package/plugins/sveltekit/index.js +54 -0
- package/plugins/sveltekit/package.json +33 -0
- package/plugins/trpc/README.md +22 -0
- package/plugins/trpc/index.d.ts +7 -0
- package/plugins/trpc/index.js +32 -0
- package/plugins/trpc/package.json +34 -0
- package/src/core/delimiter-cache.js +186 -0
- package/src/core/transform-hooks.js +350 -0
- package/src/engines/fast-path-engine.js +829 -340
- package/src/formats/tsv-parser.js +336 -0
- package/src/index-with-plugins.js +36 -14
- package/cli-tui.js +0 -5
|
@@ -0,0 +1,350 @@
|
|
|
1
|
+
/**
|
|
2
|
+
* Transform Hooks System
|
|
3
|
+
* Система хуков для трансформации данных перед/после конвертации
|
|
4
|
+
*
|
|
5
|
+
* @version 1.0.0
|
|
6
|
+
* @date 2026-01-23
|
|
7
|
+
*/
|
|
8
|
+
|
|
9
|
+
const { ValidationError } = require('../../errors');
|
|
10
|
+
|
|
11
|
+
class TransformHooks {
|
|
12
|
+
constructor() {
|
|
13
|
+
this.hooks = {
|
|
14
|
+
beforeConvert: [],
|
|
15
|
+
afterConvert: [],
|
|
16
|
+
perRow: []
|
|
17
|
+
};
|
|
18
|
+
}
|
|
19
|
+
|
|
20
|
+
/**
|
|
21
|
+
* Регистрирует хук beforeConvert
|
|
22
|
+
* @param {Function} hook - Функция хука
|
|
23
|
+
* @returns {TransformHooks} this для цепочки вызовов
|
|
24
|
+
*/
|
|
25
|
+
beforeConvert(hook) {
|
|
26
|
+
if (typeof hook !== 'function') {
|
|
27
|
+
throw new ValidationError('beforeConvert hook must be a function');
|
|
28
|
+
}
|
|
29
|
+
this.hooks.beforeConvert.push(hook);
|
|
30
|
+
return this;
|
|
31
|
+
}
|
|
32
|
+
|
|
33
|
+
/**
|
|
34
|
+
* Регистрирует хук afterConvert
|
|
35
|
+
* @param {Function} hook - Функция хука
|
|
36
|
+
* @returns {TransformHooks} this для цепочки вызовов
|
|
37
|
+
*/
|
|
38
|
+
afterConvert(hook) {
|
|
39
|
+
if (typeof hook !== 'function') {
|
|
40
|
+
throw new ValidationError('afterConvert hook must be a function');
|
|
41
|
+
}
|
|
42
|
+
this.hooks.afterConvert.push(hook);
|
|
43
|
+
return this;
|
|
44
|
+
}
|
|
45
|
+
|
|
46
|
+
/**
|
|
47
|
+
* Регистрирует per-row хук
|
|
48
|
+
* @param {Function} hook - Функция хука
|
|
49
|
+
* @returns {TransformHooks} this для цепочки вызовов
|
|
50
|
+
*/
|
|
51
|
+
perRow(hook) {
|
|
52
|
+
if (typeof hook !== 'function') {
|
|
53
|
+
throw new ValidationError('perRow hook must be a function');
|
|
54
|
+
}
|
|
55
|
+
this.hooks.perRow.push(hook);
|
|
56
|
+
return this;
|
|
57
|
+
}
|
|
58
|
+
|
|
59
|
+
/**
|
|
60
|
+
* Применяет beforeConvert хуки
|
|
61
|
+
* @param {any} data - Входные данные
|
|
62
|
+
* @param {Object} context - Контекст выполнения
|
|
63
|
+
* @returns {any} Трансформированные данные
|
|
64
|
+
*/
|
|
65
|
+
applyBeforeConvert(data, context = {}) {
|
|
66
|
+
let result = data;
|
|
67
|
+
for (const hook of this.hooks.beforeConvert) {
|
|
68
|
+
result = hook(result, context);
|
|
69
|
+
}
|
|
70
|
+
return result;
|
|
71
|
+
}
|
|
72
|
+
|
|
73
|
+
/**
|
|
74
|
+
* Применяет afterConvert хуки
|
|
75
|
+
* @param {any} data - Выходные данные
|
|
76
|
+
* @param {Object} context - Контекст выполнения
|
|
77
|
+
* @returns {any} Трансформированные данные
|
|
78
|
+
*/
|
|
79
|
+
applyAfterConvert(data, context = {}) {
|
|
80
|
+
let result = data;
|
|
81
|
+
for (const hook of this.hooks.afterConvert) {
|
|
82
|
+
result = hook(result, context);
|
|
83
|
+
}
|
|
84
|
+
return result;
|
|
85
|
+
}
|
|
86
|
+
|
|
87
|
+
/**
|
|
88
|
+
* Применяет per-row хуки
|
|
89
|
+
* @param {any} row - Строка данных
|
|
90
|
+
* @param {number} index - Индекс строки
|
|
91
|
+
* @param {Object} context - Контекст выполнения
|
|
92
|
+
* @returns {any} Трансформированная строка
|
|
93
|
+
*/
|
|
94
|
+
applyPerRow(row, index, context = {}) {
|
|
95
|
+
let result = row;
|
|
96
|
+
for (const hook of this.hooks.perRow) {
|
|
97
|
+
result = hook(result, index, context);
|
|
98
|
+
}
|
|
99
|
+
return result;
|
|
100
|
+
}
|
|
101
|
+
|
|
102
|
+
/**
|
|
103
|
+
* Применяет все хуки к массиву данных
|
|
104
|
+
* @param {Array} data - Массив данных
|
|
105
|
+
* @param {Object} context - Контекст выполнения
|
|
106
|
+
* @returns {Array} Трансформированный массив
|
|
107
|
+
*/
|
|
108
|
+
applyAll(data, context = {}) {
|
|
109
|
+
if (!Array.isArray(data)) {
|
|
110
|
+
throw new ValidationError('Data must be an array for applyAll');
|
|
111
|
+
}
|
|
112
|
+
|
|
113
|
+
// Применяем beforeConvert хуки
|
|
114
|
+
let processedData = this.applyBeforeConvert(data, context);
|
|
115
|
+
|
|
116
|
+
// Применяем per-row хуки к каждой строке
|
|
117
|
+
if (this.hooks.perRow.length > 0) {
|
|
118
|
+
processedData = processedData.map((row, index) =>
|
|
119
|
+
this.applyPerRow(row, index, context)
|
|
120
|
+
);
|
|
121
|
+
}
|
|
122
|
+
|
|
123
|
+
// Применяем afterConvert хуки
|
|
124
|
+
return this.applyAfterConvert(processedData, context);
|
|
125
|
+
}
|
|
126
|
+
|
|
127
|
+
/**
|
|
128
|
+
* Создает копию системы хуков
|
|
129
|
+
* @returns {TransformHooks} Новая копия
|
|
130
|
+
*/
|
|
131
|
+
clone() {
|
|
132
|
+
const cloned = new TransformHooks();
|
|
133
|
+
cloned.hooks = {
|
|
134
|
+
beforeConvert: [...this.hooks.beforeConvert],
|
|
135
|
+
afterConvert: [...this.hooks.afterConvert],
|
|
136
|
+
perRow: [...this.hooks.perRow]
|
|
137
|
+
};
|
|
138
|
+
return cloned;
|
|
139
|
+
}
|
|
140
|
+
|
|
141
|
+
/**
|
|
142
|
+
* Очищает все хуки
|
|
143
|
+
*/
|
|
144
|
+
clear() {
|
|
145
|
+
this.hooks = {
|
|
146
|
+
beforeConvert: [],
|
|
147
|
+
afterConvert: [],
|
|
148
|
+
perRow: []
|
|
149
|
+
};
|
|
150
|
+
}
|
|
151
|
+
|
|
152
|
+
/**
|
|
153
|
+
* Возвращает статистику по хукам
|
|
154
|
+
* @returns {Object} Статистика
|
|
155
|
+
*/
|
|
156
|
+
getStats() {
|
|
157
|
+
return {
|
|
158
|
+
beforeConvert: this.hooks.beforeConvert.length,
|
|
159
|
+
afterConvert: this.hooks.afterConvert.length,
|
|
160
|
+
perRow: this.hooks.perRow.length,
|
|
161
|
+
total: this.hooks.beforeConvert.length +
|
|
162
|
+
this.hooks.afterConvert.length +
|
|
163
|
+
this.hooks.perRow.length
|
|
164
|
+
};
|
|
165
|
+
}
|
|
166
|
+
}
|
|
167
|
+
|
|
168
|
+
/**
|
|
169
|
+
* Предопределенные хуки
|
|
170
|
+
*/
|
|
171
|
+
const predefinedHooks = {
|
|
172
|
+
/**
|
|
173
|
+
* Хук для фильтрации данных
|
|
174
|
+
* @param {Function} predicate - Функция-предикат
|
|
175
|
+
* @returns {Function} Хук фильтрации
|
|
176
|
+
*/
|
|
177
|
+
filter(predicate) {
|
|
178
|
+
return (data) => {
|
|
179
|
+
if (Array.isArray(data)) {
|
|
180
|
+
return data.filter(predicate);
|
|
181
|
+
}
|
|
182
|
+
return data;
|
|
183
|
+
};
|
|
184
|
+
},
|
|
185
|
+
|
|
186
|
+
/**
|
|
187
|
+
* Хук для маппинга данных
|
|
188
|
+
* @param {Function} mapper - Функция-маппер
|
|
189
|
+
* @returns {Function} Хук маппинга
|
|
190
|
+
*/
|
|
191
|
+
map(mapper) {
|
|
192
|
+
return (data) => {
|
|
193
|
+
if (Array.isArray(data)) {
|
|
194
|
+
return data.map(mapper);
|
|
195
|
+
}
|
|
196
|
+
return data;
|
|
197
|
+
};
|
|
198
|
+
},
|
|
199
|
+
|
|
200
|
+
/**
|
|
201
|
+
* Хук для сортировки данных
|
|
202
|
+
* @param {Function} compareFn - Функция сравнения
|
|
203
|
+
* @returns {Function} Хук сортировки
|
|
204
|
+
*/
|
|
205
|
+
sort(compareFn) {
|
|
206
|
+
return (data) => {
|
|
207
|
+
if (Array.isArray(data)) {
|
|
208
|
+
return [...data].sort(compareFn);
|
|
209
|
+
}
|
|
210
|
+
return data;
|
|
211
|
+
};
|
|
212
|
+
},
|
|
213
|
+
|
|
214
|
+
/**
|
|
215
|
+
* Хук для ограничения количества записей
|
|
216
|
+
* @param {number} limit - Максимальное количество записей
|
|
217
|
+
* @returns {Function} Хук ограничения
|
|
218
|
+
*/
|
|
219
|
+
limit(limit) {
|
|
220
|
+
return (data) => {
|
|
221
|
+
if (Array.isArray(data)) {
|
|
222
|
+
return data.slice(0, limit);
|
|
223
|
+
}
|
|
224
|
+
return data;
|
|
225
|
+
};
|
|
226
|
+
},
|
|
227
|
+
|
|
228
|
+
/**
|
|
229
|
+
* Хук для добавления метаданных
|
|
230
|
+
* @param {Object} metadata - Метаданные для добавления
|
|
231
|
+
* @returns {Function} Хук добавления метаданных
|
|
232
|
+
*/
|
|
233
|
+
addMetadata(metadata) {
|
|
234
|
+
return (data, context) => {
|
|
235
|
+
if (Array.isArray(data)) {
|
|
236
|
+
return data.map(item => ({
|
|
237
|
+
...item,
|
|
238
|
+
_metadata: {
|
|
239
|
+
...metadata,
|
|
240
|
+
timestamp: new Date().toISOString(),
|
|
241
|
+
context
|
|
242
|
+
}
|
|
243
|
+
}));
|
|
244
|
+
}
|
|
245
|
+
return data;
|
|
246
|
+
};
|
|
247
|
+
},
|
|
248
|
+
|
|
249
|
+
/**
|
|
250
|
+
* Хук для преобразования ключей
|
|
251
|
+
* @param {Function} keyTransformer - Функция преобразования ключей
|
|
252
|
+
* @returns {Function} Хук преобразования ключей
|
|
253
|
+
*/
|
|
254
|
+
transformKeys(keyTransformer) {
|
|
255
|
+
return (data) => {
|
|
256
|
+
if (Array.isArray(data)) {
|
|
257
|
+
return data.map(item => {
|
|
258
|
+
const transformed = {};
|
|
259
|
+
for (const [key, value] of Object.entries(item)) {
|
|
260
|
+
transformed[keyTransformer(key)] = value;
|
|
261
|
+
}
|
|
262
|
+
return transformed;
|
|
263
|
+
});
|
|
264
|
+
}
|
|
265
|
+
return data;
|
|
266
|
+
};
|
|
267
|
+
},
|
|
268
|
+
|
|
269
|
+
/**
|
|
270
|
+
* Хук для преобразования значений
|
|
271
|
+
* @param {Function} valueTransformer - Функция преобразования значений
|
|
272
|
+
* @returns {Function} Хук преобразования значений
|
|
273
|
+
*/
|
|
274
|
+
transformValues(valueTransformer) {
|
|
275
|
+
return (data) => {
|
|
276
|
+
if (Array.isArray(data)) {
|
|
277
|
+
return data.map(item => {
|
|
278
|
+
const transformed = {};
|
|
279
|
+
for (const [key, value] of Object.entries(item)) {
|
|
280
|
+
transformed[key] = valueTransformer(value, key);
|
|
281
|
+
}
|
|
282
|
+
return transformed;
|
|
283
|
+
});
|
|
284
|
+
}
|
|
285
|
+
return data;
|
|
286
|
+
};
|
|
287
|
+
},
|
|
288
|
+
|
|
289
|
+
/**
|
|
290
|
+
* Хук для валидации данных
|
|
291
|
+
* @param {Function} validator - Функция валидации
|
|
292
|
+
* @param {Function} onError - Обработчик ошибки
|
|
293
|
+
* @returns {Function} Хук валидации
|
|
294
|
+
*/
|
|
295
|
+
validate(validator, onError = console.error) {
|
|
296
|
+
return (data) => {
|
|
297
|
+
if (Array.isArray(data)) {
|
|
298
|
+
const validData = [];
|
|
299
|
+
const errors = [];
|
|
300
|
+
|
|
301
|
+
data.forEach((item, index) => {
|
|
302
|
+
try {
|
|
303
|
+
const isValid = validator(item, index);
|
|
304
|
+
if (isValid) {
|
|
305
|
+
validData.push(item);
|
|
306
|
+
} else {
|
|
307
|
+
errors.push({ index, item, reason: 'Validation failed' });
|
|
308
|
+
}
|
|
309
|
+
} catch (error) {
|
|
310
|
+
errors.push({ index, item, error: error.message });
|
|
311
|
+
}
|
|
312
|
+
});
|
|
313
|
+
|
|
314
|
+
if (errors.length > 0) {
|
|
315
|
+
onError('Validation errors:', errors);
|
|
316
|
+
}
|
|
317
|
+
|
|
318
|
+
return validData;
|
|
319
|
+
}
|
|
320
|
+
return data;
|
|
321
|
+
};
|
|
322
|
+
},
|
|
323
|
+
|
|
324
|
+
/**
|
|
325
|
+
* Хук для дедупликации данных
|
|
326
|
+
* @param {Function} keySelector - Функция выбора ключа
|
|
327
|
+
* @returns {Function} Хук дедупликации
|
|
328
|
+
*/
|
|
329
|
+
deduplicate(keySelector = JSON.stringify) {
|
|
330
|
+
return (data) => {
|
|
331
|
+
if (Array.isArray(data)) {
|
|
332
|
+
const seen = new Set();
|
|
333
|
+
return data.filter(item => {
|
|
334
|
+
const key = keySelector(item);
|
|
335
|
+
if (seen.has(key)) {
|
|
336
|
+
return false;
|
|
337
|
+
}
|
|
338
|
+
seen.add(key);
|
|
339
|
+
return true;
|
|
340
|
+
});
|
|
341
|
+
}
|
|
342
|
+
return data;
|
|
343
|
+
};
|
|
344
|
+
}
|
|
345
|
+
};
|
|
346
|
+
|
|
347
|
+
module.exports = {
|
|
348
|
+
TransformHooks,
|
|
349
|
+
predefinedHooks
|
|
350
|
+
};
|