@noeva/etl-core 1.0.0-next.3 → 1.0.0-next.4
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- package/README.md +5 -10
- package/deploy/deploy-ecr.sh +4 -7
- package/dist/cli.js +1 -1
- package/dist/connectors/mail.js +1 -1
- package/dist/connectors/process.js +1 -1
- package/dist/connectors/sendgrid.d.ts +1 -1
- package/dist/etl.config.js +7 -15
- package/dist/guida/404.html +2 -2
- package/dist/guida/GUIDA_SVILUPPO.html +3 -3
- package/dist/guida/TECHNICAL_OVERVIEW.html +3 -3
- package/dist/guida/assets/{app.lWZ5GK2m.js → app.CzIZwOrR.js} +1 -1
- package/dist/guida/assets/chunks/@localSearchIndexroot.08YFQ5n8.js +1 -0
- package/dist/guida/assets/chunks/{VPLocalSearchBox.C0h2R-Ih.js → VPLocalSearchBox.Cv9o56BQ.js} +1 -1
- package/dist/guida/assets/chunks/{theme.BYWumH0G.js → theme.CsUxYN72.js} +2 -2
- package/dist/guida/assets/{runbooks_deploy-ecr.md.6M67F85S.js → runbooks_deploy-ecr.md.4jQypInn.js} +2 -2
- package/dist/guida/assets/{runbooks_deploy-ecr.md.6M67F85S.lean.js → runbooks_deploy-ecr.md.4jQypInn.lean.js} +1 -1
- package/dist/guida/connectors/README.html +3 -3
- package/dist/guida/connectors/file.html +3 -3
- package/dist/guida/connectors/http.html +3 -3
- package/dist/guida/connectors/imap.html +3 -3
- package/dist/guida/connectors/jira.html +3 -3
- package/dist/guida/connectors/noeva.html +3 -3
- package/dist/guida/connectors/oauth.html +3 -3
- package/dist/guida/connectors/postgres.html +3 -3
- package/dist/guida/connectors/process.html +3 -3
- package/dist/guida/connectors/sendgrid.html +3 -3
- package/dist/guida/connectors/smtp.html +3 -3
- package/dist/guida/connectors/sqlserver.html +3 -3
- package/dist/guida/conventions/node-columns.html +3 -3
- package/dist/guida/conventions/node-descriptor.html +3 -3
- package/dist/guida/conventions/run-report.html +3 -3
- package/dist/guida/conventions/run-trace.html +3 -3
- package/dist/guida/conventions/variabili-del-core.html +3 -3
- package/dist/guida/conventions/versioni-di-pipeline.html +3 -3
- package/dist/guida/guide/claude-code/index.html +3 -3
- package/dist/guida/guide/claude-code/prompt.html +3 -3
- package/dist/guida/guide/claude-code/strumenti.html +3 -3
- package/dist/guida/guide/grafo.html +3 -3
- package/dist/guida/guide/usare/app-desktop.html +3 -3
- package/dist/guida/guide/usare/esito-di-una-run.html +3 -3
- package/dist/guida/guide/usare/index.html +3 -3
- package/dist/guida/hashmap.json +1 -1
- package/dist/guida/index.html +3 -3
- package/dist/guida/nodes/README.html +3 -3
- package/dist/guida/nodes/action.html +3 -3
- package/dist/guida/nodes/ai.html +3 -3
- package/dist/guida/nodes/join.html +3 -3
- package/dist/guida/nodes/lookup.html +3 -3
- package/dist/guida/nodes/pipeline.html +3 -3
- package/dist/guida/nodes/route.html +3 -3
- package/dist/guida/nodes/sink.html +3 -3
- package/dist/guida/nodes/source.html +3 -3
- package/dist/guida/nodes/task.html +3 -3
- package/dist/guida/nodes/transform.html +3 -3
- package/dist/guida/nodes/try-catch.html +3 -3
- package/dist/guida/nodes/union.html +3 -3
- package/dist/guida/pipelines/README.html +3 -3
- package/dist/guida/pipelines/crm-leads-sync.html +3 -3
- package/dist/guida/pipelines/cross-workspace-csv-merge.html +3 -3
- package/dist/guida/pipelines/movimenti-per-conto.html +3 -3
- package/dist/guida/pipelines/orders-enriched-daily.html +3 -3
- package/dist/guida/pipelines/test-posta.html +3 -3
- package/dist/guida/runbooks/aggiornamento-pm2.html +3 -3
- package/dist/guida/runbooks/deploy-ecr.html +5 -5
- package/dist/guida/runbooks/deployment.html +3 -3
- package/dist/guida/runbooks/etl-worker.html +3 -3
- package/dist/guida/runbooks/graph-server.html +3 -3
- package/dist/guida/runbooks/mask-key.html +3 -3
- package/dist/guida/runbooks/oauth-google-posta.html +3 -3
- package/dist/guida/runbooks/rollback-di-pipeline.html +3 -3
- package/dist/guida/runbooks/scd2-rehash.html +3 -3
- package/dist/guida/runbooks/sql-task-truncate-swap.html +3 -3
- package/dist/guida/runbooks/stato-incrementale.html +3 -3
- package/dist/guida/sub-pipelines/README.html +3 -3
- package/dist/guida/sub-pipelines/riepilogo-ordini.html +3 -3
- package/docs/.vitepress/lib/published-docs.ts +1 -7
- package/package.json +1 -1
- package/dist/chunk-5B2425TT.js +0 -1
- package/dist/chunk-ZCYSL5A6.js +0 -1
- package/dist/guida/assets/chunks/@localSearchIndexroot.B5zFGbAC.js +0 -1
package/README.md
CHANGED
|
@@ -113,8 +113,8 @@ config arriva da variabili d'ambiente. Tre modi di avviarla:
|
|
|
113
113
|
- **`run <pipeline>`** — batch: un container esegue una pipeline e termina. Con `--trace` salva
|
|
114
114
|
anche la traccia dei record ([La traccia di una run](docs/conventions/run-trace.md)).
|
|
115
115
|
|
|
116
|
-
Il `Dockerfile` alla radice di questo repo costruisce
|
|
117
|
-
|
|
116
|
+
Il `Dockerfile` alla radice di questo repo costruisce l'immagine del **core**, con le sue pipeline
|
|
117
|
+
d'esempio e pronte: serve a provarla in locale. L'immagine di un cliente si costruisce dal suo repo.
|
|
118
118
|
|
|
119
119
|
```bash
|
|
120
120
|
docker build -t noeva-etl .
|
|
@@ -123,14 +123,9 @@ docker run --rm noeva-etl list
|
|
|
123
123
|
docker run --rm --env-file .env noeva-etl run <pipeline>
|
|
124
124
|
```
|
|
125
125
|
|
|
126
|
-
|
|
127
|
-
(
|
|
128
|
-
|
|
129
|
-
|
|
130
|
-
```bash
|
|
131
|
-
./deploy-ecr.sh <cliente> --dry-run # controlli; senza --dry-run anche gate, build, push e tag di deploy
|
|
132
|
-
pnpm run etl deploy-ecr <cliente> --dry-run # lo stesso, dalla CLI
|
|
133
|
-
```
|
|
126
|
+
Il deploy su **ECR** di un cliente (ADR-0104) parte dal suo repo, con lo strumento del pacchetto:
|
|
127
|
+
`etl deploy-ecr <cliente>` ([runbook](docs/runbooks/deploy-ecr.md)). Nel core non resta nessun
|
|
128
|
+
cliente da deployare.
|
|
134
129
|
|
|
135
130
|
La UI (`noeva-etl-ui`) **non** passa da ECR: è un'app desktop Tauri, che si builda nel suo
|
|
136
131
|
submodule con `pnpm tauri build` ([ADR-0025](docs/architecture/adr/0025-noeva-etl-ui-desktop-tauri.md),
|
package/deploy/deploy-ecr.sh
CHANGED
|
@@ -12,8 +12,7 @@
|
|
|
12
12
|
# Questo file è la parte CORE: uguale per tutti i clienti, non ne nomina
|
|
13
13
|
# nessuno, e arriva col pacchetto (ETL-216). Lavora sulla cartella da cui si
|
|
14
14
|
# lancia, la radice del repo cliente. Ciò che è del cliente sta nella sua
|
|
15
|
-
# `deploy-ecr.conf` alla radice
|
|
16
|
-
# `clienti/<cliente>/deploy-ecr.conf`): repository ECR, servizio e bucket per
|
|
15
|
+
# `deploy-ecr.conf` alla radice: repository ECR, servizio e bucket per
|
|
17
16
|
# ambiente, pipeline del suo catalogo, variabili obbligatorie o vietate,
|
|
18
17
|
# submodule che l'immagine copia. L'immagine si costruisce col Dockerfile alla
|
|
19
18
|
# radice se il repo l'ha preso (`unmanaged`), altrimenti con quello del
|
|
@@ -70,11 +69,9 @@ branch_ammesso() { case "$1" in production) echo main ;; staging) echo staging ;
|
|
|
70
69
|
ENV_CORE=(NOEVA_API_BASE_URL NOEVA_API_KEY)
|
|
71
70
|
ATTESA_PIPELINE_S=1200
|
|
72
71
|
|
|
73
|
-
# La configurazione del cliente: quella del repo cliente
|
|
74
|
-
# core, quella in clienti/<cliente>/.
|
|
72
|
+
# La configurazione del cliente: quella alla radice del repo cliente.
|
|
75
73
|
conf_del_cliente() {
|
|
76
74
|
if [ -f deploy-ecr.conf ]; then echo deploy-ecr.conf
|
|
77
|
-
elif [ -f "clienti/$1/deploy-ecr.conf" ]; then echo "clienti/$1/deploy-ecr.conf"
|
|
78
75
|
else errore "Manca deploy-ecr.conf alla radice del repo: il cliente dichiara lì il suo deploy (lancia il comando dalla radice)"
|
|
79
76
|
fi
|
|
80
77
|
}
|
|
@@ -130,7 +127,7 @@ if [ "${SOLO_ECR}" = true ] && { [ "${SOLO_ENV}" = true ] || [ "${ATTENDI}" = tr
|
|
|
130
127
|
fi
|
|
131
128
|
|
|
132
129
|
# --- Configurazione del cliente --------------------------------------------
|
|
133
|
-
CONF="$(conf_del_cliente
|
|
130
|
+
CONF="$(conf_del_cliente)"
|
|
134
131
|
CLIENTE_NOME=""; CLIENTE_SLUG=""; ECR_REPOSITORY=""; AWS_ACCOUNT_ATTESO=""; PIATTAFORME=""
|
|
135
132
|
PIPELINE=(); ENV_OBBLIGATORIE=(); ENV_VIETATE=(); SUBMODULE=()
|
|
136
133
|
# shellcheck source=/dev/null
|
|
@@ -242,7 +239,7 @@ controlla_git() {
|
|
|
242
239
|
|
|
243
240
|
# L'immagine copia il submodule così com'è sul disco: dev'essere al commit che
|
|
244
241
|
# HEAD registra e senza modifiche, o porterebbe codice diverso da quello del
|
|
245
|
-
# piano
|
|
242
|
+
# piano.
|
|
246
243
|
verifica_submodule() {
|
|
247
244
|
local percorso="$1" registrato attuale
|
|
248
245
|
registrato="$(git rev-parse --verify --quiet "HEAD:${percorso}" || true)"
|
package/dist/cli.js
CHANGED
|
@@ -1,7 +1,7 @@
|
|
|
1
1
|
#!/usr/bin/env node
|
|
2
2
|
import {b}from'./chunk-NZR6TZ42.js';import {E,F}from'./chunk-MOHJWOCB.js';import {d as d$1,c}from'./chunk-HMED2UDJ.js';import {d,N as N$1,l,b as b$1}from'./chunk-BFW7HTF6.js';import {a,wa as wa$1,va as va$1,ua as ua$1,F as F$1,g,y,h,yb,zb,xb,A as A$1,C as C$1,Na,G,p,wb,za,K}from'./chunk-PE2QKU34.js';import {join,dirname,sep,resolve,posix,basename,relative}from'path';import {readFile,mkdir,writeFile,rename,rm as rm$1,readdir,stat,chmod,symlink,unlink,realpath,mkdtemp}from'fs/promises';import {fileURLToPath,pathToFileURL}from'url';import {register}from'tsx/esm/api';import {z as z$1}from'zod';import {realpathSync,existsSync,readdirSync,readFileSync}from'fs';import {promisify,isDeepStrictEqual,parseEnv}from'util';import {spawn,execFile,execFileSync}from'child_process';import {createRequire}from'module';import Su from'cors';import Vt from'express';import {userInfo,tmpdir,hostname}from'os';import {randomUUID}from'crypto';import {gunzipSync}from'zlib';import y$1 from'picocolors';function Wn(e){let n=new Set(e.map(r=>r.name)),t=new Map;for(let r of e)for(let o of r.plan.instances??[]){let a=o.subPipeline;if(n.has(a))throw new h(`La sub-pipeline "${a}", istanziata da "${r.name}", ha il nome di una pipeline: il nome \xE8 unico fra pipeline e sub-pipeline`);t.set(a,new Set([...t.get(a)??[],r.name]));}return [...t.entries()].map(([r,o])=>({name:r,usedBy:[...o].sort()})).sort((r,o)=>r.name.localeCompare(o.name))}a(Wn,"subPipelinesOf");function ul(e){let n=new Map;for(let t of e)for(let r of yb(t.plan)){let o=n.get(r.name);if(o!==void 0&&o!==r)throw new h(`Due sub-pipeline diverse si chiamano "${r.name}" (una la istanzia "${t.name}"): il nome di una sub-pipeline \xE8 unico`);n.set(r.name,r);}return n}a(ul,"declarationsByName");function Hr(e){let n=ul(e);return Wn(e).map(({name:t,usedBy:r})=>{let o=n.get(t);if(o===void 0)throw new h(`La sub-pipeline "${t}" \xE8 istanziata da "${r.join('", "')}" ma il piano non ne porta la dichiarazione: il piano di una root va costruito con GraphPipeline.getSpec()`);return {...zb(o),usedBy:r}})}a(Hr,"describeSubPipelinesOf");async function Xr(e){let n=await an(e);await Pl(n);let t=wl(await vl(n),n),r=t.pipelines.map((o,a)=>El(o,a,n));return Cl(r,n),{root:dirname(n),configPath:n,client:t.client,pipelines:r,subPipelines:kl(r,n),readyPipelines:r.filter(b).map(o=>o.name),unmanaged:t.unmanaged??[],warnings:r.length===0?[`${n} non dichiara pipeline: il catalogo \xE8 vuoto.`]:[]}}a(Xr,"loadCatalog");async function Qr(e){try{return (await stat(e)).isFile()}catch{return false}}a(Qr,"isFile");async function an(e){let n=resolve(e.cwd);if(e.configPath!==void 0){let r=resolve(n,e.configPath);if(!await Qr(r))throw new g(`il config indicato da --config non c'\xE8: ${r}`);return r}let t=await qn(n);if(t===void 0)throw new g(`nessun ${E} risalendo da ${n}: crealo alla radice del repo, oppure indica il percorso con --config <file>.`);return t}a(an,"locateConfig");async function qn(e,n=E){let t=join(e,n);if(await Qr(t))return t;let r=dirname(e);return r===e?void 0:qn(r,n)}a(qn,"findUpwards");var Yr='il package.json del repo deve dichiarare "type": "module"';async function Pl(e){let n=await qn(dirname(e),"package.json");if(n===void 0)throw new g(`${e} non sta in un package ESM: manca il package.json, e ${Yr}.`);let t;try{t=JSON.parse(await readFile(n,"utf8")).type;}catch(r){throw new g(`${n} non si legge come JSON: ${on(r)}`,{},{cause:r})}if(t!=="module")throw new g(`${e} non sta in un package ESM: ${Yr} (${n}).`)}a(Pl,"assertEsmScope");function on(e){return e instanceof Error?e.message:String(e)}a(on,"errorMessage");var Sl=(()=>{let e=false;return ()=>{e||(register(),e=true);}})();async function vl(e){Sl();let n;try{n=await import(pathToFileURL(e).href);}catch(t){throw new g(`l'import di ${e} \xE8 fallito: ${on(t)}`,{},{cause:t})}if(n.default===void 0)throw new g(`${e} non ha un export default: esporta defineEtlConfig({ client, pipelines }).`);return n.default}a(vl,"importConfig");var Zr="`unmanaged` dev'essere un elenco di percorsi",Jn='`client` dev\'essere lo slug del cliente: minuscole, cifre e trattini, come "acme"',bl=z$1.object({client:z$1.string({required_error:Jn,invalid_type_error:Jn}).regex(F,Jn),pipelines:z$1.array(z$1.unknown(),{required_error:"manca `pipelines`, l'elenco delle pipeline del catalogo",invalid_type_error:"`pipelines` dev'essere un elenco di pipeline"}),unmanaged:z$1.array(z$1.string({invalid_type_error:Zr}),{invalid_type_error:Zr}).optional()},{invalid_type_error:"l'export default non \xE8 un oggetto: esporta defineEtlConfig({ client, pipelines })"});function wl(e,n){let t=bl.safeParse(e);if(t.success)return t.data;let r=t.error.issues.map(o=>o.message);throw new g(`${n} non \xE8 valido: ${[...new Set(r)].join("; ")}.`)}a(wl,"parseConfig");var Rl=[["name",e=>typeof e=="string"&&e!==""],["description",e=>typeof e=="string"],["changelog",e=>Array.isArray(e)&&e.length>0],["run",e=>typeof e=="function"],["getSpec",e=>typeof e=="function"]];function El(e,n,t){let r=`pipelines[${n}] di ${t}`;if(typeof e!="object"||e===null)throw new g(`${r} non \xE8 una RunnablePipeline: \xE8 ${String(e)}.`);let o=e,a=Rl.filter(([s,l])=>!l(o[s])).map(([s])=>s);if(a.length>0)throw new g(`${r} non \xE8 una RunnablePipeline: mancano o non sono validi ${a.join(", ")}.`);return e}a(El,"asRunnablePipeline");function Cl(e,n){e.forEach((t,r)=>{let o=e.findIndex(a=>a.name===t.name);if(o!==r)throw new g(`nome duplicato "${t.name}" in ${n}: pipelines[${o}] e pipelines[${r}].`)});}a(Cl,"assertUniqueNames");function kl(e,n){let t=e.map(r=>{try{return {name:r.name,plan:r.getSpec()}}catch(o){throw new g(`il piano di "${r.name}" (${n}) non si calcola: ${on(o)}`,{},{cause:o})}});try{return Wn(t)}catch(r){throw new g(`${n}: ${on(r)}`,{},{cause:r})}}a(kl,"deriveSubPipelines");function ce(e){return `"${e}" \xE8 una sub-pipeline, si istanzia da un nodo \`pipeline\``}a(ce,"subPipelineNotLaunchable");var no="ETL_PIPELINE_WORKSPACES",$l=",",eo=":",xl="|",Dl=Object.freeze({restricted:false,allows:a(()=>true,"allows")});function X(e){return new g(`${no} non valida: ${e}`)}a(X,"configError");function Il(e){let n=e.indexOf(eo);if(n<0)throw X(`voce "${e}" senza "${eo}" (atteso <pipeline>:<workspace>[|<workspace>...])`);let t=e.slice(0,n).trim();if(t==="")throw X(`voce "${e}" senza nome di pipeline`);let r=e.slice(n+1).split(xl).map(o=>o.trim()).filter(o=>o!=="");if(r.length===0)throw X(`la pipeline "${t}" non ha nessun workspace`);return [t,new Set(r)]}a(Il,"parseEntry");function Ll(e,n,t=()=>false){if(e===void 0||e.trim()==="")return Dl;let r=e.split($l).map(s=>s.trim()).filter(s=>s!=="");if(r.length===0)throw X("impostata ma senza voci");let o=new Set(n),a$1=new Map;for(let s of r){let[l,c]=Il(s);if(!o.has(l))throw t(l)?X(ce(l)):X(`pipeline sconosciuta "${l}" (nel catalogo: ${[...o].join(", ")})`);if(a$1.has(l))throw X(`pipeline "${l}" ripetuta`);a$1.set(l,c);}return Object.freeze({restricted:true,allows:a((s,l)=>a$1.get(s)?.has(l)??false,"allows")})}a(Ll,"parsePipelineWorkspaces");function de(e,n=process.env){let t=new Set(e.subPipelines.map(r=>r.name));return Ll(n[no],e.pipelines.map(r=>r.name),r=>t.has(r))}a(de,"loadPipelineWorkspaceScope");function $e(e,n,t){return e.filter(r=>t.some(o=>n.allows(r.name,o)))}a($e,"pipelinesVisibleTo");function to(e,n,t){return t.filter(r=>n.allows(e,r))}a(to,"workspacesAllowing");function xe(e){return `${e}/`}a(xe,"closedInstanceNodeId");function Tl(e){return `${e}//`}a(Tl,"deadLetterCollectorNodeId");function sn(e){return new Map((e.instances??[]).map(n=>[n.id,n]))}a(sn,"instanceIndex");function De(e,n){let t=[],r=new Set,o=n===void 0?void 0:e.get(n);for(;o!==void 0&&!r.has(o.id);)r.add(o.id),t.unshift(o),o=o.parent===void 0?void 0:e.get(o.parent);return t}a(De,"instanceChain");function Al(e,n,t){let r=De(n,e.instance),o=t===void 0?0:r.findIndex(s=>s.id===t)+1;if(o===0&&t!==void 0)return {kind:"outside"};let a=r[o];return a===void 0?{kind:"self"}:{kind:"closed",instance:a}}a(Al,"representativeOf");var Ol=a(e=>typeof e=="string"?e:JSON.stringify(e),"paramValue");function Yn(e){return Object.entries(e.params??{}).map(([n,t])=>`${n}: ${Ol(t)}`)}a(Yn,"paramLines");function Nl(e){let n=Yn(e);return {id:xe(e.id),label:e.localId,stepType:"pipeline",caption:e.subPipeline,...e.purpose===void 0?{}:{purpose:e.purpose},...n.length>0?{meta:n}:{},ports:e.outputs.map(t=>t.name)}}a(Nl,"closedNode");function _l(e,n){if(n===void 0||e.instance!==n.id)return;if(e.id===n.id)return "ingresso dell'istanza";let t=n.outputs.find(r=>r.nodeId===e.id);return t===void 0?void 0:`uscita \xAB${t.name}\xBB`}a(_l,"boundaryCaption");function jl(e,n,t){let r=[],o=new Map;for(let a of e.nodes){let s=t.get(a.id);if(s?.kind==="self"){let l=_l(a,n);r.push(a.localId===void 0&&l===void 0?a:{...a,label:a.localId??a.label,...l===void 0?{}:{caption:l}});}else if(s?.kind==="closed"){let l=xe(s.instance.id);if(o.has(l))continue;o.set(l,s.instance),r.push(Nl(s.instance));}}return {nodes:r,closed:o}}a(jl,"projectNodes");var ro=a((e,n)=>e.kind==="closed"?xe(e.instance.id):n,"closedId");function oo(e,n,t){if(n.kind==="self"&&t.kind==="self")return e;let{sourceHandle:r,targetHandle:o,...a}=e,s=n.kind==="closed"?e.kind===void 0?n.instance.outputs.find(l=>l.nodeId===e.source)?.name:void 0:r;return {...a,source:ro(n,e.source),target:ro(t,e.target),...s===void 0?{}:{sourceHandle:s},...t.kind==="self"&&o!==void 0?{targetHandle:o}:{}}}a(oo,"projectEdge");function Ml(e,n,t,r){if(n===void 0||t===void 0||n.kind==="outside")return;if(t.kind!=="outside")return {edge:oo(e,n,t)};if(e.kind!=="dead-letter"||!r)return;let o={...e,target:Tl(e.target)};return {edge:oo(o,n,{kind:"self"}),collected:e.target}}a(Ml,"visibleEdge");var Vl=a(e=>JSON.stringify([e.source,e.sourceHandle??null,e.target,e.targetHandle??null,e.kind??null]),"edgeKey");function Gl(e,n,t){let r=[],o=new Map,a=new Map;for(let s of e.edges){let l=Ml(s,n.get(s.source),n.get(s.target),t);if(l===void 0)continue;let c=l.edge;if(c.source===c.target)continue;if(l.collected!==void 0){let m=o.get(c.target);o.set(c.target,{target:l.collected,feeders:(m?.feeders??0)+1});}let d=Vl(c),u=a.get(d),f=u===void 0?void 0:r[u];if(u!==void 0&&f!==void 0){r[u]={...f,count:f.count+1};continue}a.set(d,r.length),r.push({...c,count:1});}return {edges:r,collectors:o}}a(Gl,"projectEdges");var Fl=a(e=>`collettore \xB7 ${e} ${e===1?"nodo":"nodi"}`,"feedersText");function zl(e,n,t){let r=e.nodes.find(o=>o.id===t.target);return {id:n,label:r?.label??t.target,stepType:"dead-letter",caption:Fl(t.feeders),...r?.purpose===void 0?{}:{purpose:r.purpose}}}a(zl,"collectorNode");function Zn(e,n,t={}){let r=sn(e),o=n===void 0||r.has(n),a=o?n:void 0,s=new Map(e.nodes.map(m=>[m.id,Al(m,r,a)])),l=a===void 0?void 0:r.get(a),{nodes:c,closed:d}=jl(e,l,s),{edges:u,collectors:f}=Gl(e,s,a!==void 0&&t.collectors!==false);return {level:a,...o?{}:{unknownLevel:n},nodes:[...c,...[...f].map(([m,g])=>zl(e,m,g))],edges:u,closed:d,collectors:f}}a(Zn,"projectLevel");var Ul=6,Kl=14;function io(e,n){return Ul+(e-(n-1)/2)*Kl}a(io,"portOffset");var Bl="credenziale",Wl={width:190,height:66},ao=52,Xn=24,Qn=16,Jl=20,Hl=30,ql=28,Yl=2,Zl=10,Xl=6,Ql=["table","tabella","vista","view","query","statement","filename","file","cartella","folder","path","endpoint","url","workspace","report","esito"],et=a((e,n)=>e.length<=n?e:`${e.slice(0,n-1).trimEnd()}\u2026`,"truncate"),lo=a(e=>e.filter(n=>n.label!==Bl&&n.value.trim()!==""),"shown");function ec(e){let n=lo(e);return Ql.flatMap(r=>n.filter(o=>o.label.toLowerCase()===r))[0]??n[0]}a(ec,"mainDetail");function nc(e){let n=e.descriptor?.details??[],t=ec(n),r=lo(n).map(c=>`${c.label}: ${c.value}`),o=e.descriptor?.kind??e.caption,a=e.meta??(t===void 0?[]:[`${t.label}: ${t.value}`]),s=Math.max(0,...(e.ports??[]).map(c=>c.length)),l=e.ports===void 0?Hl:Math.max(Zl,ql-Yl-s);return {label:et(e.label,Jl),...o===void 0?{}:{sub:et(o,l)},meta:a.map(c=>et(c,l)),title:[`${e.label} \u2014 ${e.stepType}`,...o===void 0?[]:[o],...e.meta??r,...e.ports===void 0?[]:[`uscite: ${e.ports.join(", ")}`]].join(`
|
|
3
3
|
`)}}a(nc,"nodeLines");var tc=new Set(["source","transform","lookup","action","route","join","union","sink","try-catch","dead-letter","task","pipeline"]),rc=a(e=>tc.has(e.stepType)?e.stepType:"transform","kindOf");function oc(e,n){let t=new Map(e.map(r=>[r.id,0]));for(let r=0;r<e.length;r+=1){let o=false;for(let a of n){let s=t.get(a.source),l=t.get(a.target);s===void 0||l===void 0||l<s+1&&(t.set(a.target,s+1),o=true);}if(!o)break}return t}a(oc,"levels");var so=a((e,n)=>e.length===0?n:e.reduce((t,r)=>t+r,0)/e.length,"average");function ic(e,n,t){let r=new Map;for(let l of e){let c=r.get(t.get(l.id)??0)??[];c.push(l.id),r.set(t.get(l.id)??0,c);}let o=new Map;for(let l of r.values())l.forEach((c,d)=>o.set(c,d));let a$1=a((l,c)=>n.filter(d=>(c==="in"?d.target:d.source)===l).map(d=>o.get(c==="in"?d.source:d.target)).filter(d=>d!==void 0),"neighbours"),s=[...r.keys()].sort((l,c)=>l-c);for(let l of ["in","out","in"])for(let c of l==="in"?s:[...s].reverse()){let u=[...r.get(c)??[]].sort((f,m)=>so(a$1(f,l),o.get(f)??0)-so(a$1(m,l),o.get(m)??0));u.forEach((f,m)=>o.set(f,m)),r.set(c,u);}return o}a(ic,"order");function co(e,n,t=Wl){let r=oc(e,n),o=ic(e,n,r),a=new Map;for(let f of e){let m=r.get(f.id)??0;a.set(m,(a.get(m)??0)+1);}let s=Math.max(...a.values(),1),l=Qn*2+s*t.height+(s-1)*Xn,c=Math.max(...r.values(),0)+1,d=e.map(f=>{let m=r.get(f.id)??0,g=a.get(m)??1,w=o.get(f.id)??0,H=g*t.height+(g-1)*Xn,q=nc(f);return {id:f.id,kind:rc(f),label:q.label,x:Qn+t.width/2+m*(t.width+ao),y:l/2-H/2+t.height/2+w*(t.height+Xn),...q.sub?{sub:q.sub}:{},...q.meta.length>0?{meta:q.meta}:{},title:q.title,...f.ports===void 0?{}:{ports:f.ports}}}),u=n.map(f=>ac(f,e));return {width:Qn*2+c*t.width+(c-1)*ao,height:l,size:t,nodes:d,edges:u,labels:sc(n,u,d,t)}}a(co,"layoutPlan");function ac(e,n){let t=n.find(o=>o.id===e.source)?.ports??[],r=e.kind===void 0&&e.sourceHandle!==void 0?t.indexOf(e.sourceHandle):-1;return {id:e.id,from:e.source,to:e.target,...e.kind?{variant:e.kind}:{},...r>=0?{fromPort:"right",fromOffset:io(r,t.length)}:{}}}a(ac,"placeEdge");function sc(e,n,t,r){let o=new Map(t.map(a=>[a.id,a]));return e.flatMap((a,s)=>{let l=o.get(a.source),c=o.get(a.target);if((a.count??1)<=1||l===void 0||c===void 0)return [];let d=l.y+(n[s]?.fromOffset??0);return [{x:(l.x+r.width/2+c.x-r.width/2)/2,y:(d+c.y)/2-Xl,text:`\xD7${a.count??1}`}]})}a(sc,"countLabels");var uo="",fo=a(e=>e??uo,"levelKey"),po={collectors:true};function lc(e){return e.flatMap(n=>n.purpose===void 0?[]:[{nodeId:n.id,label:n.label,stepType:n.stepType,purpose:n.purpose}])}a(lc,"nodePurposes");var nt=a(e=>({level:e.id,label:e.localId,subPipeline:e.subPipeline}),"crumb");function tt(e,n,t,r){let o=Zn(e,n,r);return {level:n,layout:co(o.nodes,o.edges),breadcrumb:t,closed:[...o.closed].map(([a,s])=>({nodeId:a,instanceId:s.id,localId:s.localId,subPipeline:s.subPipeline})),purposes:lc(o.nodes)}}a(tt,"levelDiagram");function rt(e){let n=new Set(e.map(o=>o.id)),t=a(o=>e.filter(a=>o===void 0?a.parent===void 0||!n.has(a.parent):a.parent===o),"childrenOf"),r=a(o=>[o,...t(o.id).flatMap(r)],"visit");return t(void 0).flatMap(r)}a(rt,"depthFirst");function mo(e){let n=sn(e),t={level:void 0,label:e.name},r=[[uo,tt(e,void 0,[t],po)],...rt(e.instances??[]).map(o=>[fo(o.id),tt(e,o.id,[t,...De(n,o.id).map(nt)],po)])];return Object.fromEntries(r)}a(mo,"pipelineLevels");function cc(e,n){let t=Zn(e,n.parent),r=xe(n.id),o=new Map(t.nodes.map(l=>[l.id,l.label])),a$1=t.edges.filter(l=>l.kind===void 0),s=a(l=>o.get(l)??l,"label");return {root:e.name,instanceId:n.id,...n.parent===void 0?{}:{parent:n.parent},localId:n.localId,params:Yn(n),feeds:a$1.filter(l=>l.target===r).map(l=>s(l.source)),outputs:n.outputs.map(l=>({name:l.name,targets:a$1.filter(c=>c.source===r&&c.sourceHandle===l.name).map(c=>s(c.target))}))}}a(cc,"useOf");function dc(e,n){let t=sn(e),r=a(a=>De(t,a.id).some(s=>s.id===n.id),"below"),o=a(a=>{let s=De(t,a.id),l=s.findIndex(c=>c.id===n.id);return [{...nt(n),label:n.subPipeline},...s.slice(l+1).map(nt)]},"breadcrumb");return Object.fromEntries(rt(e.instances??[]).filter(r).map(a=>[fo(a.id),tt(e,a.id,o(a),{collectors:false})]))}a(dc,"subPipelineLevels");function go(e){let n=new Map;for(let t of e)for(let r of rt(t.instances??[])){let o=cc(t,r),a=n.get(r.subPipeline);n.set(r.subPipeline,a===void 0?{name:r.subPipeline,representative:{root:t.name,instanceId:r.id,params:o.params},levels:dc(t,r),usage:[o]}:{...a,usage:[...a.usage,o]});}return Object.fromEntries(n)}a(go,"subPipelineDiagrams");function C(e,n){let t=new RegExp(`<${n}\\s+name=["']([a-z0-9]+(?:-[a-z0-9]+)*)["']`,"g");return Object.fromEntries(e.flatMap(r=>[...r.content.matchAll(t)].map(o=>[o[1]??"",r.path.replace(/\.md$/,"")])))}a(C,"pagesDrawing");var pc=["label","stepType","descriptor"];function ot(e,n,t){let r=new Map(e.map(s=>[s.id,s])),o=new Set(n.map(s=>s.id)),a=[];for(let s of n){let l=r.get(s.id),c=l===void 0?void 0:t(l,s);c!==void 0&&a.push(c);}return {added:n.filter(s=>!r.has(s.id)),changed:a,removed:e.filter(s=>!o.has(s.id))}}a(ot,"diffById");function ho(e,n){return isDeepStrictEqual(e,n)?void 0:{id:n.id,before:e,after:n}}a(ho,"plainChange");function Ie(e){return e.added.length===0&&e.changed.length===0&&e.removed.length===0}a(Ie,"isEmptySetDiff");function uc(e,n){let t=pc.filter(o=>!isDeepStrictEqual(e[o],n[o])),r=ot(e.columns,n.columns,ho);if(!(t.length===0&&Ie(r)))return {id:n.id,before:e,after:n,fields:t,columns:r}}a(uc,"nodeChange");function fc(e,n,t){if(t===void 0)return {node:e,column:n.id,reason:"removed"};if(t.name!==n.name)return {node:e,column:n.id,reason:"renamed",before:n.name,after:t.name};if(t.dataType!==n.dataType)return {node:e,column:n.id,reason:"type-changed",before:n.dataType,after:t.dataType}}a(fc,"columnBreak");function mc(e,n){let t=new Map(n.nodes.filter(r=>r.stepType==="sink").map(r=>[r.id,r]));return e.nodes.filter(r=>r.stepType==="sink").flatMap(r=>{let o=new Map((t.get(r.id)?.columns??[]).map(a=>[a.id,a]));return r.columns.flatMap(a=>{let s=fc(r.id,a,o.get(a.id));return s===void 0?[]:[s]})})}a(mc,"contractBreaks");function Po(e,n){let t=mc(e,n);return {nodes:ot(e.nodes,n.nodes,uc),edges:ot(e.edges,n.edges,ho),contractBreaks:t,breaksContract:t.length>0}}a(Po,"diffPlans");function So(e){return Ie(e.nodes)&&Ie(e.edges)}a(So,"isEmptyPlanDiff");var T="changelog.ts";function k(e){return e.reduce((n,t)=>t).version}a(k,"currentPipelineVersion");var gc=/^\d{4}-\d{2}-\d{2}$/,yc=/^[A-Z][A-Z0-9]*-\d+$/,hc=/^\d+\.\d+\.\d+(?:-[0-9A-Za-z.-]+)?$/;function Le(e){return yc.test(e)}a(Le,"isJiraKey");function it(e){if(!gc.test(e))return false;let n=new Date(`${e}T00:00:00Z`);return !Number.isNaN(n.getTime())&&n.toISOString().slice(0,10)===e}a(it,"isCalendarDate");var vo=[["added","Aggiunte"],["changed","Modifiche"],["removed","Rimozioni"]];function at(e){return !vo.some(([n])=>e[n].some(t=>t.trim()!==""))}a(at,"isEmptyEntry");function Pc(e){let n=`v${e.version}`,t=[];it(e.date)||t.push(`${n}: data "${e.date}" non \xE8 nel formato AAAA-MM-GG`),e.core!==void 0&&!hc.test(e.core)&&t.push(`${n}: versione del core "${e.core}" non \xE8 una versione semver (es. 1.4.2)`);for(let r of e.tickets)Le(r)||t.push(`${n}: ticket "${r}" non \xE8 una chiave Jira (es. ETL-120)`);for(let[r,o]of vo)e[r].some(a=>a.trim()==="")&&t.push(`${n}: ${o} contiene una riga vuota`);if(at(e)&&t.push(`${n}: Aggiunte, Modifiche e Rimozioni sono tutte vuote`),e.rollbackTo!==void 0){let r=e.rollbackTo.version;!Number.isInteger(r)||r<1||r>=e.version?t.push(`${n}: rollback alla v${r}, ma si torna solo a una versione precedente`):e.rollbackTo.reason.trim()===""&&t.push(`${n}: rollback alla v${r} senza motivo`);}return t}a(Pc,"entryProblems");function bo(e){let n=[];return e.forEach((t,r)=>{let o=r+1;t.version!==o&&n.push(`voce ${o}: versione ${t.version}, attesa ${o} (i numeri partono da 1 e crescono di uno)`),n.push(...Pc(t));let a=e[r-1];a!==void 0&&it(a.date)&&it(t.date)&&t.date<a.date&&n.push(`v${t.version}: data ${t.date} precedente a quella della v${a.version} (${a.date})`);}),n}a(bo,"changelogProblems");var Q="versions";function z(e){return `pnpm run pipeline:snapshot ${e}`}a(z,"planSnapshotCommand");function pe(e,n){return join(e,Q,`v${n}.plan.json`)}a(pe,"planSnapshotPath");function Te(e,n){return posix.join(e,Q,`v${n}.plan.json`)}a(Te,"planSnapshotRepoPath");function ee(e){return lt(e,{})}a(ee,"planWithoutEnv");function lt(e,n){let t=process.env;process.env={...n};try{return e.getSpec()}finally{process.env=t;}}a(lt,"planWithEnv");function st(e){return Array.isArray(e)?e.map(st):e===null||typeof e!="object"?e:Object.fromEntries(Object.entries(e).sort(([n],[t])=>n<t?-1:n>t?1:0).map(([n,t])=>[n,st(t)]))}a(st,"sortKeys");function wo(e){let{purpose:n,...t}=e;return n===void 0?e:t}a(wo,"withoutPurpose");function wc(e){return {name:e.name,type:e.type,required:e.required}}a(wc,"withoutDescription");function Rc(e){let{instances:n,runParams:t}=e;return {...e,nodes:e.nodes.map(wo),...n!==void 0?{instances:n.map(wo)}:{},...t!==void 0?{runParams:t.map(wc)}:{}}}a(Rc,"withoutUserTexts");function Ec(e){return `${JSON.stringify(st(Rc(e)),null,2)}
|
|
4
|
-
`}a(Ec,"serializePlanSnapshot");async function Ro(e){try{return await readFile(e,"utf8")}catch(n){if(n.code==="ENOENT")return;throw n}}a(Ro,"readPlanSnapshot");function ue(e,n){let t=k(e.changelog);return {pipeline:e.name,version:t,path:pe(n,t),content:Ec(ee(e))}}a(ue,"expectedPlanSnapshot");var $o=/[\\/]versions[\\/]v(\d+)\.plan\.json$/;function xo(e){return $o.test(e)}a(xo,"isPlanSnapshotPath");var kc=z$1.object({id:z$1.string(),name:z$1.string(),dataType:z$1.string(),isKey:z$1.boolean(),sourceColumns:z$1.array(z$1.string()).optional()}),$c=z$1.object({id:z$1.string(),label:z$1.string(),stepType:z$1.string(),columns:z$1.array(kc),descriptor:z$1.record(z$1.string(),z$1.unknown()).optional()}).passthrough(),xc=z$1.object({id:z$1.string(),source:z$1.string(),target:z$1.string()}).passthrough(),Dc=z$1.object({name:z$1.string(),nodes:z$1.array($c),edges:z$1.array(xc)});function Ic(e,n){let t;try{t=JSON.parse(n);}catch(o){let a=o instanceof Error?o.message:String(o);throw new Error(`${e}: lo snapshot del piano non \xE8 JSON valido (${a})`)}let r=Dc.safeParse(t);if(!r.success)throw new Error(`${e}: lo snapshot non \xE8 un piano (${r.error.issues[0]?.message??"forma non valida"})`);return t}a(Ic,"parsePlanSnapshot");function Do(e){let n=new Map,t=new Map;for(let{path:r,content:o}of e){let a=Number($o.exec(r)?.[1]);if(!Number.isInteger(a))throw new Error(`${r}: non \xE8 uno snapshot versions/v<N>.plan.json`);let s=Ic(r,o),l=`${s.name}@${a}`,c=t.get(l);if(c!==void 0)throw new Error(`piano "${s.name}": due snapshot della v${a}, ${c} e ${r}`);t.set(l,r);let d=n.get(s.name)??new Map;d.set(a,s),n.set(s.name,d);}return n}a(Do,"groupPlanSnapshots");function Io(e,n,t){let r=a(o=>{let a=t?.get(o);if(a===void 0)throw new Error(`pipeline "${e}": manca lo snapshot del piano della v${o}. Lancia \`${z(e)}\`.`);return a},"snapshot");return n.map(o=>{let a=r(o.version),s={version:o.version,date:o.date,tickets:o.tickets,added:o.added,changed:o.changed,removed:o.removed,...o.rollbackTo===void 0?{}:{rollbackTo:o.rollbackTo}};if(o.version===1)return s;let l=r(o.version-1);return {...s,diff:jc(Po(l,a))}}).reverse()}a(Io,"pipelineVersions");function ln(e,n){return `${e??"\u2014"} \u2192 ${n??"\u2014"}`}a(ln,"arrow");function Ae(e){let n=e.filter(t=>t!==false);return n.length===0?void 0:n.join(", ")}a(Ae,"detail");function U(e,n,t){return t===void 0?{change:e,subject:n}:{change:e,subject:n,detail:t}}a(U,"line");function Lc(e){let{before:n,after:t,columns:r}=e;return Ae([e.fields.includes("label")&&`etichetta \xAB${n.label}\xBB \u2192 \xAB${t.label}\xBB`,e.fields.includes("stepType")&&`tipo ${ln(n.stepType,t.stepType)}`,e.fields.includes("descriptor")&&"connettore",!Ie(r)&&"colonne"])}a(Lc,"nodeChangeDetail");var Tc={catch:"ramo catch","dead-letter":"dead-letter",control:"controllo"};function ct(e){return `${e.source} \u2192 ${e.target}`}a(ct,"edgeSubject");var Lo=[["kind","tipo",e=>Tc[e]],["joinType","join",e=>e],["sourceHandle","porta",e=>e],["targetHandle","ingresso",e=>e]];function Eo(e){return Ae(Lo.map(([n,t,r])=>{let o=e[n];return o===void 0?false:n==="kind"?r(o):`${t} ${r(o)}`}))}a(Eo,"edgeDetail");function Ac({before:e,after:n}){return Ae(Lo.map(([t,r])=>e[t]!==n[t]&&`${r} ${ln(e[t],n[t])}`))??"attributi"}a(Ac,"edgeChangeDetail");function Co(e){return Ae([e.dataType,e.isKey&&"chiave"])}a(Co,"columnDetail");function Oc({before:e,after:n}){return Ae([e.name!==n.name&&`nome \xAB${e.name}\xBB \u2192 \xAB${n.name}\xBB`,e.dataType!==n.dataType&&`tipo ${ln(e.dataType,n.dataType)}`,e.isKey!==n.isKey&&(n.isKey?"ora chiave":"non pi\xF9 chiave"),!isDeepStrictEqual(e.sourceColumns,n.sourceColumns)&&"origine"])??"attributi"}a(Oc,"columnChangeDetail");function Nc(e){let{columns:n}=e;return [...n.added.map(t=>U("added",t.name,Co(t))),...n.changed.map(t=>U("changed",t.before.name,Oc(t))),...n.removed.map(t=>U("removed",t.name,Co(t)))]}a(Nc,"columnLines");function _c(e){let n=`${e.node}.${e.column}`;switch(e.reason){case "removed":return `${n}: rimossa`;case "renamed":return `${n}: rinominata \xAB${e.before}\xBB \u2192 \xAB${e.after}\xBB`;case "type-changed":return `${n}: tipo ${ln(e.before,e.after)}`}}a(_c,"contractBreakText");function ko(e,n){return U(e,n.id,n.stepType)}a(ko,"stepTypeLine");function jc(e){let{nodes:n,edges:t}=e,r=[...n.added.map(s=>ko("added",s)),...n.changed.map(s=>U("changed",s.id,Lc(s))),...n.removed.map(s=>ko("removed",s))],o=[...t.added.map(s=>U("added",ct(s),Eo(s))),...t.changed.map(s=>U("changed",ct(s.after),Ac(s))),...t.removed.map(s=>U("removed",ct(s),Eo(s)))],a=n.changed.map(s=>({node:s.id,lines:Nc(s)})).filter(s=>s.lines.length>0);return {empty:So(e),breaksContract:e.breaksContract,contractBreaks:e.contractBreaks.map(_c),nodes:r,edges:o,columns:a}}a(jc,"describePlanDiff");function To(e,n){let t=Do(n);return Object.fromEntries(e.map(r=>{let o=r.getSpec();return [r.name,{name:r.name,description:r.description,levels:mo(o),versions:Io(r.name,r.changelog,t.get(r.name))}]}))}a(To,"pipelineDiagrams");function Ao(e,n){return {diagrams:go(e),pipelinePages:C(n,"PipelineDag"),subPipelinePages:C(n,"SubPipelineDag")}}a(Ao,"subPipelinesData");var zc=["plans/","agents/","research/","architecture/","README.md","conventions/coding-standards.md","conventions/testing-strategy.md","conventions/documentation.md","conventions/git-workflow.md","runbooks/template.md","runbooks/issue-workflow.md","runbooks/rilascio-del-core.md","runbooks/portare-pipeline-in-un-repo-cliente.md","runbooks/sito-documentazione.md","runbooks/build-desktop-windows.md","runbooks/local-test-databases.md","runbooks/noeva-file-version-bump.md"],Uc=[{path:"pipelines/canossa/",reason:"canossa-bilanci migra in noeva-etl-canossa-events (ETL-276, ADR-0097)"}],Oo=a((e,n)=>n.some(t=>t.endsWith("/")?e.startsWith(t):e===t),"matches");function Kc(e){return Oo(e,zc)||Oo(e,Uc.map(n=>n.path))}a(Kc,"isExcludedFromCore");function fe(e){return existsSync(e)?readdirSync(e,{recursive:true,encoding:"utf8"}).map(n=>n.split("\\").join("/")).filter(n=>n.endsWith(".md")&&!n.startsWith(".vitepress/")&&!n.split("/").includes("node_modules")).map(n=>({path:n,content:readFileSync(join(e,n),"utf8")})):[]}a(fe,"markdownPages");function ne(e){return fe(e).filter(n=>!Kc(n.path))}a(ne,"corePublishedPages");var Hc=join("src","pipelines"),dt="run.ts";function me(e){return join(e,Hc)}a(me,"pipelinesRoot");async function qc(e){try{return (await readdir(e,{recursive:!0})).filter(t=>basename(t)===dt).map(t=>join(e,t))}catch(n){if(n.code==="ENOENT")return [];throw n}}a(qc,"runModules");async function _o(e,n){let t=[];for(let r of await qc(n)){let o=await import(pathToFileURL(r).href),a=Object.values(o);t.push({path:r,declared:e.filter(s=>a.includes(s))});}return t}a(_o,"runModulesOf");async function jo(e,n){return (await _o(e,n)).filter(({declared:t})=>t.length===0).map(({path:t})=>dirname(t))}a(jo,"orphanPipelineDirs");async function Mo(e,n){let t=new Map;for(let{path:o,declared:a}of await _o(e,n))for(let s of a)t.set(s.name,dirname(o));let r=e.filter(o=>!t.has(o.name)&&!b(o));if(r.length>0)throw new g(`${r.map(o=>`"${o.name}"`).join(", ")}: nessun ${dt} sotto ${n} la esporta. Il RunnablePipeline di una pipeline si esporta dal ${dt} della sua cartella, in src/pipelines/ accanto a etl.config.ts.`);return t}a(Mo,"locatePipelineDirs");function ge(e,n,t=""){let r=n.get(e.name);if(r!==void 0)return r;throw b(e)?new g(`"${e.name}" \xE8 una pipeline pronta: la versiona il core, che la pubblica col pacchetto, non questo repo (ADR-0094 \xA72).${t}`):new g(`cartella della pipeline "${e.name}" non trovata.`)}a(ge,"pipelineDirOf");var Fo="@noeva/etl-core",rd="/guida/",Vo="/guida/core/",cn="catalogo.md",dn="docs";function od(e){let n=join(e,"package.json");if(!existsSync(n))return false;let{name:t}=JSON.parse(readFileSync(n,"utf8"));return t===Fo}a(od,"isPackageRoot");function zo(e){if(od(e))return e;let n=dirname(e);if(n===e)throw new Error(`radice di ${Fo} non trovata`);return zo(n)}a(zo,"packageRootFrom");var x=zo(dirname(fileURLToPath(import.meta.url))),mt=join(x,dn);function Oe(e,n={}){let t=realpathSync(e.root),r=join(t,dn),o=join(r,".vitepress","cache");return {srcDir:r,outDir:n.outDir===void 0?join(r,".vitepress","dist"):resolve(t,n.outDir),cacheDir:o,tempDir:join(r,".vitepress",".temp"),siteFile:join(o,"etl-docs","sito.json")}}a(Oe,"siteDirs");function N(e){return realpathSync(e.root)===realpathSync(x)}a(N,"isCoreRepo");function id(e){return N(e)?"Noeva ETL":`Noeva ETL \xB7 ${e.client.toUpperCase()}`}a(id,"siteTitle");async function ad(e){let n=me(e);if(!existsSync(n))return [];let t=await readdir(n,{recursive:true});return Promise.all(t.map(r=>join(n,r)).filter(xo).map(async r=>({path:r,content:await readFile(r,"utf8")})))}a(ad,"snapshotFiles");function sd(e,n){let t=C(n,"PipelineDag");return e.pipelines.filter(r=>N(e)?t[r.name]!==void 0:!e.readyPipelines.includes(r.name)).map(r=>({name:r.name,description:r.description,changelog:r.changelog,getSpec:a(()=>ee(r),"getSpec")}))}a(sd,"documentedPipelines");function ld(e,n){let t=a(s=>{let l=C(n,s);return c=>{let d=l[c];return d===void 0?[]:[{name:c,page:d}]}},"cardsOf"),r=t("PipelineDag"),o=e.pipelines.map(s=>s.name).sort(),a$1=e.subPipelines.map(s=>s.name).sort().flatMap(t("SubPipelineDag"));return {ready:o.filter(s=>e.readyPipelines.includes(s)).flatMap(r),examples:[...o.filter(s=>!e.readyPipelines.includes(s)).flatMap(r),...a$1]}}a(ld,"guideSections");async function Uo(e,n,{packageGuide:t=false}={}){let r=N(e),o=r?ne(n.srcDir):fe(n.srcDir),a=sd(e,o),s={client:e.client,title:id(e),srcDir:n.srcDir,outDir:n.outDir,cacheDir:n.cacheDir,coreBase:Vo,pipelines:To(a,await ad(e.root)),subPipelines:Ao(a.map(l=>l.getSpec()),o)};return r?{...s,mode:"core",base:t?Vo:"/",sections:ld(e,o)}:{...s,mode:"cliente",base:rd,catalogPage:cn}}a(Uo,"docsSiteOf");async function Ko(e,n){await mkdir(dirname(n),{recursive:true}),await writeFile(n,JSON.stringify(e));}a(Ko,"writeDocsSite");var cd="<!-- noeva-etl:inizio \u2014 blocco gestito dal core: lo riscrive un aggiornamento del core, non modificarlo a mano -->",Ne="<!-- noeva-etl:fine -->",gt="<!-- noeva-etl:inizio";function Wo(e){return `${cd}
|
|
4
|
+
`}a(Ec,"serializePlanSnapshot");async function Ro(e){try{return await readFile(e,"utf8")}catch(n){if(n.code==="ENOENT")return;throw n}}a(Ro,"readPlanSnapshot");function ue(e,n){let t=k(e.changelog);return {pipeline:e.name,version:t,path:pe(n,t),content:Ec(ee(e))}}a(ue,"expectedPlanSnapshot");var $o=/[\\/]versions[\\/]v(\d+)\.plan\.json$/;function xo(e){return $o.test(e)}a(xo,"isPlanSnapshotPath");var kc=z$1.object({id:z$1.string(),name:z$1.string(),dataType:z$1.string(),isKey:z$1.boolean(),sourceColumns:z$1.array(z$1.string()).optional()}),$c=z$1.object({id:z$1.string(),label:z$1.string(),stepType:z$1.string(),columns:z$1.array(kc),descriptor:z$1.record(z$1.string(),z$1.unknown()).optional()}).passthrough(),xc=z$1.object({id:z$1.string(),source:z$1.string(),target:z$1.string()}).passthrough(),Dc=z$1.object({name:z$1.string(),nodes:z$1.array($c),edges:z$1.array(xc)});function Ic(e,n){let t;try{t=JSON.parse(n);}catch(o){let a=o instanceof Error?o.message:String(o);throw new Error(`${e}: lo snapshot del piano non \xE8 JSON valido (${a})`)}let r=Dc.safeParse(t);if(!r.success)throw new Error(`${e}: lo snapshot non \xE8 un piano (${r.error.issues[0]?.message??"forma non valida"})`);return t}a(Ic,"parsePlanSnapshot");function Do(e){let n=new Map,t=new Map;for(let{path:r,content:o}of e){let a=Number($o.exec(r)?.[1]);if(!Number.isInteger(a))throw new Error(`${r}: non \xE8 uno snapshot versions/v<N>.plan.json`);let s=Ic(r,o),l=`${s.name}@${a}`,c=t.get(l);if(c!==void 0)throw new Error(`piano "${s.name}": due snapshot della v${a}, ${c} e ${r}`);t.set(l,r);let d=n.get(s.name)??new Map;d.set(a,s),n.set(s.name,d);}return n}a(Do,"groupPlanSnapshots");function Io(e,n,t){let r=a(o=>{let a=t?.get(o);if(a===void 0)throw new Error(`pipeline "${e}": manca lo snapshot del piano della v${o}. Lancia \`${z(e)}\`.`);return a},"snapshot");return n.map(o=>{let a=r(o.version),s={version:o.version,date:o.date,tickets:o.tickets,added:o.added,changed:o.changed,removed:o.removed,...o.rollbackTo===void 0?{}:{rollbackTo:o.rollbackTo}};if(o.version===1)return s;let l=r(o.version-1);return {...s,diff:jc(Po(l,a))}}).reverse()}a(Io,"pipelineVersions");function ln(e,n){return `${e??"\u2014"} \u2192 ${n??"\u2014"}`}a(ln,"arrow");function Ae(e){let n=e.filter(t=>t!==false);return n.length===0?void 0:n.join(", ")}a(Ae,"detail");function U(e,n,t){return t===void 0?{change:e,subject:n}:{change:e,subject:n,detail:t}}a(U,"line");function Lc(e){let{before:n,after:t,columns:r}=e;return Ae([e.fields.includes("label")&&`etichetta \xAB${n.label}\xBB \u2192 \xAB${t.label}\xBB`,e.fields.includes("stepType")&&`tipo ${ln(n.stepType,t.stepType)}`,e.fields.includes("descriptor")&&"connettore",!Ie(r)&&"colonne"])}a(Lc,"nodeChangeDetail");var Tc={catch:"ramo catch","dead-letter":"dead-letter",control:"controllo"};function ct(e){return `${e.source} \u2192 ${e.target}`}a(ct,"edgeSubject");var Lo=[["kind","tipo",e=>Tc[e]],["joinType","join",e=>e],["sourceHandle","porta",e=>e],["targetHandle","ingresso",e=>e]];function Eo(e){return Ae(Lo.map(([n,t,r])=>{let o=e[n];return o===void 0?false:n==="kind"?r(o):`${t} ${r(o)}`}))}a(Eo,"edgeDetail");function Ac({before:e,after:n}){return Ae(Lo.map(([t,r])=>e[t]!==n[t]&&`${r} ${ln(e[t],n[t])}`))??"attributi"}a(Ac,"edgeChangeDetail");function Co(e){return Ae([e.dataType,e.isKey&&"chiave"])}a(Co,"columnDetail");function Oc({before:e,after:n}){return Ae([e.name!==n.name&&`nome \xAB${e.name}\xBB \u2192 \xAB${n.name}\xBB`,e.dataType!==n.dataType&&`tipo ${ln(e.dataType,n.dataType)}`,e.isKey!==n.isKey&&(n.isKey?"ora chiave":"non pi\xF9 chiave"),!isDeepStrictEqual(e.sourceColumns,n.sourceColumns)&&"origine"])??"attributi"}a(Oc,"columnChangeDetail");function Nc(e){let{columns:n}=e;return [...n.added.map(t=>U("added",t.name,Co(t))),...n.changed.map(t=>U("changed",t.before.name,Oc(t))),...n.removed.map(t=>U("removed",t.name,Co(t)))]}a(Nc,"columnLines");function _c(e){let n=`${e.node}.${e.column}`;switch(e.reason){case "removed":return `${n}: rimossa`;case "renamed":return `${n}: rinominata \xAB${e.before}\xBB \u2192 \xAB${e.after}\xBB`;case "type-changed":return `${n}: tipo ${ln(e.before,e.after)}`}}a(_c,"contractBreakText");function ko(e,n){return U(e,n.id,n.stepType)}a(ko,"stepTypeLine");function jc(e){let{nodes:n,edges:t}=e,r=[...n.added.map(s=>ko("added",s)),...n.changed.map(s=>U("changed",s.id,Lc(s))),...n.removed.map(s=>ko("removed",s))],o=[...t.added.map(s=>U("added",ct(s),Eo(s))),...t.changed.map(s=>U("changed",ct(s.after),Ac(s))),...t.removed.map(s=>U("removed",ct(s),Eo(s)))],a=n.changed.map(s=>({node:s.id,lines:Nc(s)})).filter(s=>s.lines.length>0);return {empty:So(e),breaksContract:e.breaksContract,contractBreaks:e.contractBreaks.map(_c),nodes:r,edges:o,columns:a}}a(jc,"describePlanDiff");function To(e,n){let t=Do(n);return Object.fromEntries(e.map(r=>{let o=r.getSpec();return [r.name,{name:r.name,description:r.description,levels:mo(o),versions:Io(r.name,r.changelog,t.get(r.name))}]}))}a(To,"pipelineDiagrams");function Ao(e,n){return {diagrams:go(e),pipelinePages:C(n,"PipelineDag"),subPipelinePages:C(n,"SubPipelineDag")}}a(Ao,"subPipelinesData");var zc=["plans/","agents/","research/","architecture/","README.md","conventions/coding-standards.md","conventions/testing-strategy.md","conventions/documentation.md","conventions/git-workflow.md","runbooks/template.md","runbooks/issue-workflow.md","runbooks/rilascio-del-core.md","runbooks/portare-pipeline-in-un-repo-cliente.md","runbooks/sito-documentazione.md","runbooks/build-desktop-windows.md","runbooks/local-test-databases.md","runbooks/noeva-file-version-bump.md"],Uc=[],Oo=a((e,n)=>n.some(t=>t.endsWith("/")?e.startsWith(t):e===t),"matches");function Kc(e){return Oo(e,zc)||Oo(e,Uc.map(n=>n.path))}a(Kc,"isExcludedFromCore");function fe(e){return existsSync(e)?readdirSync(e,{recursive:true,encoding:"utf8"}).map(n=>n.split("\\").join("/")).filter(n=>n.endsWith(".md")&&!n.startsWith(".vitepress/")&&!n.split("/").includes("node_modules")).map(n=>({path:n,content:readFileSync(join(e,n),"utf8")})):[]}a(fe,"markdownPages");function ne(e){return fe(e).filter(n=>!Kc(n.path))}a(ne,"corePublishedPages");var Hc=join("src","pipelines"),dt="run.ts";function me(e){return join(e,Hc)}a(me,"pipelinesRoot");async function qc(e){try{return (await readdir(e,{recursive:!0})).filter(t=>basename(t)===dt).map(t=>join(e,t))}catch(n){if(n.code==="ENOENT")return [];throw n}}a(qc,"runModules");async function _o(e,n){let t=[];for(let r of await qc(n)){let o=await import(pathToFileURL(r).href),a=Object.values(o);t.push({path:r,declared:e.filter(s=>a.includes(s))});}return t}a(_o,"runModulesOf");async function jo(e,n){return (await _o(e,n)).filter(({declared:t})=>t.length===0).map(({path:t})=>dirname(t))}a(jo,"orphanPipelineDirs");async function Mo(e,n){let t=new Map;for(let{path:o,declared:a}of await _o(e,n))for(let s of a)t.set(s.name,dirname(o));let r=e.filter(o=>!t.has(o.name)&&!b(o));if(r.length>0)throw new g(`${r.map(o=>`"${o.name}"`).join(", ")}: nessun ${dt} sotto ${n} la esporta. Il RunnablePipeline di una pipeline si esporta dal ${dt} della sua cartella, in src/pipelines/ accanto a etl.config.ts.`);return t}a(Mo,"locatePipelineDirs");function ge(e,n,t=""){let r=n.get(e.name);if(r!==void 0)return r;throw b(e)?new g(`"${e.name}" \xE8 una pipeline pronta: la versiona il core, che la pubblica col pacchetto, non questo repo (ADR-0094 \xA72).${t}`):new g(`cartella della pipeline "${e.name}" non trovata.`)}a(ge,"pipelineDirOf");var Fo="@noeva/etl-core",rd="/guida/",Vo="/guida/core/",cn="catalogo.md",dn="docs";function od(e){let n=join(e,"package.json");if(!existsSync(n))return false;let{name:t}=JSON.parse(readFileSync(n,"utf8"));return t===Fo}a(od,"isPackageRoot");function zo(e){if(od(e))return e;let n=dirname(e);if(n===e)throw new Error(`radice di ${Fo} non trovata`);return zo(n)}a(zo,"packageRootFrom");var x=zo(dirname(fileURLToPath(import.meta.url))),mt=join(x,dn);function Oe(e,n={}){let t=realpathSync(e.root),r=join(t,dn),o=join(r,".vitepress","cache");return {srcDir:r,outDir:n.outDir===void 0?join(r,".vitepress","dist"):resolve(t,n.outDir),cacheDir:o,tempDir:join(r,".vitepress",".temp"),siteFile:join(o,"etl-docs","sito.json")}}a(Oe,"siteDirs");function N(e){return realpathSync(e.root)===realpathSync(x)}a(N,"isCoreRepo");function id(e){return N(e)?"Noeva ETL":`Noeva ETL \xB7 ${e.client.toUpperCase()}`}a(id,"siteTitle");async function ad(e){let n=me(e);if(!existsSync(n))return [];let t=await readdir(n,{recursive:true});return Promise.all(t.map(r=>join(n,r)).filter(xo).map(async r=>({path:r,content:await readFile(r,"utf8")})))}a(ad,"snapshotFiles");function sd(e,n){let t=C(n,"PipelineDag");return e.pipelines.filter(r=>N(e)?t[r.name]!==void 0:!e.readyPipelines.includes(r.name)).map(r=>({name:r.name,description:r.description,changelog:r.changelog,getSpec:a(()=>ee(r),"getSpec")}))}a(sd,"documentedPipelines");function ld(e,n){let t=a(s=>{let l=C(n,s);return c=>{let d=l[c];return d===void 0?[]:[{name:c,page:d}]}},"cardsOf"),r=t("PipelineDag"),o=e.pipelines.map(s=>s.name).sort(),a$1=e.subPipelines.map(s=>s.name).sort().flatMap(t("SubPipelineDag"));return {ready:o.filter(s=>e.readyPipelines.includes(s)).flatMap(r),examples:[...o.filter(s=>!e.readyPipelines.includes(s)).flatMap(r),...a$1]}}a(ld,"guideSections");async function Uo(e,n,{packageGuide:t=false}={}){let r=N(e),o=r?ne(n.srcDir):fe(n.srcDir),a=sd(e,o),s={client:e.client,title:id(e),srcDir:n.srcDir,outDir:n.outDir,cacheDir:n.cacheDir,coreBase:Vo,pipelines:To(a,await ad(e.root)),subPipelines:Ao(a.map(l=>l.getSpec()),o)};return r?{...s,mode:"core",base:t?Vo:"/",sections:ld(e,o)}:{...s,mode:"cliente",base:rd,catalogPage:cn}}a(Uo,"docsSiteOf");async function Ko(e,n){await mkdir(dirname(n),{recursive:true}),await writeFile(n,JSON.stringify(e));}a(Ko,"writeDocsSite");var cd="<!-- noeva-etl:inizio \u2014 blocco gestito dal core: lo riscrive un aggiornamento del core, non modificarlo a mano -->",Ne="<!-- noeva-etl:fine -->",gt="<!-- noeva-etl:inizio";function Wo(e){return `${cd}
|
|
5
5
|
|
|
6
6
|
${e.trim()}
|
|
7
7
|
|
package/dist/connectors/mail.js
CHANGED
|
@@ -1 +1 @@
|
|
|
1
|
-
|
|
1
|
+
import {k,l as l$1}from'../chunk-BPRH262Y.js';import {i,j}from'../chunk-H75NY6Z4.js';import'../chunk-4NPSBPBY.js';import'../chunk-JLPK6MMQ.js';import'../chunk-KMUNED7K.js';import'../chunk-BFW7HTF6.js';import {a}from'../chunk-PE2QKU34.js';function p(n){return {...n.name!==void 0?{name:n.name}:{},...n.instanceId!==void 0?{instanceId:n.instanceId}:{}}}a(p,"comuni");function l(n,i$1){let e={...p(i$1),mail:i$1.mail,merge:i$1.merge};return n.tipo==="smtp"?i(n.config,{...e,...n.opzioni!==void 0?{trasporto:n.opzioni}:{}}):k(n.config,{...e,...n.opzioni!==void 0?{trasporto:n.opzioni}:{}})}a(l,"mailAction");function s(n,i){let e={...p(i),mail:i.mail};return n.tipo==="smtp"?j(n.config,{...e,...n.opzioni!==void 0?{trasporto:n.opzioni}:{}}):l$1(n.config,{...e,...n.opzioni!==void 0?{trasporto:n.opzioni}:{}})}a(s,"mailSink");export{l as mailAction,s as mailSink};
|
|
@@ -1 +1 @@
|
|
|
1
|
-
|
|
1
|
+
import {a,k,g as g$1}from'../chunk-PE2QKU34.js';import {mkdtemp,mkdir,writeFile,readdir,readFile,rm}from'fs/promises';import {tmpdir}from'os';import {join,dirname}from'path';import {spawn}from'child_process';var g="uscita";async function E(e){return mkdtemp(join(e,"noeva-processo-"))}a(E,"creaCartellaRecord");async function R(e,r,t){await mkdir(join(e,g));for(let o of r){let i=join(e,...$(o.nome,t));await mkdir(dirname(i),{recursive:true}),await writeFile(i,o.bytes);}}a(R,"preparaCartella");async function v(e){return w(join(e,g),[])}a(v,"raccogliUscita");async function w(e,r){let o=[...await readdir(e,{withFileTypes:true})].sort((s,a)=>s.name.localeCompare(a.name)),i=[];for(let s of o){let a=join(e,s.name),c=[...r,s.name];s.isDirectory()?i.push(...await w(a,c)):s.isFile()&&i.push({nome:c.join("/"),bytes:new Uint8Array(await readFile(a))});}return i}a(w,"leggiAlbero");function $(e,r){let t=e.split("/");if(!(!e.includes("\0")&&!e.includes("\\")&&t.every(i=>i!==""&&i!=="."&&i!=="..")))throw new k(`nome di file d'ingresso non ammesso: ${JSON.stringify(e)}`,{stage:r});return t}a($,"segmenti");function P(e){let r=e.ambiente??[];return {kind:"processo-esterno",details:[{label:"eseguibile",value:e.eseguibile},{label:"argomenti",value:JSON.stringify(e.argomenti??[])},...e.versione!==void 0?[{label:"versione",value:e.versione}]:[],{label:"timeout",value:`${e.timeoutMs} ms`},{label:"ambiente",value:r.length>0?r.join(", "):"nessuna variabile"}]}}a(P,"descrittoreProcesso");var I=2e3,f=1e6,A=process.platform!=="win32";function O(e){return new Promise((r,t)=>{let o=spawn(e.eseguibile,[...e.argomenti],{cwd:e.cwd,env:{...e.env},shell:false,stdio:["ignore","pipe","pipe"],detached:A,windowsHide:true}),i=N(o),s=F(o,e),a$1=false,c=a(()=>a$1?false:(a$1=true,s.annulla(),true),"chiudi");o.once("error",l=>{c()&&t(l);}),o.once("close",(l,h)=>{if(!c())return;let p=s.interruzione();r({exitCode:l,segnale:h,...i.lette(),...p!==void 0?{interruzione:p}:{}});});})}a(O,"esegui");function N(e){let r="",t=false,o="";return e.stdout?.setEncoding("utf8"),e.stdout?.on("data",i=>{t||(r+=i,r.length>f&&(r="",t=true));}),e.stderr?.setEncoding("utf8"),e.stderr?.on("data",i=>{o=(o+i).slice(-I);}),{lette:a(()=>({stdout:r,stdoutTroncato:t,stderr:o}),"lette")}}a(N,"raccogliUscite");function F(e,r){let t,o,i=a(c=>{t===void 0&&(t=c,b(e,"SIGTERM"),o=setTimeout(()=>b(e,"SIGKILL"),r.terminazioneMs));},"termina"),s=setTimeout(()=>i("timeout"),r.timeoutMs),a$1=a(()=>i("annullata"),"suAnnullamento");return r.signal.addEventListener("abort",a$1,{once:true}),r.signal.aborted&&i("annullata"),{interruzione:a(()=>t,"interruzione"),annulla:a(()=>{clearTimeout(s),clearTimeout(o),r.signal.removeEventListener("abort",a$1);},"annulla")}}a(F,"arrestoProgrammato");function b(e,r){if(!A||e.pid===void 0){e.kill(r);return}try{process.kill(-e.pid,r);}catch(t){t.code!=="ESRCH"&&e.kill(r);}}a(b,"segnala");var T=5e3,L=/^[A-Za-z_][A-Za-z0-9_]*$/;function j(e){let r=e.name??"processo-esterno";return Z(e,r),{name:r,descriptor:P(e),run:a((t,o)=>J(e,r,t,o),"run")}}a(j,"processoEsternoAction");async function J(e,r,t,o){if(o.signal.aborted)throw new k(`Run annullata: il processo "${r}" non \xE8 partito`,{stage:r});let i=e.ingresso(t),s=await E(e.cartellaBase??tmpdir());try{await R(s,i.file,r);let a=await B(r,G(e,i,s,o.signal)),c=K(r,a,e),l=await v(s);return e.merge(t,{riepilogo:c,file:l})}finally{await rm(s,{recursive:true,force:true}).catch(a=>{o.logger.warn("processo-esterno.cartella-non-cancellata",{processo:r,cartella:s,errore:C(a)});});}}a(J,"lancia");function Z(e,r){let t=a(i=>Number.isSafeInteger(i)&&i>0,"intero");if(e.eseguibile.trim()==="")throw new g$1(`processo "${r}": eseguibile vuoto`);if(!t(e.timeoutMs))throw new g$1(`processo "${r}": timeoutMs dev'essere un intero positivo, non ${e.timeoutMs}`);if(e.terminazioneMs!==void 0&&!t(e.terminazioneMs))throw new g$1(`processo "${r}": terminazioneMs dev'essere un intero positivo, non ${e.terminazioneMs}`);let o=(e.ambiente??[]).filter(i=>!L.test(i));if(o.length>0)throw new g$1(`processo "${r}": nomi di variabile non validi: ${o.join(", ")}`)}a(Z,"verificaConfigurazione");function G(e,r,t,o){return {eseguibile:e.eseguibile,argomenti:[...e.argomenti??[],...r.argomenti??[]],cwd:t,env:X(e.ambiente??[]),timeoutMs:e.timeoutMs,terminazioneMs:e.terminazioneMs??T,signal:o}}a(G,"parametri");function X(e){return Object.fromEntries(e.flatMap(r=>{let t=process.env[r];return t===void 0?[]:[[r,t]]}))}a(X,"ambienteDa");async function B(e,r){try{return await O(r)}catch(t){throw new k(`Impossibile avviare il processo "${e}": ${C(t)}`,{stage:e,details:{eseguibile:r.eseguibile}},{cause:t})}}a(B,"avvia");function H(e,r){if(e.interruzione==="timeout")return `ha superato il timeout di ${r} ms ed \xE8 stato terminato`;if(e.interruzione==="annullata")return "\xE8 stato terminato: run annullata";if(e.exitCode===null)return `\xE8 stato terminato dal segnale ${e.segnale??"?"}`;if(e.exitCode!==0)return `\xE8 terminato con exit code ${e.exitCode}`;if(e.stdoutTroncato)return `ha scritto su stdout pi\xF9 di ${f} caratteri`}a(H,"motivoDelFallimento");function K(e,r,t){let o=a((c,l={})=>new k(`Il processo "${e}" ${c}`,{stage:e,details:{exitCode:r.exitCode,segnale:r.segnale,stderr:r.stderr,...l}}),"fallisci"),i=H(r,t.timeoutMs);if(i!==void 0)throw o(i);let s;try{s=JSON.parse(r.stdout);}catch{throw o("non ha scritto su stdout un documento JSON")}let a$1=t.riepilogo.safeParse(s);if(!a$1.success)throw o("ha scritto un riepilogo non conforme allo schema",{campi:a$1.error.issues.map(c=>c.path.join(".")||"(radice)")});return a$1.data}a(K,"leggiRiepilogo");function C(e){return e instanceof Error?e.message:String(e)}a(C,"messaggio");export{g as CARTELLA_USCITA,I as CODA_STDERR_CARATTERI,T as DEFAULT_TERMINAZIONE_MS,f as MAX_STDOUT_CARATTERI,j as processoEsternoAction};
|
|
@@ -21,7 +21,7 @@ declare function istanzaSendgridPerIlPiano(id: string, env: NodeJS.ProcessEnv):
|
|
|
21
21
|
type SendgridRegistry = ConnectorRegistry<SendgridConfig>;
|
|
22
22
|
/**
|
|
23
23
|
* Risolve lo {@link SendgridRegistry} da env. Con `SENDGRID_INSTANCES` (es.
|
|
24
|
-
* `
|
|
24
|
+
* `avvisi`) carica una config per id dalle variabili `SENDGRID_<ID>_*`;
|
|
25
25
|
* senza lista applica il default implicito dalle variabili base `SENDGRID_*`.
|
|
26
26
|
*/
|
|
27
27
|
declare function loadSendgridRegistry(env?: NodeJS.ProcessEnv): SendgridRegistry;
|
package/dist/etl.config.js
CHANGED
|
@@ -1,12 +1,4 @@
|
|
|
1
|
-
import {e as e$
|
|
2
|
-
`,`
|
|
3
|
-
`)).digest("hex");t.update(`${a}\0${s}
|
|
4
|
-
`);}return `sha256:${t.digest("hex")}`}a(Vr,"improntaScript");async function qr(e){try{return (await stat(e)).isDirectory()}catch(o){if(o.code==="ENOENT")return false;throw o}}a(qr,"eCartella");function Kr(e,o){return resolve(e)===resolve(me)?`Allinealo con \`git submodule update --init ${me}\` (ADR-0097).`:`Mettici lo script al tag ${o}, o togli CANOSSA_BILANCI_SCRIPT_DIR per usare il submodule (ADR-0097).`}a(Kr,"rimedio");async function Ko(e,o=$e){let t=Kr(e,o.tag);if(!await qr(join(e,Me)))throw new g(`Manca lo script dei bilanci in ${e}: nessuna cartella ${Me}/. ${t}`);let a=await Vr(e).catch(n=>{throw new g(`Manca lo script dei bilanci in ${e}: ${n instanceof Error?n.message:String(n)}. ${t}`)});if(a!==o.impronta)throw new g(`Lo script dei bilanci in ${e} non \xE8 al tag ${o.tag}: impronta ${a}, attesa ${o.impronta}. ${t}`)}a(Ko,"verificaScript");var D="CANOSSA_BILANCI_",Hr="120000",Zo="https://app.noeva.ai",Zr=[{suffisso:"WORKSPACE_ID"},{suffisso:"PYTHON",default:"python3"},{suffisso:"SCRIPT_DIR",default:me},{suffisso:"TIMEOUT_MS",default:Hr},{suffisso:"SENDGRID_INSTANCE",default:l},{suffisso:"DESTINATARI",obbligatoria:true},{suffisso:"APP_URL",default:Zo}];function Fe(e){return N(Zr,D,e)}a(Fe,"risolvi");function Yr(e,o){let t=Number(o);if(!Number.isSafeInteger(t)||t<=0)throw new g(`${D}${e} non valido: atteso un intero positivo di millisecondi`);return t}a(Yr,"intero");function Jr(e){let o=e.split(",").map(a=>a.trim()).filter(a=>a!=="");if(o.length===0)throw new g(`${D}DESTINATARI non valido: serve almeno un indirizzo`);let t=o.filter(a=>!a.includes("@")).length;if(t>0)throw new g(`${D}DESTINATARI non valido: ${t} indirizzi su ${o.length} senza @`);return o}a(Jr,"destinatari");function Xr(e){let o=URL.canParse(e)?new URL(e):null;if(o===null||o.protocol!=="https:"&&o.protocol!=="http:")throw new g(`${D}APP_URL non valido: atteso un URL http(s), per esempio ${Zo}`);return e.replace(/\/+$/,"")}a(Xr,"urlApp");function Y(e=process.env){let o=Fe(e);O$1(o);let t=a(n=>P(o,n),"valore"),a$1=o.variabili.find(n=>n.suffisso==="WORKSPACE_ID")?.valore;return {...a$1!==void 0?{workspaceId:a$1}:{},script:{interprete:t("PYTHON"),cartella:t("SCRIPT_DIR"),tag:$e.tag,timeoutMs:Yr("TIMEOUT_MS",t("TIMEOUT_MS"))},sendgridInstance:t("SENDGRID_INSTANCE"),mail:{destinatari:Jr(t("DESTINATARI")),appUrl:Xr(t("APP_URL"))},variabili:o.variabili}}a(Y,"parseConfig");function ue(e){return P(Fe(e),"SENDGRID_INSTANCE")}a(ue,"istanzaSendgridCanossa");var Ho={[`${D}DESTINATARI`]:"operatore@esempio"};function Qr(e){let o=(e[`${D}DESTINATARI`]??"").trim()==="";try{return Y(o?{...e,...Ho}:e)}catch(t){if(!(t instanceof g))throw t;return Y(Ho)}}a(Qr,"esempioDa");function Yo(e){return {risolta:a(()=>Y(e),"risolta"),esempio:a(o=>({...Qr(e),ricaduta:o,sendgridInstance:ue(e),variabili:Fe(e).variabili}),"esempio")}}a(Yo,"configCanossaBilanciPerIlPiano");var ei=100;function G(e,o){let t=null,a;for(let[n,s]of o.entries()){let l=e.filter(c=>c.parentFolderId===t&&c.name===s);if(l.length>1){let c=o.slice(0,n+1);throw new b$1(`Percorso di cartelle ambiguo: "${c.join("/")}" compare ${l.length} volte allo stesso livello`,c)}if(a=l[0],a===void 0)return;t=a.id;}return a}a(G,"cartellaA");async function V(e,o){let t=[];for(let a=1;;a++){let{files:n,total:s}=await e.listFolderFiles(o,{page:a,limit:ei});if(t.push(...n),n.length===0||t.length>=s)return t}}a(V,"fileDellaCartella");var u="Da elaborare",Ue="Scartati",M=[{acronimo:"CE",nomeAzienda:"CanossaEvents",nomeCartella:"CE Report Mensile"},{acronimo:"CER",nomeAzienda:"CanossaRacingsrl",nomeCartella:"CER Report Mensile"},{acronimo:"CEA",nomeAzienda:"CanossaNA",nomeCartella:"CEA Report Mensile"},{acronimo:"CAV",nomeAzienda:"Cavallino",nomeCartella:"CAV Report Mensile"},{acronimo:"CAVE",nomeAzienda:"CavallinoEvents",nomeCartella:"CAVE Report Mensile"},{acronimo:"CEL",nomeAzienda:"CanossaLifestyle",nomeCartella:"CEL Report Mensile"},{acronimo:"CEI",nomeAzienda:"CanossaDMCC",nomeCartella:"CEI Report Mensile"}];function f(e){let o=M.find(t=>t.acronimo===e);if(o===void 0)throw new d$1(`Societ\xE0 sconosciuta: ${e}`,{details:{acronimo:e}});return o}a(f,"societaDi");function Jo(e){return String(e).padStart(2,"0")}a(Jo,"meseADueCifre");function ge(e,o){return [e.nomeCartella,String(o)]}a(ge,"percorsoAnno");function z(e,o,t){return [...ge(e,o),Jo(t)]}a(z,"percorsoMese");function Xo(e,o,t,a){let n=a>0?` Rev.${a}`:"";return `${e.acronimo}_Datasmart ${o}-${Jo(t)}${n}.xlsx`}a(Xo,"nomeExportElaborato");function Qo(e){return [e.nomeCartella,u,Ue]}a(Qo,"percorsoScartati");var oi="Europe/Rome",ti=new Intl.DateTimeFormat("en-GB",{timeZone:oi,year:"numeric",month:"2-digit",day:"2-digit",hour:"2-digit",minute:"2-digit",second:"2-digit",hourCycle:"h23"});function ri(e){let o=ti.formatToParts(e),t=a(a=>o.find(n=>n.type===a)?.value??"","parte");return `${t("year")}-${t("month")}-${t("day")} ${t("hour")}.${t("minute")}.${t("second")}`}a(ri,"istanteNelNome");var ii=/^[A-Z]+_Scartato \d{4}-\d{2}-\d{2} \d{2}\.\d{2}\.\d{2} /;function et(e,o,t){let a=t.replace(ii,"");return `${e.acronimo}_Scartato ${ri(o)} ${a}`}a(et,"nomeExportScartato");function fe(e,o,t){let[a]=e;if(a===void 0)return;let n=o.safeParse(a);if(!n.success)throw new j(`Il resolver del nodo \xAB${t}\xBB ha dato una riga fuori contratto`,{stage:t},{cause:n.error});return n.data}a(fe,"primaRiga");var tt=L.number().int().min(1).max(12),rt=L.number().int().min(2e3).max(2100),it=L.object({versione_schema:L.literal(1),anno:rt,mese:tt}),ai=L.object({ruolo:L.string(),percorso:L.string()}),ni=L.object({dare:L.number(),avere:L.number()}),si=L.object({dare:L.number().int(),avere:L.number().int()}),li=L.object({risultato_mese:L.number(),progressivo_precedente:L.number(),progressivo_fine_mese:L.number(),origine:L.enum(["workbook","fornito"]),fogli:L.array(L.string()),mesi_mancanti:L.array(L.number().int()),righe_non_lette:L.number().int()}),Be=L.object({versione_schema:L.literal(1),societa:L.string(),anno:rt,mese:tt,foglio_mese:L.string(),revisione:L.number().int().min(0),dry_run:L.boolean(),totali:L.object({grezzo:ni,arrotondato:si}),sbilancio_fonte:L.number(),sbilancio:L.number().int(),avvisi:L.array(L.string()),controllo_periodo:li.optional(),file:L.array(ai)}),ve=L.custom(e=>e instanceof Uint8Array),ot=L.object({nome:L.string(),bytes:ve}),We=L.object({acronimo:L.string(),da_elaborare_id:L.string()}),q=L.object({acronimo:L.string(),export_file_id:L.string(),export_nome:L.string(),da_elaborare_id:L.string(),in_attesa_dal:L.string().nullable(),export_sha256:L.string(),export_versioni:L.number().int().min(1),export_sovrascritto:L.boolean(),altre_societa:L.array(We),export:ve}),je=q.extend({anno:L.number(),mese:L.number()}),Ge=L.object({nome:L.string(),file_id:L.string(),cartella:L.string()}),Ve=je.extend({elaborazione_precedente:Ge.nullable()}),$="canossa_bilanci",at=L.object({export_sha256:L.string().regex(/^[0-9a-f]{64}$/),versione_letta:L.number().int().min(1)}),qe=L.object({file_id:L.string(),nome:L.string(),cartella_anno_id:L.string(),metadata:L.record(L.string(),L.unknown()).nullable(),versione_letta:L.number().int().min(1),caricamento:L.enum(["nuova-versione","sovrascrivi","nessuno"]),bytes:ve}),Ke=Ve.extend({workbook:qe}),He=Ke.extend({riepilogo:Be,csv:ot,report:ot,workbook_aggiornato:ve}),Ze=He.extend({cartella_mese_id:L.string(),csv_file_id:L.string(),report_file_id:L.string()}),Ye=Ze.extend({workbook_versione_file_id:L.string()}),nt=Ye.extend({export_nome_finale:L.string()});var K="verifica-versioni";function ye(e){return e.metadata?.is_overwrite===true}a(ye,"eSovrascritto");function st(e){if(e.export_versioni!==1)throw new d$1(`L'export \xAB${e.export_nome}\xBB contiene ${e.export_versioni} caricamenti con lo stesso nome: su Noeva sono versioni dello stesso file, e se ne leggerebbe solo l'ultimo. Va tolto e ricaricato come file distinti, un mese per file: ognuno con un nome diverso, oppure il successivo solo dopo che la run ha elaborato il precedente.`,{stage:K,details:{fileId:e.export_file_id,versioni:e.export_versioni}});if(e.export_sovrascritto)throw new d$1(`L'export \xAB${e.export_nome}\xBB \xE8 stato caricato con \xABSovrascrivi file esistente\xBB sopra un file con lo stesso nome, che su Noeva \xE8 unico nel workspace: il file di prima non c'\xE8 pi\xF9, e se era un altro mese o un'altra Societ\xE0 potrebbe non essere mai stato elaborato. Va tolto e ricaricato come file nuovo, con \xABCrea una copia\xBB o dopo aver tolto il file, senza mai scegliere \xABSovrascrivi file esistente\xBB; se il file sostituito era un altro mese o di un'altra Societ\xE0, va ricaricato anche quello, un mese per file.`,{stage:K,details:{fileId:e.export_file_id,sovrascritto:true}});return e}a(st,"verificaUnCaricamento");var pi=/\.xlsx$/i;function Xe(e){return createHash("sha256").update(e).digest("hex")}a(Xe,"sha256");function Je(e){return e.addedAt??e.createdAt}a(Je,"inAttesaDal");function di(e,o){let t=Je(e.file),a=Je(o.file);return t!==a?t===null?1:a===null?-1:Date.parse(t)-Date.parse(a):e.ordineSocieta-o.ordineSocieta||e.file.name.localeCompare(o.file.name)}a(di,"primaDi");async function mi(e,o){let t=await e.getFolderTree(),a=[];for(let[n,s]of M.entries()){o.signal.throwIfAborted();let l=[s.nomeCartella,u],c=G(t,l);if(c===void 0){o.logger.warn("canossa-bilanci.da-elaborare-assente",{societa:s.acronimo,cartella:l.join("/")});continue}for(let p of await V(e,c.id)){if(!pi.test(p.name)){o.logger.warn("canossa-bilanci.non-un-export",{societa:s.acronimo,fileId:p.id,nome:p.name});continue}a.push({societa:s,ordineSocieta:n,daElaborareId:c.id,file:p});}}return [...a].sort(di)}a(mi,"candidati");function ui(e){let[o]=e;if(o===void 0)return;let[t=o,...a]=e.filter(s=>s.file.id===o.file.id).sort((s,l)=>s.ordineSocieta-l.ordineSocieta),n=new Set(e.filter(s=>s.file.id!==o.file.id).map(s=>s.file.id)).size;return {primo:o,scelto:t,altre:a,inAttesa:n}}a(ui,"inTesta");function lt(e$1,o="export-in-attesa"){return {name:o,columns:O(q),descriptor:{kind:"noeva-folder",details:[...f$1(e$1),{label:"cartelle",value:`\xAB<Societ\xE0> Report Mensile/${u}\xBB di ${M.map(t=>t.acronimo).join(", ")}`},{label:"per run",value:"al massimo 1 export, il pi\xF9 vecchio"}]},async*extract(t){t.signal.throwIfAborted();try{let a=ui(await mi(e$1,t));if(a===void 0){t.logger.info("canossa-bilanci.nessun-export-in-attesa",{});return}let{primo:n,scelto:s,altre:l}=a;t.logger.info("canossa-bilanci.export-scelto",{societa:s.societa.acronimo,fileId:s.file.id,inAttesa:a.inAttesa,...l.length>0?{altreSocieta:l.map(d=>d.societa.acronimo)}:{}});let c=await e$1.getFileById(s.file.id),p=ye(c),h=c.currentVersion===1&&!p&&l.length===0?await b$2(e$1.downloadBytes(s.file.id)):new Uint8Array;yield {acronimo:s.societa.acronimo,export_file_id:s.file.id,export_nome:s.file.name,da_elaborare_id:s.daElaborareId,in_attesa_dal:Je(n.file),export_sha256:Xe(h),export_versioni:c.currentVersion,export_sovrascritto:p,altre_societa:l.map(d=>({acronimo:d.societa.acronimo,da_elaborare_id:d.daElaborareId})),export:h};}catch(a){throw a instanceof c?a:new e("Lettura degli export in attesa fallita",{stage:o},{cause:a})}}}}a(lt,"exportInAttesaSource");var gi=/\.xlsx$/i;function ct(e){return [e.acronimo,e.anno,e.mese,e.export_file_id,e.export_sha256].join("|")}a(ct,"chiaveExportDelMese");function fi(e){let[o="",t="",a="",n="",s=""]=e.split("|");return {acronimo:o,anno:Number(t),mese:Number(a),fileId:n,hash:s}}a(fi,"leggiChiave");async function vi(e,o,t){let{acronimo:a,anno:n,mese:s,fileId:l,hash:c}=fi(o),p=z(f(a),n,s),y=G(await e.getFolderTree(),p);if(y===void 0)return;let h=(await V(e,y.id)).filter(d=>gi.test(d.name)&&d.id!==l);for(let d of h){t.signal.throwIfAborted();let we=await b$2(e.downloadBytes(d.id));if(Xe(we)===c)return {nome:d.name,file_id:d.id,cartella:p.join("/")}}}a(vi,"cerca");function pt(e,o="export-del-mese"){return {name:o,descriptor:{kind:"noeva-folder",details:[...f$1(e),{label:"cartella",value:"<Societ\xE0> Report Mensile/<anno>/<MM>"},{label:"confronto",value:"sha256 del contenuto dei .xlsx"}]},async resolve(t,a){let n=new Map;for(let s of t){a.signal.throwIfAborted();let l=await vi(e,s,a);l!==void 0&&n.set(s,[l]);}return n}}}a(pt,"exportDelMeseResolver");function dt(e,o){let t=fe(e,Ge,"export-del-mese");return {...o,elaborazione_precedente:t??null}}a(dt,"conPrecedente");function mt(e){return e.elaborazione_precedente!==null}a(mt,"giaElaborato");var yi=/riclassificazion.*\.xlsx$/i,bi=L.discriminatedUnion("stato",[L.object({stato:L.literal("trovato"),workbook:qe}),L.object({stato:L.literal("ambiguo"),nomi:L.array(L.string()).readonly()}),L.object({stato:L.literal("incoerente"),nome:L.string(),versioneLetta:L.unknown(),versioni:L.number().int()}),L.object({stato:L.literal("a-meta"),nome:L.string()})]);function ut(e){return `${e.acronimo}|${e.anno}|${e.export_sha256}`}a(ut,"chiaveWorkbook");function Si(e){let[o="",t="",a=""]=e.split("|");return {acronimo:o,anno:Number(t),hash:a}}a(Si,"leggiChiave");var Ci="pending";function hi(e,o){let t=e.metadata?.upload_status===Ci,a=e.metadata?.[$],n=a===void 0?void 0:at.safeParse(a);if(n?.success===false)return {stato:"incoerente",versioneLetta:a};if(n?.data.export_sha256!==o)return t?{stato:"a-meta"}:{stato:"versione",versione:e.currentVersion,caricamento:"nuova-versione"};let{versione_letta:s}=n.data;return s>=e.currentVersion?{stato:"incoerente",versioneLetta:s}:{stato:"versione",versione:s,caricamento:t?"sovrascrivi":"nessuno"}}a(hi,"scegliVersione");async function xi(e,o){let{acronimo:t,anno:a,hash:n}=Si(o),s=ge(f(t),a),l=G(await e.getFolderTree(),s);if(l===void 0)return;let c=(await V(e,l.id)).filter(Ae=>yi.test(Ae.name)),[p,...y]=c;if(p===void 0)return;if(y.length>0)return {stato:"ambiguo",nomi:c.map(Ae=>Ae.name)};let h=await e.getFileById(p.id),d=hi(h,n);if(d.stato==="a-meta")return {stato:"a-meta",nome:p.name};if(d.stato==="incoerente")return {stato:"incoerente",nome:p.name,versioneLetta:d.versioneLetta,versioni:h.currentVersion};let we=await b$2(d.versione===h.currentVersion?e.downloadBytes(p.id):e.downloadBytes(p.id,d.versione));return {stato:"trovato",workbook:{file_id:p.id,nome:p.name,cartella_anno_id:l.id,metadata:h.metadata,versione_letta:d.versione,caricamento:d.caricamento,bytes:we}}}a(xi,"cerca");function gt(e,o="workbook-anno"){return {name:o,descriptor:{kind:"noeva-file",details:[...f$1(e),{label:"cartella",value:"<Societ\xE0> Report Mensile/<anno>"},{label:"file",value:"il .xlsx col nome \xABRiclassificazioni\xBB"},{label:"versione",value:`la corrente, o quella in \xAB${$}\xBB se viene da questo export`}]},async resolve(t,a){let n=new Map;for(let s of t){a.signal.throwIfAborted();let l=await xi(e,s);l!==void 0&&n.set(s,[l]);}return n}}}a(gt,"workbookResolver");function ft(e,o){let t=fe(e,bi,"workbook-anno"),a=ge(f(o.acronimo),o.anno).join("/");if(t===void 0)throw new j(`Manca il File Riclassificazioni ${o.anno} della Societ\xE0 ${o.acronimo}: nella cartella \xAB${a}\xBB non c'\xE8 un .xlsx con \xABRiclassificazioni\xBB nel nome. Va preparato prima di elaborare l'export.`,{stage:"workbook-anno",details:{cartella:a}});if(t.stato==="ambiguo")throw new j(`Nella cartella \xAB${a}\xBB ci sono pi\xF9 File Riclassificazioni (${t.nomi.join(", ")}): ne deve restare uno solo.`,{stage:"workbook-anno",details:{cartella:a,nomi:[...t.nomi]}});if(t.stato==="incoerente")throw new j(`La versione corrente del File Riclassificazioni \xAB${t.nome}\xBB dice di essere stata prodotta a partire dalla versione ${JSON.stringify(t.versioneLetta)}, ma il file ha ${t.versioni} versioni: la metadata \xAB${$}\xBB va controllata prima di rielaborare l'export.`,{stage:"workbook-anno",details:{cartella:a,file:t.nome,versioni:t.versioni}});if(t.stato==="a-meta")throw new j(`L'ultima versione del File Riclassificazioni \xAB${t.nome}\xBB \xE8 rimasta a met\xE0 upload, e non l'ha caricata questo export: va ricaricata o tolta dallo storico delle versioni prima di elaborare l'export.`,{stage:"workbook-anno",details:{cartella:a,file:t.nome}});return {...o,workbook:t.workbook}}a(ft,"conWorkbook");var Ri="import sys; sys.path.insert(0, sys.argv.pop(1)); from bilanci.cli import esegui; sys.exit(esegui())",ki=["PATH"];function eo(e){return isAbsolute(e)||!e.includes("/")?e:resolve(e)}a(eo,"percorsoDellaRun");function oo(e,o=eo){return t=>e$1({name:t.name,eseguibile:o(e.interprete),argomenti:["-I","-c",Ri,o(e.cartella),...t.argomenti],versione:e.tag,timeoutMs:e.timeoutMs,ambiente:ki,ingresso:t.ingresso,riepilogo:t.riepilogo,merge:t.merge})}a(oo,"avviaScript");var bt="lavoro",be=`${bt}/export-datasmart.xlsx`,vt="societa.json";function wi(e){let o=f(e),t={acronimo:o.acronimo,nome_azienda:o.nomeAzienda,nome_cartella:o.nomeCartella,root:a$1,external_id_su_revisione:"invariato"};return new TextEncoder().encode(JSON.stringify(t,null,2))}a(wi,"configScript");var St={name:"leggi-periodo",argomenti:["--periodo","--json","--datasmart",be],ingresso:a(e=>({file:[{nome:be,bytes:e.export}]}),"ingresso"),riepilogo:it,merge:a((e,o)=>({...e,anno:o.riepilogo.anno,mese:o.riepilogo.mese}),"merge")};function yt(e){return `${bt}/${e.workbook.nome}`}a(yt,"fileWorkbook");function Qe(e,o,t){let a=e.file.find(l=>l.ruolo===t),n=a?.percorso.replaceAll("\\","/"),s=n===void 0?void 0:o.find(l=>n.endsWith(`/${a$1}/${l.nome}`));if(s===void 0)throw new k$1(a===void 0?`Lo script non dichiara il file \xAB${t}\xBB nel riepilogo`:`Lo script dichiara il file \xAB${t}\xBB, ma non l'ha scritto nella cartella d'uscita`,{stage:"elabora",details:{ruolo:t}});return {nome:s.nome.split("/").at(-1)??s.nome,bytes:s.bytes}}a(Qe,"prodotto");function Ai(e,o){let t=`${e.acronimo} ${e.anno}-${e.mese}`,a=`${o.societa} ${o.anno}-${o.mese}`;if(a!==t)throw new k$1(`Il riepilogo dello script \xE8 di ${a}, l'export di ${t}`,{stage:"elabora",details:{atteso:t,letto:a}});if(o.dry_run)throw new k$1("Lo script ha girato in prova (dry_run)",{stage:"elabora"})}a(Ai,"verificaRiepilogo");var Ct={name:"elabora",argomenti:["--json","--config",vt,"--datasmart",be],ingresso:a(e=>({file:[{nome:be,bytes:e.export},{nome:yt(e),bytes:e.workbook.bytes},{nome:vt,bytes:wi(e.acronimo)}],argomenti:["--riclassifica",yt(e)]}),"ingresso"),riepilogo:Be,merge:a((e,{riepilogo:o,file:t})=>(Ai(e,o),{...e,riepilogo:o,csv:Qe(o,t,"csv"),report:Qe(o,t,"report"),workbook_aggiornato:Qe(o,t,"file_riclassificazioni_albero").bytes}),"merge")};var Ii="text/csv",Pi="text/plain",Ni="application/vnd.openxmlformats-officedocument.spreadsheetml.sheet";async function to(e,o,t,a){let n=await e.prepareUpload({fileName:o.nome,fileType:o.mimeType,fileSize:o.bytes.byteLength,overwrite:o.modo==="sovrascrivi",version:o.modo==="nuova-versione",...o.metadata!==void 0&&o.metadata!==null?{metadata:{...o.metadata}}:{}});if(n.uploadMethod!=="presigned"||n.uploadUrl===void 0)throw new k$1(`Upload TUS non supportato (file troppo grande): ${o.nome}`,{stage:t,details:{fileName:o.nome}});try{await e.putBytes(n.uploadUrl,o.bytes,o.mimeType);}catch(s){throw o.esistente===true?(a.logger.warn("canossa-bilanci.upload-lasciato-a-meta",{fileId:n.fileId,fileName:o.nome}),s):(await e.completeUpload(n.fileId,false,"upload dei byte fallito").catch(l=>{a.logger.warn("canossa-bilanci.upload-non-chiuso",{fileId:n.fileId,fileName:o.nome,errore:l instanceof Error?l.message:String(l)});}),s)}return await e.completeUpload(n.fileId,true),await e.addFileToFolder(o.cartellaId,n.fileId),n.fileId}a(to,"carica");function ht(e,o="carica-report"){return {name:o,descriptor:{kind:"noeva-upload",details:[...f$1(e),{label:"cartella",value:"<Societ\xE0> Report Mensile/<anno>/<MM>"},{label:"file",value:"CSV per NetSuite e report"},{label:"se gi\xE0 presente",value:"sovrascrivi"}]},async run(t,a){a.signal.throwIfAborted();let n=z(f(t.acronimo),t.anno,t.mese),s=await e.ensureFolderPath(n),l={cartellaId:s,modo:"sovrascrivi"},c=await to(e,{...l,...t.csv,mimeType:Ii},o,a),p=await to(e,{...l,...t.report,mimeType:Pi},o,a);return {...t,cartella_mese_id:s,csv_file_id:c,report_file_id:p}}}}a(ht,"caricaReportAction");function Ti(e){let o={export_sha256:e.export_sha256,versione_letta:e.workbook.versione_letta};return {...e.workbook.metadata,[$]:o}}a(Ti,"metadataWorkbook");function xt(e,o="carica-workbook"){return {name:o,descriptor:{kind:"noeva-upload",details:[...f$1(e),{label:"cartella",value:"<Societ\xE0> Report Mensile/<anno>"},{label:"file",value:"File Riclassificazioni dell'anno"},{label:"se gi\xE0 presente",value:"nuova-versione"},{label:"metadata",value:`rimandata, con \xAB${$}\xBB: hash dell'export e versione letta`},{label:"se la versione di questo export c'\xE8 gi\xE0",value:"nessun upload; sovrascrivi se \xE8 rimasta a met\xE0"},{label:"se i byte non arrivano",value:"upload lasciato pending, mai chiuso come fallito"}]},async run(t,a){a.signal.throwIfAborted();let{workbook:n}=t;if(n.caricamento==="nessuno")return a.logger.info("canossa-bilanci.workbook-gia-caricato",{fileId:n.file_id,nome:n.nome,versioneLetta:n.versione_letta}),{...t,workbook_versione_file_id:n.file_id};let s=await to(e,{nome:n.nome,bytes:t.workbook_aggiornato,mimeType:Ni,cartellaId:n.cartella_anno_id,modo:n.caricamento,metadata:Ti(t),esistente:true},o,a);return {...t,workbook_versione_file_id:s}}}}a(xt,"caricaWorkbookAction");function _t(e,o="archivia-export"){return {name:o,descriptor:{kind:"noeva-move",details:[...f$1(e),{label:"da",value:"<Societ\xE0> Report Mensile/Da elaborare"},{label:"a",value:"<Societ\xE0> Report Mensile/<anno>/<MM>"},{label:"nome",value:"<ACRONIMO>_Datasmart <anno>-<MM>[ Rev.N].xlsx"}]},async run(t,a){a.signal.throwIfAborted();let n=await e.getFileById(t.export_file_id),{currentVersion:s}=n;if(s!==t.export_versioni)throw new k$1(`L'export \xAB${t.export_nome}\xBB ha ${s} caricamenti, ne aveva ${t.export_versioni} quando la run l'ha letto: \xE8 stato ricaricato con lo stesso nome durante l'elaborazione, e non si archivia. Va tolto e ricaricato come file distinti, un mese per file.`,{stage:o,details:{fileId:t.export_file_id,versioniLette:t.export_versioni,versioniOra:s}});if(ye(n))throw new k$1(`L'export \xAB${t.export_nome}\xBB \xE8 stato sovrascritto durante l'elaborazione: \xE8 stato ricaricato con lo stesso nome scegliendo \xABSovrascrivi\xBB, e non si archivia. Va ricaricato come file nuovo, senza mai scegliere \xABSovrascrivi\xBB; se il file sostituito era un altro mese o di un'altra Societ\xE0, va ricaricato anche quello.`,{stage:o,details:{fileId:t.export_file_id,sovrascritto:true}});let l=Xo(f(t.acronimo),t.anno,t.mese,t.riepilogo.revisione);return await e.renameFile(t.export_file_id,l),await e.moveFile({fileId:t.export_file_id,fromFolderId:t.da_elaborare_id,toFolderId:t.cartella_mese_id}),{...t,export_nome_finale:l}}}}a(_t,"archiviaExportAction");var m=a((e,o)=>({tipo:"campo",etichetta:e,valore:o}),"rigaCampo"),kt=a((e,o)=>({tipo:"file",nome:e,url:o}),"rigaFile");function wt(e){switch(e.tipo){case "paragrafo":return e.testo!=="";case "righe":return e.righe.length>0;default:return e.voci.length>0}}a(wt,"pieno");function Li(e){return e.tipo==="campo"?`${e.etichetta}: ${e.valore}`:`${e.nome}: ${e.url}`}a(Li,"testoRiga");function Oi(e){let o=a(t=>`--- ${t.toUpperCase()} ---`,"titolo");switch(e.tipo){case "paragrafo":return e.testo;case "righe":return [...e.titolo===null?[]:[o(e.titolo)],...e.righe.map(Li)].join(`
|
|
5
|
-
`);default:return [o(e.titolo),...e.voci.map(t=>`- ${t}`)].join(`
|
|
6
|
-
`)}}a(Oi,"testoBlocco");function At(e){return e.filter(wt).map(Oi).join(`
|
|
7
|
-
|
|
8
|
-
`)}a(At,"corpoTesto");var S={sfondo:"#f4f5f9",carta:"#ffffff",bordo:"#e2e5ef",testo:"#1b2033",tenue:"#5b6380",pulsante:"#3b5bdb"},Di={OK:"#2b8a3e",ATTENZIONE:"#b35c00",ERRORE:"#c92a2a"},Et="-apple-system, BlinkMacSystemFont, 'Segoe UI', Roboto, Helvetica, Arial, sans-serif",Mi={"&":"&","<":"<",">":">",'"':""","'":"'"};function k(e){return e.replace(/[&<>"']/g,o=>Mi[o]??o)}a(k,"esc");function Rt(e){return `<h2 style="margin:0 0 8px;font-size:12px;line-height:1.4;font-weight:700;letter-spacing:0.06em;text-transform:uppercase;color:${S.tenue};">${k(e)}</h2>`}a(Rt,"htmlTitoloSezione");function zi(e,o){return `<a href="${k(o)}" class="pulsante" target="_blank" style="display:inline-block;background-color:${S.pulsante};color:#ffffff;text-decoration:none;font-weight:600;font-size:14px;line-height:1.3;padding:10px 16px;border-radius:6px;">${k(e)}</a>`}a(zi,"htmlPulsante");function $i(e){return e.tipo==="file"?`<tr><td colspan="2" style="padding:6px 0;">${zi(e.nome,e.url)}</td></tr>`:`<tr><td style="padding:4px 16px 4px 0;vertical-align:top;width:38%;color:${S.tenue};">${k(e.etichetta)}</td><td style="padding:4px 0;vertical-align:top;color:${S.testo};">${k(e.valore)}</td></tr>`}a($i,"htmlRiga");function It(e,o){return `<p style="margin:${o?"0":"12px 0 0"};">${k(e)}</p>`}a(It,"htmlParagrafo");function Fi(e){switch(e.tipo){case "paragrafo":return It(e.testo,true);case "righe":return (e.titolo===null?"":Rt(e.titolo))+'<table role="presentation" width="100%" cellpadding="0" cellspacing="0" style="border-collapse:collapse;font-size:14px;line-height:1.5;">'+e.righe.map($i).join("")+"</table>";default:return Rt(e.titolo)+'<ul style="margin:0;padding-left:20px;">'+e.voci.map(o=>`<li style="margin:2px 0;">${k(o)}</li>`).join("")+"</ul>"}}a(Fi,"htmlBlocco");function Ui(e,o){return `<tr><td style="padding:16px 28px;${o?`border-top:1px solid ${S.bordo};`:""}">${e}</td></tr>`}a(Ui,"htmlCella");function Bi(e){return e.reduce((o,t)=>{let a=o.at(-1);return t.tipo==="paragrafo"&&a!==void 0&&a.every(s=>s.tipo==="paragrafo")?[...o.slice(0,-1),[...a,t]]:[...o,[t]]},[])}a(Bi,"celle");function Wi(e){return e.map((o,t)=>o.tipo==="paragrafo"?It(o.testo,t===0):Fi(o)).join("")}a(Wi,"htmlGruppo");function ji(e){return `<tr><td style="padding:24px 28px 4px;"><span class="esito" style="display:inline-block;background-color:${Di[e.esito]};color:#ffffff;font-size:12px;font-weight:700;letter-spacing:0.06em;line-height:1;padding:5px 8px;border-radius:4px;">${e.esito}</span><h1 style="margin:12px 0 0;font-size:20px;line-height:1.3;font-weight:700;color:${S.testo};">${k(e.titolo)}</h1></td></tr>`}a(ji,"htmlIntestazione");function Pt(e,o){let t=Bi(o.filter(wt)).map((a,n)=>Ui(Wi(a),n>0)).join("");return `<!doctype html><html lang="it"><head><meta charset="utf-8"><meta name="viewport" content="width=device-width, initial-scale=1"><title>${k(e.titolo)}</title></head><body style="margin:0;padding:0;background-color:${S.sfondo};"><table role="presentation" width="100%" cellpadding="0" cellspacing="0" style="background-color:${S.sfondo};"><tr><td align="center" style="padding:24px 12px;"><table role="presentation" width="100%" cellpadding="0" cellspacing="0" style="max-width:600px;background-color:${S.carta};border:1px solid ${S.bordo};border-radius:10px;font-family:${Et};font-size:15px;line-height:1.55;color:${S.testo};">`+ji(e)+t+`</table><p style="margin:16px 0 0;font-family:${Et};font-size:12px;color:${S.tenue};">Mail automatica di Noeva \xB7 bilanci mensili</p></td></tr></table></body></html>`}a(Pt,"corpoHtml");var Gi=.005;function ro(e){return Math.abs(e)>=Gi}a(ro,"sbilanciatoAllaFonte");function Tt(e,o,t,a=true){let n=new WeakMap;return {name:e,descriptor:{kind:"report",details:[{label:"tiene",value:"una riga per export, nel report"}]},async load(s,l){let c=[];for await(let p of s){let y=o(p);t(y,l),c.push(y);}return n.set(l,[...n.get(l)??[],...c]),{written:a?c.length:0}},writeReport(s){let l=n.get(s)??[];return l.length===0?{name:e}:{name:e,export:l}}}}a(Tt,"sinkEsito");function Lt(e="elaborati"){return Tt(e,Vi,(o,t)=>{t.logger.info("canossa-bilanci.elaborato",o),o.sbilancio_fonte!==null&&ro(o.sbilancio_fonte)&&t.logger.warn("canossa-bilanci.sbilancio-alla-fonte",o);})}a(Lt,"elaboratiSink");function Ot(e="gia-elaborati"){return Tt(e,qi,(o,t)=>{t.logger.warn("canossa-bilanci.gia-elaborato",o);},false)}a(Ot,"giaElaboratiSink");function Dt(e="scarti"){return {name:e,descriptor:{kind:"log",details:[{label:"scrive",value:"un errore nel log per export"}]},async load(o,t){let a=0;for await(let n of o)t.logger.error("canossa-bilanci.scartato",ao(n)),a+=1;return {written:a}}}}a(Dt,"scartiSink");function io(e,o){return typeof e=="number"&&typeof o=="number"?`${e}-${String(o).padStart(2,"0")}`:null}a(io,"periodo");function Nt(e,o){if(e===null||typeof e!="object")return null;let t=e[o];return typeof t=="string"?t:null}a(Nt,"testo");function Vi(e){let{riepilogo:o}=e,t=o.avvisi.length>0?` \xB7 avvisi: ${o.avvisi.join("; ")}`:"";return {societa:e.acronimo,export:e.export_nome_finale,periodo:io(e.anno,e.mese),sbilancio_fonte:o.sbilancio_fonte,esito:`foglio \xAB${o.foglio_mese}\xBB generato${t}`}}a(Vi,"rigaElaborato");function qi(e){let o=e.elaborazione_precedente,t=o===null?"":`: l'elaborazione precedente \xE8 \xAB${o.cartella}/${o.nome}\xBB`;return {societa:e.acronimo,export:e.export_nome,periodo:io(e.anno,e.mese),sbilancio_fonte:null,esito:`gi\xE0 elaborato${t}. Esce dalla coda: va negli Scartati dopo la mail`}}a(qi,"rigaGiaElaborato");function Ki(e){for(let o=e;o instanceof Error;o=o.cause){let t=o instanceof c?o.context.details?.stderr:null;if(typeof t=="string")return t.split(`
|
|
9
|
-
`).filter(n=>n.trim()!=="").at(-1)?.trim()??null}return null}a(Ki,"motivoDelloScript");function ao(e){let o=e.raw,t=Ki(e.error),a=o!==null&&typeof o=="object"?o:{};return {societa:Nt(o,"acronimo"),export:Nt(o,"export_nome"),periodo:io(a.anno,a.mese),sbilancio_fonte:null,esito:[...J$1(e.error),...t===null?[]:[t]].join(" \u2190 ")}}a(ao,"rigaScarto");var no=L.object({nome:L.string(),file_id:L.string()}),Mt=L.object({export_file_id:L.string(),da_elaborare_id:L.string(),cartella:L.array(L.string()),nome:L.string(),anche_da:L.array(L.string())}),Hi=L.object({esito:L.enum(["ok","attenzione"]),acronimo:L.string(),anno:L.number(),mese:L.number(),foglio_mese:L.string(),totali:L.object({grezzo:L.object({dare:L.number(),avere:L.number()}),arrotondato:L.object({dare:L.number(),avere:L.number()})}),sbilancio_fonte:L.number(),avvisi:L.array(L.string()),controllo_periodo:L.object({risultato_mese:L.number(),progressivo_precedente:L.number(),progressivo_fine_mese:L.number(),origine:L.enum(["workbook","fornito"]),fogli:L.array(L.string())}).optional(),cartella_mese:L.string(),csv:no,report:no,export_nome_finale:L.string()}),Zi=L.object({esito:L.literal("errore"),acronimo:L.string().nullable(),export_nome:L.string().nullable(),anno:L.number().nullable(),mese:L.number().nullable(),nodo:L.string().nullable(),motivo:L.string(),altre_societa:L.array(L.string()),scarto:Mt.nullable()}),Yi=L.object({esito:L.literal("gia-elaborato"),acronimo:L.string(),export_nome:L.string(),anno:L.number(),mese:L.number(),cartella_mese:L.string(),precedente:no.nullable(),scarto:Mt}),w=L.discriminatedUnion("esito",[Hi,Yi,Zi]),he=O(L.object({esito:L.enum(["ok","attenzione","gia-elaborato","errore"]),acronimo:L.string().nullable(),anno:L.number().nullable(),mese:L.number().nullable()}));function Ji(e){let{riepilogo:o}=e;return {esito:ro(o.sbilancio_fonte)?"attenzione":"ok",acronimo:e.acronimo,anno:e.anno,mese:e.mese,foglio_mese:o.foglio_mese,totali:o.totali,sbilancio_fonte:o.sbilancio_fonte,avvisi:o.avvisi,...o.controllo_periodo===void 0?{}:{controllo_periodo:o.controllo_periodo},cartella_mese:z(f(e.acronimo),e.anno,e.mese).join("/"),csv:{nome:e.csv.nome,file_id:e.csv_file_id},report:{nome:e.report.nome,file_id:e.report_file_id},export_nome_finale:e.export_nome_finale}}a(Ji,"esitoElaborato");function zt(e){return Xi(e)?e:Ji(e)}a(zt,"esitoDaNotificare");function Xi(e){return w.safeParse(e).success}a(Xi,"eEsitoMail");function $t(e,o,t=[]){let a=f(e.acronimo);return {export_file_id:e.export_file_id,da_elaborare_id:e.da_elaborare_id,cartella:[...Qo(a)],nome:et(a,o,e.export_nome),anche_da:[...t]}}a($t,"scartoDi");function Ft(e,o){let t=e.elaborazione_precedente;return {esito:"gia-elaborato",acronimo:e.acronimo,export_nome:e.export_nome,anno:e.anno,mese:e.mese,cartella_mese:z(f(e.acronimo),e.anno,e.mese).join("/"),precedente:t===null?null:{nome:t.nome,file_id:t.file_id},scarto:$t(e,o)}}a(Ft,"esitoGiaElaborato");function C(e,o,t){if(e===null||typeof e!="object")return null;let a=e[o];return t(a)?a:null}a(C,"campo");var I=a(e=>typeof e=="string","eTesto"),Ce=a(e=>typeof e=="number","eNumero");function Ut(e){let o=e!==null&&typeof e=="object"?e.altre_societa:void 0,t=L.array(We).safeParse(o);return t.success?t.data.filter(a=>M.some(n=>n.acronimo===a.acronimo)):[]}a(Ut,"altreSocietaDi");function Qi(e,o){let t=C(e,"acronimo",I),a=C(e,"export_file_id",I),n=C(e,"da_elaborare_id",I),s=C(e,"export_nome",I);if(t===null||a===null||n===null||s===null||!M.some(c=>c.acronimo===t))return null;let l=C(e,"cartella_mese_id",I);return $t({acronimo:t,export_file_id:a,da_elaborare_id:n,export_nome:s},o,[...Ut(e).map(c=>c.da_elaborare_id),...l===null?[]:[l]])}a(Qi,"scartoDelRecord");function Bt(e,o){let t=e.raw,a=e.error instanceof c?e.error.context:{};return {esito:"errore",acronimo:C(t,"acronimo",I),export_nome:C(t,"export_nome",I),anno:C(t,"anno",Ce),mese:C(t,"mese",Ce),nodo:a.nodeId??a.stage??null,motivo:ao(e).esito,altre_societa:Ut(t).map(n=>n.acronimo),scarto:Qi(t,o)}}a(Bt,"esitoScartato");var ea=["gennaio","febbraio","marzo","aprile","maggio","giugno","luglio","agosto","settembre","ottobre","novembre","dicembre"];function H(e,o){return `${ea[o-1]??String(o)} ${e}`}a(H,"meseEsteso");var oa=new Intl.NumberFormat("it-IT",{minimumFractionDigits:2,maximumFractionDigits:2});function J(e){return `${oa.format(e)} \u20AC`}a(J,"euro");var ta=new Intl.NumberFormat("it-IT",{maximumFractionDigits:0});function so(e){return `${ta.format(e)} \u20AC`}a(so,"euroInteri");function ra(e){let o=`Bilanci ${e.acronimo} ${H(e.anno,e.mese)}`;return e.esito==="attenzione"?`[ATTENZIONE] ${o}: sbilancio alla fonte`:`[OK] ${o}: foglio \xAB${e.foglio_mese}\xBB`}a(ra,"oggettoElaborato");function ia(e){if(e===void 0)return [];let o=e.origine==="fornito"?"fornito":e.fogli.length===0?"inizio dell'anno":`calcolato dai fogli ${e.fogli.join(", ")} del File Riclassificazioni`;return [{tipo:"righe",titolo:"Controllo di periodo",righe:[m("Risultato del mese",so(e.risultato_mese)),m("Progressivo dei mesi precedenti",`${J(e.progressivo_precedente)} (${o})`),m("Progressivo a fine mese",J(e.progressivo_fine_mese))]}]}a(ia,"bloccoControlloPeriodo");function lo(e,o){return kt(e.nome,`${o}/files/${e.file_id}`)}a(lo,"fileNoeva");function aa(e,o){let{grezzo:t,arrotondato:a}=e.totali;return [{tipo:"paragrafo",testo:e.esito==="attenzione"?"L'export \xE8 stato elaborato e i file sono nel workspace, ma Dare e Avere dell'export non tornano gi\xE0 alla fonte: NetSuite rifiuter\xE0 il CSV finch\xE9 l'export Datasmart non viene corretto.":"L'export \xE8 stato elaborato: i file sono nel workspace."},{tipo:"righe",titolo:null,righe:[m("Societ\xE0",e.acronimo),m("Mese",H(e.anno,e.mese)),m("Foglio-mese",e.foglio_mese)]},{tipo:"righe",titolo:"Quadratura",righe:[m("Dare",`${J(t.dare)} (nel CSV ${so(a.dare)})`),m("Avere",`${J(t.avere)} (nel CSV ${so(a.avere)})`),m("Sbilancio alla fonte",J(e.sbilancio_fonte))]},...ia(e.controllo_periodo),e.avvisi.length===0?{tipo:"righe",titolo:null,righe:[m("Avvisi","nessuno")]}:{tipo:"elenco",titolo:"Avvisi",voci:e.avvisi},{tipo:"righe",titolo:"File",righe:[m("Cartella del mese",e.cartella_mese),lo(e.csv,o),lo(e.report,o),m("Export archiviato come",e.export_nome_finale)]}]}a(aa,"corpoElaborato");function Wt(e){return e.acronimo===null?null:[e.acronimo,...e.altre_societa].join(", ")}a(Wt,"societaDelloScarto");function na(e){let o=e.anno!==null&&e.mese!==null?` ${H(e.anno,e.mese)}`:"",t=e.acronimo!==null?` ${Wt(e)}`:"",a=e.export_nome??"export";return `[ERRORE] Bilanci${t}${o}: ${a} non elaborato`}a(na,"oggettoScartato");function sa(e){return `[ATTENZIONE] Bilanci ${e.acronimo} ${H(e.anno,e.mese)}: export gi\xE0 elaborato`}a(sa,"oggettoGiaElaborato");function co(e){return `esce dalla coda: viene spostato nella cartella \xAB${e.cartella.join("/")}\xBB, con il nome \xAB${e.nome}\xBB. Se lo spostamento non riesce, resta in \xAB${u}\xBB e la run successiva manda un'altra mail`}a(co,"doveVa");function la(e,o){return [{tipo:"paragrafo",testo:"L'export ha lo stesso contenuto di uno gi\xE0 elaborato per questo mese: la run non ha scritto niente, e l'elaborazione precedente resta valida."},{tipo:"paragrafo",testo:`L'export ${co(e.scarto)}. Se era stato caricato per sbaglio non serve altro. Un export corretto dello stesso mese si carica in \xAB${u}\xBB e diventa una revisione.`},{tipo:"righe",titolo:null,righe:[m("Societ\xE0",e.acronimo),m("Mese",H(e.anno,e.mese)),m("Export",e.export_nome)]},{tipo:"righe",titolo:"Elaborazione precedente",righe:[m("Cartella del mese",e.cartella_mese),...e.precedente===null?[]:[lo(e.precedente,o)]]}]}a(la,"corpoGiaElaborato");function Se(e,o){return o===null?[]:[m(e,o)]}a(Se,"campoSeC");function ca(e){return e.map(o=>`\xAB${f(o).nomeCartella}/${u}\xBB`).join(", ")}a(ca,"codeDelleAltre");function pa(e,o){return [`L'export non \xE8 stato elaborato ed ${co(e)}. Viene tolto anche da ${ca(o)}. Gli export caricati dopo non lo aspettano.`,"Non va rimesso in coda cos\xEC com'\xE8: si ricarica l'export di ogni Societ\xE0 coinvolta nella sua cartella, un file per Societ\xE0 con nomi distinti."]}a(pa,"doveStaLoScartatoInPiuSocieta");function da(e,o){return e!==null&&o.length>0?pa(e,o):e===null?[`L'export non \xE8 stato elaborato ed \xE8 ancora nella cartella \xAB${u}\xBB: la run successiva lo riprende. Corretto il problema, si rilancia la run.`]:[`L'export non \xE8 stato elaborato ed ${co(e)}. Gli export caricati dopo non lo aspettano.`,`Corretto il problema, va rimesso in \xAB${u}\xBB, anche con questo nome, e la run successiva lo elabora. Se era sbagliato l'export, si carica in \xAB${u}\xBB quello corretto.`]}a(da,"doveStaLoScartato");function ma(e){return [...da(e.scarto,e.altre_societa).map(o=>({tipo:"paragrafo",testo:o})),{tipo:"righe",titolo:null,righe:[...Se("Societ\xE0",Wt(e)),...Se("Export",e.export_nome),...Se("Mese",e.anno!==null&&e.mese!==null?H(e.anno,e.mese):null)]},{tipo:"righe",titolo:"Errore",righe:[...Se("Nodo",e.nodo),m("Motivo",e.motivo)]}]}a(ma,"corpoScartato");function jt(e){switch(e.esito){case "errore":return na(e);case "gia-elaborato":return sa(e);default:return ra(e)}}a(jt,"oggettoEsito");function ua(e,o){switch(e.esito){case "errore":return ma(e);case "gia-elaborato":return la(e,o);default:return aa(e,o)}}a(ua,"corpoEsito");function ga(e,o){let t=jt(e),a=ua(e,o.appUrl);return {a:[...o.destinatari],oggetto:t,testo:At(a),html:Pt({esito:fa[e.esito],titolo:t.replace(/^\[[A-Z]+\]\s*/,"")},a)}}a(ga,"mailEsito");var fa={ok:"OK",attenzione:"ATTENZIONE","gia-elaborato":"ATTENZIONE",errore:"ERRORE"};function Gt(e,o){return a$2(e,{name:"mail-esito",...o.instanceId!==void 0?{instanceId:o.instanceId}:{},mail:a(t=>ga(t,o),"mail"),merge:a(t=>t,"merge")})}a(Gt,"mailEsitoAction");function va(e){let o=w.safeParse(e);return o.success?o.data:null}a(va,"esitoDi");function ya(e){let o=e.raw,t=va(o),a=t?.anno??C(o,"anno",Ce),n=t?.mese??C(o,"mese",Ce);return {societa:t?.acronimo??C(o,"acronimo",I),periodo:a!==null&&n!==null?`${a}-${String(n).padStart(2,"0")}`:null,oggetto:t===null?null:jt(t),errore:J$1(e.error).join(" \u2190 ")}}a(ya,"rigaMailNonInviata");function Vt(e="mail-non-inviate"){let o=new WeakMap;return {name:e,descriptor:{kind:"report",details:[{label:"tiene",value:"una riga per mail non inviata"}]},async load(t,a){let n=[];for await(let s of t){let l=ya(s);a.logger.error("canossa-bilanci.mail-non-inviata",l),n.push(l);}return o.set(a,[...o.get(a)??[],...n]),{written:n.length}},writeReport(t){let a=o.get(t)??[];return a.length===0?{name:e}:{name:e,mail:a}}}}a(Vt,"mailNonInviateSink");var qt=L.object({esito:L.enum(["errore","gia-elaborato"]),acronimo:L.string().nullable(),export_nome:L.string().nullable(),cartella:L.string(),nome:L.string()});function Kt(e){return e.esito==="errore"||e.esito==="gia-elaborato"}a(Kt,"daScartare");function Ht(e,o="sposta-negli-scartati"){return {name:o,descriptor:{kind:"noeva-move",details:[...f$1(e),{label:"da",value:`<Societ\xE0> Report Mensile/${u}`},{label:"a",value:`<Societ\xE0> Report Mensile/${u}/${Ue}`},{label:"anche da",value:`<Societ\xE0> Report Mensile/<anno>/<MM>, se l'archiviazione si \xE8 fermata a met\xE0; <altra Societ\xE0> Report Mensile/${u}, se lo stesso file stava anche l\xEC`},{label:"nome",value:"<ACRONIMO>_Scartato <AAAA-MM-GG> <hh.mm.ss> <nome originale>"}]},async run(t,a){if(a.signal.throwIfAborted(),t.esito!=="errore"&&t.esito!=="gia-elaborato")throw new k$1(`Un export con esito \xAB${t.esito}\xBB non va negli Scartati`,{stage:o});let{scarto:n}=t;if(n===null)throw new k$1(`L'export scartato non dice quale file \xE8 n\xE9 da quale cartella viene: resta in \xAB${u}\xBB`,{stage:o});let s=await e.ensureFolderPath(n.cartella);await e.renameFile(n.export_file_id,n.nome);for(let l of n.anche_da)await e.moveFile({fileId:n.export_file_id,fromFolderId:l,toFolderId:s});return await e.moveFile({fileId:n.export_file_id,fromFolderId:n.da_elaborare_id,toFolderId:s}),{esito:t.esito,acronimo:t.acronimo,export_nome:t.export_nome,cartella:n.cartella.join("/"),nome:n.nome}}}}a(Ht,"spostaNegliScartatiAction");function Zt(e,o,t,a){let n=new WeakMap;return {name:e,descriptor:{kind:"report",details:[{label:"tiene",value:o}]},async load(s,l){let c=[];for await(let p of s){let y=t(p);a(y,l),c.push(y);}return n.set(l,[...n.get(l)??[],...c]),{written:0}},writeReport(s){let l=n.get(s)??[];return l.length===0?{name:e}:{name:e,export:l}}}}a(Zt,"registro");function Yt(e="negli-scartati"){return Zt(e,"una riga per export uscito dalla coda",o=>({societa:o.acronimo,export:o.export_nome,motivo:o.esito,spostato_in:`${o.cartella}/${o.nome}`}),(o,t)=>{t.logger.info("canossa-bilanci.negli-scartati",o);})}a(Yt,"negliScartatiSink");function Jt(e="scarti-non-spostati"){return Zt(e,"una riga per export rimasto in coda",o=>{let t=w.safeParse(o.raw),a=t.success?t.data:null;return {societa:a?.acronimo??null,export:a!==null&&"export_nome"in a?a.export_nome:null,errore:J$1(o.error).join(" \u2190 ")}},(o,t)=>{t.logger.error("canossa-bilanci.scarto-non-spostato",o);})}a(Jt,"scartiNonSpostatiSink");function po(e,o,t=()=>new Date){return {exportInAttesa:lt(e),leggiPeriodo:o(St),exportDelMese:pt(e),workbook:gt(e),elabora:o(Ct),caricaReport:ht(e),caricaWorkbook:xt(e),archiviaExport:_t(e),adesso:t,spostaNegliScartati:Ht(e)}}a(po,"connettoriCanossa");var X="verifica-societa";function Xt(e){if(e.altre_societa.length===0)return e;let o=[e.acronimo,...e.altre_societa.map(t=>t.acronimo)];throw new d$1(`L'export \xAB${e.export_nome}\xBB sta nella cartella \xAB${u}\xBB di pi\xF9 Societ\xE0 (${o.join(", ")}): su Noeva il nome di un file \xE8 unico nel workspace, e un export caricato con lo stesso nome in un'altra Societ\xE0, con \xABCrea nuova versione\xBB o \xABSovrascrivi file esistente\xBB, ne diventa lo stesso file, di cui non si sa la Societ\xE0. Va ricaricato l'export di ogni Societ\xE0 coinvolta, un file per Societ\xE0 con nomi distinti, scegliendo \xABCrea una copia\xBB se il nome \xE8 gi\xE0 usato, mai \xABCrea nuova versione\xBB n\xE9 \xABSovrascrivi file esistente\xBB.`,{stage:X,details:{fileId:e.export_file_id,societa:o}})}a(Xt,"verificaUnaSocieta");var xe="canossa-bilanci";function Q(e){return e.writeReport!==void 0?{writeReport:e.writeReport}:{}}a(Q,"reportDi");function mo(e){return Fb(xe).source("export-in-attesa",e.exportInAttesa,{purpose:"Cerca nelle cartelle \xABDa elaborare\xBB delle sette Societ\xE0 l'Export Datasmart in attesa da pi\xF9 tempo e lavora solo quello: gli altri aspettano le run successive. La Societ\xE0 \xE8 quella della cartella in cui l'operatore l'ha caricato; se lo stesso file sta nella cartella di pi\xF9 Societ\xE0, le porta tutte, perch\xE9 il controllo dopo lo scarti."}).tryCatch("export-in-attesa","guard",{mode:"per-record",purpose:"Protegge l'elaborazione dell'export: se un passo fallisce, l'export si ferma l\xEC, non arriva alla cartella del mese e passa agli scarti, che lo segnalano con una mail di errore; dopo la mail esce dalla coda, negli Scartati."}).transform("guard",X,S$1(X,Xt,{outputSchema:q}),{purpose:"Controlla che l'export stia nella \xABDa elaborare\xBB di una Societ\xE0 sola. Caricato con lo stesso nome in un'altra Societ\xE0, con \xABCrea nuova versione\xBB o \xABSovrascrivi\xBB, su Noeva diventa lo stesso file in tutte e due, di Societ\xE0 incerta: si ferma prima dello script, con una mail di errore che nomina tutte le Societ\xE0 e chiede un file per Societ\xE0, ed esce da tutte le code."}).transform(X,K,S$1(K,st,{outputSchema:q}),{purpose:"Controlla che l'export sia stato caricato una volta sola. Datasmart d\xE0 sempre lo stesso nome al file, e un secondo caricamento su Noeva diventa una versione dello stesso file, che nasconde la prima, oppure, con \xABSovrascrivi\xBB, la cancella: un export cos\xEC si ferma prima dello script, con una mail di errore che chiede di ricaricare un mese per file."}).action(K,"leggi-periodo",e.leggiPeriodo,{outputSchema:je,purpose:"Chiede allo script dei bilanci l'anno e il mese dell'export, letti dal contenuto e non dal nome del file. Servono a scegliere il File Riclassificazioni giusto."}).lookup("leggi-periodo","export-del-mese",{resolver:e.exportDelMese,key:ct,merge:dt,batchSize:1,cache:false,outputSchema:Ve},{purpose:"Confronta il contenuto dell'export con quello degli export gi\xE0 elaborati per lo stesso mese della Societ\xE0, qualunque nome abbiano. Un export identico a uno gi\xE0 elaborato non va rifatto: rielaborarlo produrrebbe una revisione fasulla."}).route("export-del-mese","smista-export",{routes:{"gia-elaborato":mt}},{purpose:"Separa gli export gi\xE0 elaborati da quelli da elaborare. Per un export gi\xE0 elaborato la run non scrive niente: dopo la mail esce dalla coda e va negli Scartati."}).sink("smista-export",e.giaElaborati,{fromPort:"gia-elaborato",...Q(e.giaElaborati),purpose:"Elenca nel report della run gli export gi\xE0 elaborati, ognuno con il file in cui sta l'elaborazione precedente."}).transform("smista-export","esito-gia-elaborato",{...S$1("esito-gia-elaborato",o=>Ft(o,e.adesso()),{outputSchema:w}),columns:he},{fromPort:"gia-elaborato",purpose:"Riassume l'export gi\xE0 elaborato per la mail: la Societ\xE0, il mese, dove sta l'elaborazione precedente e con che nome l'export va negli Scartati."}).lookup("smista-export","workbook-anno",{resolver:e.workbook,key:ut,merge:ft,batchSize:1,cache:false,outputSchema:Ke},{fromPort:"default",purpose:"Scarica il File Riclassificazioni dell'anno della Societ\xE0; se manca o ce n'\xE8 pi\xF9 d'uno l'export va negli Scartati (quello di un anno nuovo lo prepara l'operatore). Se una run interrotta aveva gi\xE0 aggiunto il foglio di questo export, riparte dalla versione precedente, cos\xEC il rilancio non crea una Rev. in pi\xF9."}).action("workbook-anno","elabora",e.elabora,{outputSchema:He,purpose:"Lancia lo script dei bilanci sull'export e sul File Riclassificazioni: aggiunge il foglio del mese e produce il CSV da caricare su NetSuite e il report. Se lo script fallisce, o il suo esito non \xE8 della Societ\xE0 e del mese dell'export, non si carica niente e l'export va negli Scartati."}).action("elabora","carica-report",e.caricaReport,{outputSchema:Ze,purpose:"Mette il CSV per NetSuite e il report nella cartella del mese della Societ\xE0, creandola se manca. Se una run interrotta li aveva gi\xE0 caricati, li sostituisce: \xE8 lo stesso mese con la stessa revisione."}).action("carica-report","carica-workbook",e.caricaWorkbook,{outputSchema:Ye,purpose:"Carica il File Riclassificazioni aggiornato come nuova versione dello stesso file nella cartella dell'anno: le versioni precedenti restano consultabili su Noeva. La versione ricorda quale export l'ha prodotta; se una run interrotta l'aveva gi\xE0 caricata, non se ne aggiunge un'altra."}).action("carica-workbook","archivia-export",e.archiviaExport,{outputSchema:nt,purpose:"Rinomina l'export col nome della Societ\xE0 e del mese e lo sposta nella cartella del mese, accanto al CSV. \xC8 l'ultima scrittura perch\xE9 fa dell'export un export elaborato: se prima qualcosa va storto, l'export non \xE8 elaborato e va negli Scartati, da cui l'operatore lo rimette in coda. Se nel frattempo \xE8 stato ricaricato con lo stesso nome non lo archivia, e va negli Scartati anche lui."}).sink("archivia-export",e.elaborati,{...Q(e.elaborati),purpose:"Elenca nel report della run l'export elaborato, con il foglio del mese generato e gli avvisi dello script."}).union("da-notificare",{from:["archivia-export","esito-gia-elaborato"]},{purpose:"Porta alla mail l'export appena elaborato o quello trovato gi\xE0 elaborato, cos\xEC in entrambi i casi parte una mail; se l'invio non riesce, i file restano come sono."}).tryCatch("da-notificare","guard-mail",{mode:"per-record",purpose:"Protegge l'invio della mail: se la mail non parte, i file restano dove sono e la run dice che la mail non \xE8 partita."}).transform("guard-mail","esito-da-notificare",{...S$1("esito-da-notificare",zt,{outputSchema:w}),columns:he},{purpose:"Prepara la mail dell'export: per uno elaborato Societ\xE0, mese, foglio generato, quadratura, avvisi e dove sono i file, e segna come da guardare uno sbilancio alla fonte, che NetSuite rifiuter\xE0."}).transform("guard","scartati",S$1("scartati",o=>o),{fromPort:"catch",purpose:"Raccoglie l'export fermato da un errore, con il passo in cui si \xE8 fermato e il perch\xE9, per il log degli scarti e per la mail di errore."}).sink("scartati",e.scarti,{purpose:"Scrive nel log gli export che non si sono potuti elaborare, con il motivo. Dopo la mail vanno negli Scartati: si corregge e si rimettono in \xABDa elaborare\xBB; un file che stava nella coda di pi\xF9 Societ\xE0 si ricarica invece un file per Societ\xE0."}).transform("scartati","esito-scartato",{...S$1("esito-scartato",o=>Bt(o,e.adesso()),{outputSchema:w}),columns:he},{purpose:"Riassume l'export scartato per la mail: la Societ\xE0, il passo in cui si \xE8 fermato, il motivo e con che nome va negli Scartati."}).union("esiti",{from:["esito-da-notificare","esito-scartato"]},{purpose:"Riunisce l'esito dell'export, elaborato, gi\xE0 elaborato o scartato, perch\xE9 parta una mail in ogni caso."}).action("esiti","mail-esito",e.mailEsito,{outputSchema:w,purpose:"Manda all'operatore la mail con l'esito: [OK], [ATTENZIONE] se NetSuite rifiuter\xE0 il CSV per uno sbilancio alla fonte o se l'export era gi\xE0 elaborato, [ERRORE] se non si \xE8 potuto elaborare. Per questi ultimi due dice dove va l'export. Una run senza export non manda niente."}).transform("mail-esito","da-scartare",U("da-scartare",Kt),{purpose:"Tiene, fra gli export di cui \xE8 partita la mail, quelli scartati o gi\xE0 elaborati: sono loro a dover uscire dalla coda."}).tryCatch("da-scartare","guard-scartati",{mode:"per-record",purpose:"Protegge lo spostamento negli Scartati: se non riesce, l'export resta in \xABDa elaborare\xBB, la mail \xE8 gi\xE0 partita e la run dice che lo spostamento \xE8 fallito."}).action("guard-scartati","sposta-negli-scartati",e.spostaNegliScartati,{outputSchema:qt,purpose:"Toglie dalla coda l'export scartato o gi\xE0 elaborato: lo rinomina con la Societ\xE0, la data e l'ora dello scarto e il nome originale, e lo sposta nella cartella Scartati dentro \xABDa elaborare\xBB, creandola se manca; se lo stesso file stava anche nella coda di altre Societ\xE0, lo toglie anche da l\xEC. Cos\xEC gli export caricati dopo, anche di altre Societ\xE0, non lo aspettano."}).sink("sposta-negli-scartati",e.negliScartati,{...Q(e.negliScartati),purpose:"Elenca nel report della run gli export usciti dalla coda, con il nome che hanno adesso negli Scartati."}).sink("guard-scartati",e.scartiNonSpostati,{fromPort:"catch",...Q(e.scartiNonSpostati),purpose:"Elenca nel report gli export che non sono riusciti ad andare negli Scartati, con il motivo: sono ancora in \xABDa elaborare\xBB, e la run successiva li riprende e rimanda la mail."}).sink("guard-mail",e.mailNonInviate,{fromPort:"catch",...Q(e.mailNonInviate),purpose:"Elenca nel report le mail di esito che non sono partite, con il motivo: l'esito va letto dalla run."}).build()}a(mo,"buildCanossaBilanciPipeline");var ba="Elabora un Export Datasmart di una Societ\xE0 di Canossa Events con lo script dei bilanci: CSV per NetSuite e report nella cartella del mese, File Riclassificazioni come nuova versione, export archiviato, mail con l'esito; un export scartato o gi\xE0 elaborato esce dalla coda, negli Scartati.",Qt={eseguibile:"PYTHON",timeout:"TIMEOUT_MS"},Sa={workspace:"WORKSPACE_ID"},Ca=["exportInAttesa","exportDelMese","workbook","caricaReport","caricaWorkbook","archiviaExport","spostaNegliScartati"];function ha(e,o){let t=o.workspaceId===void 0?{}:Object.fromEntries(Ca.map(a=>[a,J$2(e[a],o,Sa)]));return {...e,...t,leggiPeriodo:J$2(e.leggiPeriodo,o,Qt),elabora:J$2(e.elabora,o,Qt)}}a(ha,"annotati");function xa(e,o){return new e$2(o.workspaceId===void 0?e:{...e,workspaceId:o.workspaceId})}a(xa,"clientDelPiano");function er(e,o){return {elaborati:Lt(),giaElaborati:Ot(),scarti:Dt(),mailEsito:Gt({tipo:"sendgrid",config:e},{...o.mail,instanceId:o.sendgridInstance}),mailNonInviate:Vt(),negliScartati:Yt(),scartiNonSpostati:Jt()}}a(er,"sinkTerminali");var or={name:xe,description:ba,changelog:jo,getSpec(){let e=process.env,{config:o,noeva:t,sendgrid:a}=H$1({config:Yo(e),noeva:e$3(e),sendgrid:h$1(ue(e),e)}),n=po(xa(t,o),oo(o.script,s=>s));return K$1(mo({...ha(n,o),...er(a,o)}).getSpec(),o)},async run(e){let o=process.env,{config:t,workspaces:a$1,sendgrid:n}=I$2({config:a(()=>Y(o),"config"),workspaces:a(()=>d$2(o),"workspaces"),sendgrid:a(()=>f$3(o).get(ue(o)),"sendgrid")}),s=x(a$1),l=t.workspaceId??s.workspaceIds[0];if(l===void 0)throw new g("Nessun workspace Noeva risolto",{stage:xe});await Ko(eo(t.script.cartella));let c=po(s.client(l),oo(t.script));return mo({...c,...er(n,t)}).run(e)}};function uo(e){return {name:e,descriptor:{kind:"report",details:[{label:"report",value:"record andati in errore (conteggio)"}]},async load(o,t){let a=0;for await(let n of o)a+=1;return t.logger.info("crm-leads-sync.error-report",{erroredRecords:a}),{written:a}}}}a(uo,"errorCountReportSink");var tr=L.object({id:L.string().uuid(),workspace_id:L.string().uuid(),name:L.string(),email:L.string().nullable(),phone:L.string().nullable(),company:L.string().nullable(),status:L.string(),source:L.string().nullable(),notes:L.string().nullable(),assigned_to:L.string().uuid().nullable(),estimated_value:L.string().nullable(),created_by:L.string().uuid(),created_at:L.date(),updated_at:L.date(),company_id:L.string().uuid().nullable(),social_profiles:L.string()}),rr=["id","workspace_id","name","email","phone","company","status","source","notes","assigned_to","estimated_value","created_by","created_at","updated_at","company_id","social_profiles"],ir=[{id:"id",name:"id",dataType:"uuid",isKey:true},{id:"workspace_id",name:"workspace_id",dataType:"uuid",isKey:false},{id:"name",name:"name",dataType:"text",isKey:false},{id:"email",name:"email",dataType:"text",isKey:false},{id:"phone",name:"phone",dataType:"text",isKey:false},{id:"company",name:"company",dataType:"text",isKey:false},{id:"status",name:"status",dataType:"text",isKey:false},{id:"source",name:"source",dataType:"text",isKey:false},{id:"notes",name:"notes",dataType:"text",isKey:false},{id:"assigned_to",name:"assigned_to",dataType:"uuid",isKey:false},{id:"estimated_value",name:"estimated_value",dataType:"numeric",isKey:false},{id:"created_by",name:"created_by",dataType:"uuid",isKey:false},{id:"created_at",name:"created_at",dataType:"timestamptz",isKey:false},{id:"updated_at",name:"updated_at",dataType:"timestamptz",isKey:false},{id:"company_id",name:"company_id",dataType:"uuid",isKey:false},{id:"social_profiles",name:"social_profiles",dataType:"jsonb",isKey:false}];var _e="crm-leads-sync";function go(e,o,t){return Fb(_e).source("crm_leads",e,{purpose:"Legge dal database di origine un primo gruppo di lead del CRM, sempre gli stessi a ogni run. La copia \xE8 una prova del passaggio di dati fra due database, non un trasferimento completo."}).tryCatch("crm_leads","guard",{purpose:"Protegge la copia lead per lead: un lead che non si riesce a controllare o a salvare finisce fra gli errori, e la run prosegue con gli altri."}).transform("guard","validate",V$1("crm-lead-contract",tr),{purpose:"Controlla che ogni lead sia completo e coerente prima di copiarlo. Un lead che non passa il controllo finisce fra gli errori invece di arrivare a destinazione, dove entrano solo lead utilizzabili."}).sink("validate",o,{purpose:"Salva i lead nell'area d'appoggio del database di destinazione, aggiornando quelli gi\xE0 copiati invece di duplicarli. L'area d'appoggio non \xE8 collegata agli altri dati dell'applicazione, cos\xEC la copia non li altera."}).sink("guard",t,{fromPort:"catch",purpose:"Conta i lead che non \xE8 stato possibile copiare e ne riporta il numero nel report, senza salvarli. Dice a colpo d'occhio se la copia \xE8 stata completa."}).build()}a(go,"buildCrmLeadsSyncPipeline");var ar=[{version:1,date:"2026-10-05",tickets:["ETL-120"],added:["Versione iniziale sotto versionamento (ADR-0086)"],changed:[],removed:[]},{version:2,date:"2026-10-06",tickets:["ETL-153"],added:["Host, porta e database delle istanze `source` e `sink`, ognuno con variabile e origine (ADR-0089)","Riga `credenziale` con lo stato della password, mai il valore","L'istanza del registry sta in `connection`, come negli altri connettori"],changed:["Il piano ricade sulla configurazione d'esempio per istanza: un sink incompleto non nasconde il source"],removed:["Il dettaglio `instance`, sostituito da `connection`"]},{version:3,date:"2026-10-09",tickets:["ETL-193","ETL-195"],added:[],changed:["Nessun cambio di comportamento: il piano \xE8 identico alla v2. Gli import seguono l'infrastruttura (changelog, configurazione delle istanze, report di volume) uscita da `src/pipelines/` (ADR-0093 \xA71), e la pipeline si dichiara nel catalogo di `etl.config.ts` invece che in un registro (ADR-0093 \xA72)"],removed:[]}];var ee="source",oe="sink",fo="public.crm_leads_import",nr=100,_a=`
|
|
1
|
+
import {e as e$1,d as d$1,l,m,b as b$2,g}from'./chunk-DPWGI266.js';import'./chunk-UN3BPCPA.js';import {a as a$2}from'./chunk-ZBKP2UOF.js';import'./chunk-NZR6TZ42.js';import {L,b as b$1,a as a$1,h,f as f$1,i,H,I as I$2,J,K as K$1}from'./chunk-MOHJWOCB.js';import {d}from'./chunk-PGJWGJEB.js';import'./chunk-RU6CZIDB.js';import'./chunk-H75NY6Z4.js';import'./chunk-4NPSBPBY.js';import {f,t,x,u}from'./chunk-XFHTODDW.js';import {d as d$2,e as e$2}from'./chunk-HMED2UDJ.js';import'./chunk-R53642SH.js';import'./chunk-KMUNED7K.js';import {W as W$1,N,P,Q}from'./chunk-BFW7HTF6.js';import {a,M as M$1,L as L$1,Hb,I as I$1,Fb,V as V$1,e,S as S$1,U as U$1}from'./chunk-PE2QKU34.js';function T(e){return {name:e,descriptor:{kind:"report",details:[{label:"report",value:"record andati in errore (conteggio)"}]},async load(i,r){let n=0;for await(let a of i)n+=1;return r.logger.info("crm-leads-sync.error-report",{erroredRecords:n}),{written:n}}}}a(T,"errorCountReportSink");var me=L.object({id:L.string().uuid(),workspace_id:L.string().uuid(),name:L.string(),email:L.string().nullable(),phone:L.string().nullable(),company:L.string().nullable(),status:L.string(),source:L.string().nullable(),notes:L.string().nullable(),assigned_to:L.string().uuid().nullable(),estimated_value:L.string().nullable(),created_by:L.string().uuid(),created_at:L.date(),updated_at:L.date(),company_id:L.string().uuid().nullable(),social_profiles:L.string()}),ue=["id","workspace_id","name","email","phone","company","status","source","notes","assigned_to","estimated_value","created_by","created_at","updated_at","company_id","social_profiles"],ge=[{id:"id",name:"id",dataType:"uuid",isKey:true},{id:"workspace_id",name:"workspace_id",dataType:"uuid",isKey:false},{id:"name",name:"name",dataType:"text",isKey:false},{id:"email",name:"email",dataType:"text",isKey:false},{id:"phone",name:"phone",dataType:"text",isKey:false},{id:"company",name:"company",dataType:"text",isKey:false},{id:"status",name:"status",dataType:"text",isKey:false},{id:"source",name:"source",dataType:"text",isKey:false},{id:"notes",name:"notes",dataType:"text",isKey:false},{id:"assigned_to",name:"assigned_to",dataType:"uuid",isKey:false},{id:"estimated_value",name:"estimated_value",dataType:"numeric",isKey:false},{id:"created_by",name:"created_by",dataType:"uuid",isKey:false},{id:"created_at",name:"created_at",dataType:"timestamptz",isKey:false},{id:"updated_at",name:"updated_at",dataType:"timestamptz",isKey:false},{id:"company_id",name:"company_id",dataType:"uuid",isKey:false},{id:"social_profiles",name:"social_profiles",dataType:"jsonb",isKey:false}];var _="crm-leads-sync";function I(e,i,r){return Fb(_).source("crm_leads",e,{purpose:"Legge dal database di origine un primo gruppo di lead del CRM, sempre gli stessi a ogni run. La copia \xE8 una prova del passaggio di dati fra due database, non un trasferimento completo."}).tryCatch("crm_leads","guard",{purpose:"Protegge la copia lead per lead: un lead che non si riesce a controllare o a salvare finisce fra gli errori, e la run prosegue con gli altri."}).transform("guard","validate",V$1("crm-lead-contract",me),{purpose:"Controlla che ogni lead sia completo e coerente prima di copiarlo. Un lead che non passa il controllo finisce fra gli errori invece di arrivare a destinazione, dove entrano solo lead utilizzabili."}).sink("validate",i,{purpose:"Salva i lead nell'area d'appoggio del database di destinazione, aggiornando quelli gi\xE0 copiati invece di duplicarli. L'area d'appoggio non \xE8 collegata agli altri dati dell'applicazione, cos\xEC la copia non li altera."}).sink("guard",r,{fromPort:"catch",purpose:"Conta i lead che non \xE8 stato possibile copiare e ne riporta il numero nel report, senza salvarli. Dice a colpo d'occhio se la copia \xE8 stata completa."}).build()}a(I,"buildCrmLeadsSyncPipeline");var fe=[{version:1,date:"2026-10-05",tickets:["ETL-120"],added:["Versione iniziale sotto versionamento (ADR-0086)"],changed:[],removed:[]},{version:2,date:"2026-10-06",tickets:["ETL-153"],added:["Host, porta e database delle istanze `source` e `sink`, ognuno con variabile e origine (ADR-0089)","Riga `credenziale` con lo stato della password, mai il valore","L'istanza del registry sta in `connection`, come negli altri connettori"],changed:["Il piano ricade sulla configurazione d'esempio per istanza: un sink incompleto non nasconde il source"],removed:["Il dettaglio `instance`, sostituito da `connection`"]},{version:3,date:"2026-10-09",tickets:["ETL-193","ETL-195"],added:[],changed:["Nessun cambio di comportamento: il piano \xE8 identico alla v2. Gli import seguono l'infrastruttura (changelog, configurazione delle istanze, report di volume) uscita da `src/pipelines/` (ADR-0093 \xA71), e la pipeline si dichiara nel catalogo di `etl.config.ts` invece che in un registro (ADR-0093 \xA72)"],removed:[]}];var C="source",S="sink",M="public.crm_leads_import",ye=100,Qe=`
|
|
10
2
|
SELECT
|
|
11
3
|
id::text AS id,
|
|
12
4
|
workspace_id::text AS workspace_id,
|
|
@@ -26,9 +18,9 @@ import {e as e$4,d as d$3,l as l$1,m as m$1,b as b$3,g as g$1}from'./chunk-DPWGI
|
|
|
26
18
|
social_profiles::text AS social_profiles
|
|
27
19
|
FROM public.crm_leads
|
|
28
20
|
ORDER BY id
|
|
29
|
-
LIMIT ${
|
|
30
|
-
`,
|
|
31
|
-
CREATE TABLE IF NOT EXISTS ${
|
|
21
|
+
LIMIT ${ye}
|
|
22
|
+
`,er=`
|
|
23
|
+
CREATE TABLE IF NOT EXISTS ${M} (
|
|
32
24
|
id uuid PRIMARY KEY,
|
|
33
25
|
workspace_id uuid NOT NULL,
|
|
34
26
|
name text NOT NULL,
|
|
@@ -46,6 +38,6 @@ import {e as e$4,d as d$3,l as l$1,m as m$1,b as b$3,g as g$1}from'./chunk-DPWGI
|
|
|
46
38
|
company_id uuid,
|
|
47
39
|
social_profiles jsonb NOT NULL
|
|
48
40
|
)
|
|
49
|
-
`;function Ra(e){return {name:"crm_leads",columns:ir,descriptor:{kind:"postgres",connection:{id:ee},details:W(e,[{label:"table",value:"public.crm_leads"},{label:"limit",value:String(nr)}])},async*extract(){throw new Error("stub di sola topologia: non eseguibile")}}}a(Ra,"specSource");function ka(e){return {name:"crm_leads_import",descriptor:{kind:"postgres",connection:{id:oe},details:W(e,[{label:"table",value:fo},{label:"mode",value:"upsert(id)"}])},load(){throw new Error("stub di sola topologia: non eseguibile")}}}a(ka,"specSink");var sr={name:_e,description:"Copia le prime 100 righe di public.crm_leads (istanza 'source') nella tabella di landing crm_leads_import (istanza 'sink'), upsert idempotente su id",changelog:ar,getSpec(){let e=H$1({source:g$1(ee,process.env),sink:g$1(oe,process.env)});return go(Ra(e.source),ka(e.sink),uo("error-report")).getSpec()},environment(e){return Q$1({pipeline:_e,istanze:[b$3(ee),b$3(oe)]},e)},async run(e){let o=e$4(),t=d$3(o.get(ee)),a=d$3(o.get(oe));try{await a.query(Ea);let n=l$1({pool:t,name:"crm_leads",instanceId:ee,query:_a}),s=m$1({pool:a,name:"crm_leads_import",instanceId:oe,table:fo,columns:rr,conflictTarget:["id"]});return await go(n,s,uo("error-report")).run(e)}finally{await t.end(),await a.end();}}};var vo="NOEVA_MERGE_",wa="test-etl.csv",Aa="8793575e-7546-489e-91c9-3004918361fb",yo=[{suffisso:"FILE_NAME",default:wa},{suffisso:"SECONDARY_WORKSPACE_ID",default:Aa}];function Ee(e=process.env){let o=N(yo,vo,e);return {fileName:P(o,"FILE_NAME"),workspaceB:P(o,"SECONDARY_WORKSPACE_ID"),variabili:o.variabili}}a(Ee,"parseConfig");function lr(e){return {risolta:a(()=>Ee(e),"risolta"),esempio:a(()=>Ee(e),"esempio")}}a(lr,"configCrossWorkspacePerIlPiano");function Ia(e){return [...new Set(e.flatMap(o=>Object.keys(o)))]}a(Ia,"unionColumns");async function*Pa(e){yield*e;}a(Pa,"recordsOf");function cr(e){return {name:e,stateful:true,async*apply(o){let t=[];for await(let n of o)t.push(n);if(t.length===0)return;yield*d({columns:Ia(t)}).encode(Pa(t));}}}a(cr,"encodeCsvWithColumnUnion");function pr(e){let o=Object.keys(e).filter(t=>e[t]!=="").sort().map(t=>[t,e[t]]);return JSON.stringify(o)}a(pr,"rowKey");var dr="union-workspaces",bo="dedup-rows",Na=1e5,Re="encode-csv";function So(e,o){let t={writeReport:I$1};return Fb("cross-workspace-csv-merge").source(e.workspaceA.name,e.workspaceA,{...t,purpose:"Legge il file condiviso dal primo workspace. Se l\xEC il file non esiste ancora, il workspace non porta righe e l'unione parte lo stesso."}).source(e.workspaceB.name,e.workspaceB,{...t,purpose:"Legge lo stesso file dal secondo workspace. Se l\xEC il file non esiste ancora, il workspace non porta righe e l'unione parte lo stesso."}).union(dr,{from:[e.workspaceA.name,e.workspaceB.name],order:"concat"},{...t,purpose:"Mette in fila le righe dei due workspace, prima tutte quelle del primo e poi quelle del secondo. L'ordine fisso fa s\xEC che, a dati fermi, ogni run produca lo stesso identico file."}).transform(dr,bo,a$3(bo,{key:pr,maxKeys:Na}),{...t,purpose:"Toglie le righe ripetute, tenendo la prima copia di ognuna. Il risultato torna in tutti e due i workspace: senza questo passo il file raddoppierebbe a ogni run."}).transform(bo,Re,cr(Re),{...t,purpose:"Ricompone le righe in un unico file, con tutte le colonne presenti in almeno uno dei due workspace. Una colonna che un workspace non ha resta vuota nelle sue righe, cos\xEC nessun dato va perso."}).sink(Re,o.workspaceA,{...t,purpose:"Salva il file unito come nuova versione nel primo workspace. Se il contenuto \xE8 uguale all'ultima versione, non ne crea un'altra."}).sink(Re,o.workspaceB,{...t,purpose:"Salva il file unito come nuova versione nel secondo workspace. Se il contenuto \xE8 uguale all'ultima versione, non ne crea un'altra."}).build()}a(So,"buildCrossWorkspaceCsvMergePipeline");var mr=L.record(L.string(),L.string());var Ta=d({unmappedFields:"error",missingFields:"empty"});function Co(e,o){return {kind:"noeva-file",details:[...f$1(e),{label:"fileName",value:o}]}}a(Co,"workspaceCsvDescriptor");function ho(e$1,o,t){return {name:t.name,descriptor:Co({baseUrl:e$1.client.baseUrl,workspaceId:e$1.workspaceId,variabili:e$1.client.variabili,ricaduta:e$1.client.ricaduta},o),async*extract(a){a.signal.throwIfAborted();try{let s=(await e$1.client.searchFilesByName(o)).find(l=>l.name===o);if(s===void 0){a.logger.warn("cross-workspace-merge: file assente nel workspace",{workspaceId:e$1.workspaceId,fileName:o});return}for await(let l of Ta.decode(e$1.client.downloadBytes(s.id)))yield mr.parse(l),a.signal.throwIfAborted();}catch(n){throw a.signal.aborted?n:new e(`Lettura di "${o}" dal workspace "${e$1.workspaceId}" fallita`,{stage:t.name,details:{fileName:o}},{cause:n})}}}}a(ho,"workspaceCsvSource");var ur=[{version:1,date:"2026-10-05",tickets:["ETL-120"],added:["Versione iniziale sotto versionamento (ADR-0086)"],changed:[],removed:[]},{version:2,date:"2026-10-06",tickets:["ETL-152"],added:["Variabile e origine su ogni riga dei nodi Noeva: base URL, workspace A, file e workspace B, che col default compare con origine `default` (ADR-0089)","Riga `credenziale` sui nodi Noeva, con lo stato della chiave API e mai il valore","Configurazione della pipeline nel piano: le variabili `NOEVA_MERGE_*` con valore e origine"],changed:["Senza `.env` i nodi mostrano un client Noeva d'esempio con le variabili mancanti marcate, invece di omettere base URL e workspace A","Il workspace A \xE8 il primo che l'istanza serve: con `NOEVA_WORKSPACE_IDS` impostata, `NOEVA_WORKSPACE_ID` non conta pi\xF9"],removed:[]},{version:3,date:"2026-10-09",tickets:["ETL-193","ETL-195"],added:[],changed:["Nessun cambio di comportamento: il piano \xE8 identico alla v2. Gli import seguono l'infrastruttura (changelog, configurazione delle istanze, report di volume) uscita da `src/pipelines/` (ADR-0093 \xA71), e la pipeline si dichiara nel catalogo di `etl.config.ts` invece che in un registro (ADR-0093 \xA72)"],removed:[]}];var gr="cross-workspace-csv-merge",fr="read-workspace-a",vr="read-workspace-b",yr="workspace-a",br="workspace-b",xo="new-version",Sr={fileName:"FILE_NAME"},Cr={fileName:"FILE_NAME",workspace:"SECONDARY_WORKSPACE_ID"},La=[{id:"id",name:"id",dataType:"string",isKey:true},{id:"val",name:"val",dataType:"string",isKey:false}];function hr(e,o,t){return {name:e,columns:La,descriptor:Co(o,t),async*extract(){throw new Error("stub di sola topologia: non eseguibile")}}}a(hr,"specSource");function xr(e,o,t$1){return {name:e,descriptor:t(o,{fileName:t$1,mode:xo}),async load(){throw new Error("stub di sola topologia: non eseguibile")}}}a(xr,"specSink");var _r={name:gr,description:"Demo cross-workspace: unisce test-etl.csv da due workspace e lo riscrive (new-version) su entrambi",changelog:ur,environment(e){return Q$1({pipeline:gr,configurazione:{prefisso:vo,manifest:yo}},e)},getSpec(){let e=process.env,o=H$1({config:lr(e),noeva:e$3(e)}),{config:t}=o,a={baseUrl:o.noeva.baseUrl,workspaceId:o.noeva.workspaceId,...o.noeva.variabili!==void 0?{variabili:o.noeva.variabili}:{},...o.noeva.ricaduta!==void 0?{ricaduta:o.noeva.ricaduta}:{}},n={...a,workspaceId:t.workspaceB},s={workspaceA:J$2(hr(fr,a,t.fileName),t,Sr),workspaceB:J$2(hr(vr,n,t.fileName),t,Cr)},l={workspaceA:J$2(xr(yr,a,t.fileName),t,Sr),workspaceB:J$2(xr(br,n,t.fileName),t,Cr)};return K$1(So(s,l).getSpec(),t)},async run(e){let o=process.env,t=I$2({config:a(()=>Ee(o),"config"),workspaces:a(()=>d$2(o),"workspaces")}),a$1=t.config,n=x(t.workspaces),[s]=n.workspaceIds;if(s===void 0)throw new Error("nessun workspace Noeva risolto");let l=a$1.workspaceB,c=n.client(s),p=n.client(l),y={workspaceA:ho({workspaceId:s,client:c},a$1.fileName,{name:fr}),workspaceB:ho({workspaceId:l,client:p},a$1.fileName,{name:vr})},h={workspaceA:u$1(c,{fileName:a$1.fileName,mode:xo,name:yr}),workspaceB:u$1(p,{fileName:a$1.fileName,mode:xo,name:br})};return So(y,h).run(e)}};var Er=[{version:1,date:"2026-10-18",tickets:["ETL-206"],added:["Versione iniziale: esempio di riferimento per `parse`, `sort` e `serialize`, su estratti conto di prova in memoria"],changed:[],removed:[]}];var Rr=L.object({file:L.string().min(1),riga:L.number().int().positive(),conto:L.string().min(1),data:L.string().regex(/^\d{4}-\d{2}-\d{2}$/,"data in formato AAAA-MM-GG"),descrizione:L.string(),importo:L.coerce.number().finite()}),kr=L.object({nome:L.string().min(1),conto:L.string().min(1),movimenti:L.number().int().positive(),bytes:L.custom(e=>e instanceof Uint8Array)});var wr=1e5,Ar={delimiter:";"},Oa=new TextEncoder,Da=a(e=>({conto:e.conto,data:e.data,descrizione:e.descrizione,importo:e.importo.toFixed(2)}),"rigaDiUscita");function Ir(e,o,t={}){let a$1=I$1,n=t.scarti?{deadLetter:t.scarti}:{};return Fb("movimenti-per-conto").source("estratti",e,{writeReport:a$1,purpose:"Legge gli estratti conto di prova della dimostrazione, ognuno un file CSV con i movimenti di pi\xF9 conti."}).transform("estratti","righe",h("righe",d(Ar),{bytes:a(s=>Oa.encode(s.contenuto),"bytes"),fileName:a(s=>s.nome,"fileName"),merge:a((s,l,c)=>({...s,file:l.nome,riga:c}),"merge")}),{writeReport:a$1,...n,purpose:"Apre ogni estratto e ne ricava i movimenti, uno per riga, ricordando da quale file e da quale riga viene ciascuno. Un file che non si legge finisce per intero fra gli scarti."}).transform("righe","movimenti",V$1("movimenti",Rr),{writeReport:a$1,...n,purpose:"Controlla che ogni movimento abbia conto, data e importo validi. Un movimento fuori regola finisce fra gli scarti, e gli altri proseguono."}).transform("movimenti","ordina",f$2("ordina",{by:[{key:a(s=>s.conto,"key")},{key:a(s=>s.data,"key")}],maxRecords:wr}),{writeReport:a$1,purpose:"Mette i movimenti in ordine di conto e, per ogni conto, di data, cos\xEC ogni file per conto li elenca dal pi\xF9 vecchio."}).transform("ordina","componi-file",i("componi-file",d(Ar),{groupBy:a(s=>s.conto,"groupBy"),row:Da,toOutput:a((s,l,c)=>({nome:`movimenti-${s}.csv`,conto:s,movimenti:c.length,bytes:l}),"toOutput"),maxRecords:wr,outputSchema:kr}),{writeReport:a$1,purpose:"Scrive un file CSV per conto, con i suoi movimenti in ordine e gli importi con due decimali."}).sink("componi-file",o.file,{writeReport:a$1,purpose:"Consegna i file per conto, uno per ciascun conto che compare negli estratti."}).build()}a(Ir,"buildMovimentiPerContoPipeline");var Pr="conto;data;descrizione;importo",Ma=[{nome:"estratto-luglio-a.csv",contenuto:[Pr,"IT02;2026-07-03;Bonifico in uscita;-40.00","IT01;2026-07-02;Stipendio;1500","IT01;2026-07-05;Spesa;-82.40"].join(`
|
|
50
|
-
`)},{nome:"estratto-luglio-b.csv",contenuto:[
|
|
51
|
-
`)}],
|
|
41
|
+
`;function rr(e){return {name:"crm_leads",columns:ge,descriptor:{kind:"postgres",connection:{id:C},details:W$1(e,[{label:"table",value:"public.crm_leads"},{label:"limit",value:String(ye)}])},async*extract(){throw new Error("stub di sola topologia: non eseguibile")}}}a(rr,"specSource");function or(e){return {name:"crm_leads_import",descriptor:{kind:"postgres",connection:{id:S},details:W$1(e,[{label:"table",value:M},{label:"mode",value:"upsert(id)"}])},load(){throw new Error("stub di sola topologia: non eseguibile")}}}a(or,"specSink");var ve={name:_,description:"Copia le prime 100 righe di public.crm_leads (istanza 'source') nella tabella di landing crm_leads_import (istanza 'sink'), upsert idempotente su id",changelog:fe,getSpec(){let e=H({source:g(C,process.env),sink:g(S,process.env)});return I(rr(e.source),or(e.sink),T("error-report")).getSpec()},environment(e){return Q({pipeline:_,istanze:[b$2(C),b$2(S)]},e)},async run(e){let i=e$1(),r=d$1(i.get(C)),n=d$1(i.get(S));try{await n.query(er);let a=l({pool:r,name:"crm_leads",instanceId:C,query:Qe}),s=m({pool:n,name:"crm_leads_import",instanceId:S,table:M,columns:ue,conflictTarget:["id"]});return await I(a,s,T("error-report")).run(e)}finally{await r.end(),await n.end();}}};var z="NOEVA_MERGE_",ir="test-etl.csv",tr="8793575e-7546-489e-91c9-3004918361fb",U=[{suffisso:"FILE_NAME",default:ir},{suffisso:"SECONDARY_WORKSPACE_ID",default:tr}];function w(e=process.env){let i=N(U,z,e);return {fileName:P(i,"FILE_NAME"),workspaceB:P(i,"SECONDARY_WORKSPACE_ID"),variabili:i.variabili}}a(w,"parseConfig");function Ce(e){return {risolta:a(()=>w(e),"risolta"),esempio:a(()=>w(e),"esempio")}}a(Ce,"configCrossWorkspacePerIlPiano");function nr(e){return [...new Set(e.flatMap(i=>Object.keys(i)))]}a(nr,"unionColumns");async function*ar(e){yield*e;}a(ar,"recordsOf");function Se(e){return {name:e,stateful:true,async*apply(i){let r=[];for await(let a of i)r.push(a);if(r.length===0)return;yield*d({columns:nr(r)}).encode(ar(r));}}}a(Se,"encodeCsvWithColumnUnion");function he(e){let i=Object.keys(e).filter(r=>e[r]!=="").sort().map(r=>[r,e[r]]);return JSON.stringify(i)}a(he,"rowKey");var ke="union-workspaces",G="dedup-rows",sr=1e5,R="encode-csv";function W(e,i){let r={writeReport:I$1};return Fb("cross-workspace-csv-merge").source(e.workspaceA.name,e.workspaceA,{...r,purpose:"Legge il file condiviso dal primo workspace. Se l\xEC il file non esiste ancora, il workspace non porta righe e l'unione parte lo stesso."}).source(e.workspaceB.name,e.workspaceB,{...r,purpose:"Legge lo stesso file dal secondo workspace. Se l\xEC il file non esiste ancora, il workspace non porta righe e l'unione parte lo stesso."}).union(ke,{from:[e.workspaceA.name,e.workspaceB.name],order:"concat"},{...r,purpose:"Mette in fila le righe dei due workspace, prima tutte quelle del primo e poi quelle del secondo. L'ordine fisso fa s\xEC che, a dati fermi, ogni run produca lo stesso identico file."}).transform(ke,G,a$1(G,{key:he,maxKeys:sr}),{...r,purpose:"Toglie le righe ripetute, tenendo la prima copia di ognuna. Il risultato torna in tutti e due i workspace: senza questo passo il file raddoppierebbe a ogni run."}).transform(G,R,Se(R),{...r,purpose:"Ricompone le righe in un unico file, con tutte le colonne presenti in almeno uno dei due workspace. Una colonna che un workspace non ha resta vuota nelle sue righe, cos\xEC nessun dato va perso."}).sink(R,i.workspaceA,{...r,purpose:"Salva il file unito come nuova versione nel primo workspace. Se il contenuto \xE8 uguale all'ultima versione, non ne crea un'altra."}).sink(R,i.workspaceB,{...r,purpose:"Salva il file unito come nuova versione nel secondo workspace. Se il contenuto \xE8 uguale all'ultima versione, non ne crea un'altra."}).build()}a(W,"buildCrossWorkspaceCsvMergePipeline");var _e=L.record(L.string(),L.string());var cr=d({unmappedFields:"error",missingFields:"empty"});function K(e,i){return {kind:"noeva-file",details:[...f(e),{label:"fileName",value:i}]}}a(K,"workspaceCsvDescriptor");function B(e$1,i,r){return {name:r.name,descriptor:K({baseUrl:e$1.client.baseUrl,workspaceId:e$1.workspaceId,variabili:e$1.client.variabili,ricaduta:e$1.client.ricaduta},i),async*extract(n){n.signal.throwIfAborted();try{let s=(await e$1.client.searchFilesByName(i)).find(l=>l.name===i);if(s===void 0){n.logger.warn("cross-workspace-merge: file assente nel workspace",{workspaceId:e$1.workspaceId,fileName:i});return}for await(let l of cr.decode(e$1.client.downloadBytes(s.id)))yield _e.parse(l),n.signal.throwIfAborted();}catch(a){throw n.signal.aborted?a:new e(`Lettura di "${i}" dal workspace "${e$1.workspaceId}" fallita`,{stage:r.name,details:{fileName:i}},{cause:a})}}}}a(B,"workspaceCsvSource");var we=[{version:1,date:"2026-10-05",tickets:["ETL-120"],added:["Versione iniziale sotto versionamento (ADR-0086)"],changed:[],removed:[]},{version:2,date:"2026-10-06",tickets:["ETL-152"],added:["Variabile e origine su ogni riga dei nodi Noeva: base URL, workspace A, file e workspace B, che col default compare con origine `default` (ADR-0089)","Riga `credenziale` sui nodi Noeva, con lo stato della chiave API e mai il valore","Configurazione della pipeline nel piano: le variabili `NOEVA_MERGE_*` con valore e origine"],changed:["Senza `.env` i nodi mostrano un client Noeva d'esempio con le variabili mancanti marcate, invece di omettere base URL e workspace A","Il workspace A \xE8 il primo che l'istanza serve: con `NOEVA_WORKSPACE_IDS` impostata, `NOEVA_WORKSPACE_ID` non conta pi\xF9"],removed:[]},{version:3,date:"2026-10-09",tickets:["ETL-193","ETL-195"],added:[],changed:["Nessun cambio di comportamento: il piano \xE8 identico alla v2. Gli import seguono l'infrastruttura (changelog, configurazione delle istanze, report di volume) uscita da `src/pipelines/` (ADR-0093 \xA71), e la pipeline si dichiara nel catalogo di `etl.config.ts` invece che in un registro (ADR-0093 \xA72)"],removed:[]}];var Re="cross-workspace-csv-merge",be="read-workspace-a",Ee="read-workspace-b",Ae="workspace-a",Pe="workspace-b",F="new-version",Le={fileName:"FILE_NAME"},Oe={fileName:"FILE_NAME",workspace:"SECONDARY_WORKSPACE_ID"},lr=[{id:"id",name:"id",dataType:"string",isKey:true},{id:"val",name:"val",dataType:"string",isKey:false}];function xe(e,i,r){return {name:e,columns:lr,descriptor:K(i,r),async*extract(){throw new Error("stub di sola topologia: non eseguibile")}}}a(xe,"specSource");function De(e,i,r){return {name:e,descriptor:t(i,{fileName:r,mode:F}),async load(){throw new Error("stub di sola topologia: non eseguibile")}}}a(De,"specSink");var Ne={name:Re,description:"Demo cross-workspace: unisce test-etl.csv da due workspace e lo riscrive (new-version) su entrambi",changelog:we,environment(e){return Q({pipeline:Re,configurazione:{prefisso:z,manifest:U}},e)},getSpec(){let e=process.env,i=H({config:Ce(e),noeva:e$2(e)}),{config:r}=i,n={baseUrl:i.noeva.baseUrl,workspaceId:i.noeva.workspaceId,...i.noeva.variabili!==void 0?{variabili:i.noeva.variabili}:{},...i.noeva.ricaduta!==void 0?{ricaduta:i.noeva.ricaduta}:{}},a={...n,workspaceId:r.workspaceB},s={workspaceA:J(xe(be,n,r.fileName),r,Le),workspaceB:J(xe(Ee,a,r.fileName),r,Oe)},l={workspaceA:J(De(Ae,n,r.fileName),r,Le),workspaceB:J(De(Pe,a,r.fileName),r,Oe)};return K$1(W(s,l).getSpec(),r)},async run(e){let i=process.env,r=I$2({config:a(()=>w(i),"config"),workspaces:a(()=>d$2(i),"workspaces")}),n=r.config,a$1=x(r.workspaces),[s]=a$1.workspaceIds;if(s===void 0)throw new Error("nessun workspace Noeva risolto");let l=n.workspaceB,f=a$1.client(s),j=a$1.client(l),Je={workspaceA:B({workspaceId:s,client:f},n.fileName,{name:be}),workspaceB:B({workspaceId:l,client:j},n.fileName,{name:Ee})},Xe={workspaceA:u(f,{fileName:n.fileName,mode:F,name:Ae}),workspaceB:u(j,{fileName:n.fileName,mode:F,name:Pe})};return W(Je,Xe).run(e)}};var Te=[{version:1,date:"2026-10-18",tickets:["ETL-206"],added:["Versione iniziale: esempio di riferimento per `parse`, `sort` e `serialize`, su estratti conto di prova in memoria"],changed:[],removed:[]}];var Ie=L.object({file:L.string().min(1),riga:L.number().int().positive(),conto:L.string().min(1),data:L.string().regex(/^\d{4}-\d{2}-\d{2}$/,"data in formato AAAA-MM-GG"),descrizione:L.string(),importo:L.coerce.number().finite()}),Me=L.object({nome:L.string().min(1),conto:L.string().min(1),movimenti:L.number().int().positive(),bytes:L.custom(e=>e instanceof Uint8Array)});var ze=1e5,Ue={delimiter:";"},pr=new TextEncoder,dr=a(e=>({conto:e.conto,data:e.data,descrizione:e.descrizione,importo:e.importo.toFixed(2)}),"rigaDiUscita");function Ge(e,i$1,r={}){let n=I$1,a$1=r.scarti?{deadLetter:r.scarti}:{};return Fb("movimenti-per-conto").source("estratti",e,{writeReport:n,purpose:"Legge gli estratti conto di prova della dimostrazione, ognuno un file CSV con i movimenti di pi\xF9 conti."}).transform("estratti","righe",h("righe",d(Ue),{bytes:a(s=>pr.encode(s.contenuto),"bytes"),fileName:a(s=>s.nome,"fileName"),merge:a((s,l,f)=>({...s,file:l.nome,riga:f}),"merge")}),{writeReport:n,...a$1,purpose:"Apre ogni estratto e ne ricava i movimenti, uno per riga, ricordando da quale file e da quale riga viene ciascuno. Un file che non si legge finisce per intero fra gli scarti."}).transform("righe","movimenti",V$1("movimenti",Ie),{writeReport:n,...a$1,purpose:"Controlla che ogni movimento abbia conto, data e importo validi. Un movimento fuori regola finisce fra gli scarti, e gli altri proseguono."}).transform("movimenti","ordina",f$1("ordina",{by:[{key:a(s=>s.conto,"key")},{key:a(s=>s.data,"key")}],maxRecords:ze}),{writeReport:n,purpose:"Mette i movimenti in ordine di conto e, per ogni conto, di data, cos\xEC ogni file per conto li elenca dal pi\xF9 vecchio."}).transform("ordina","componi-file",i("componi-file",d(Ue),{groupBy:a(s=>s.conto,"groupBy"),row:dr,toOutput:a((s,l,f)=>({nome:`movimenti-${s}.csv`,conto:s,movimenti:f.length,bytes:l}),"toOutput"),maxRecords:ze,outputSchema:Me}),{writeReport:n,purpose:"Scrive un file CSV per conto, con i suoi movimenti in ordine e gli importi con due decimali."}).sink("componi-file",i$1.file,{writeReport:n,purpose:"Consegna i file per conto, uno per ciascun conto che compare negli estratti."}).build()}a(Ge,"buildMovimentiPerContoPipeline");var We="conto;data;descrizione;importo",mr=[{nome:"estratto-luglio-a.csv",contenuto:[We,"IT02;2026-07-03;Bonifico in uscita;-40.00","IT01;2026-07-02;Stipendio;1500","IT01;2026-07-05;Spesa;-82.40"].join(`
|
|
42
|
+
`)},{nome:"estratto-luglio-b.csv",contenuto:[We,"IT01;2026-07-01;Affitto;-700","IT02;2026-07-01;Ricarica;20.5","IT02;2026-07-04;Commissione;tre"].join(`
|
|
43
|
+
`)}],Ke=a(()=>Ge(L$1("estratti",mr),{file:M$1("file-per-conto")},{scarti:M$1("scarti")}),"build"),Be={name:"movimenti-per-conto",description:"Esempio di parse, sort e serialize: estratti conto CSV \u2192 un CSV per conto, movimenti in ordine di data (demo in memoria)",changelog:Te,environment(){return []},getSpec(){return Ke().getSpec()},run(e){return Ke().run(e)}};var y=L.object({order_id:L.string(),customer_id:L.string(),customer_name:L.string().nullable(),tier:L.enum(["gold","silver","bronze"]).nullable(),amount:L.number().positive(),created_at:L.date()}),b=L.object({tier:L.string(),order_count:L.number().int().positive(),total_amount:L.number().finite()}),Fe=L.object({tierMancante:L.string().min(1).default("unknown")});var Ve=L.object({order_id:L.string().min(1),customer_id:L.string().min(1),amount:L.number(),created_at:L.coerce.date()}),je=L.object({customer_id:L.string().min(1),name:L.string().min(1),tier:L.enum(["gold","silver","bronze"])});var qe=Hb({name:"riepilogo-ordini",description:"Riepilogo degli ordini arricchiti per tier cliente, con numero di ordini e importo totale, e gli ordini validati come fatti",input:y,outputs:{"per-tier":b,fatti:y},params:Fe,build:a((e,{params:i})=>e.transform("in","tier-summary",b$1("tier-summary",{key:a(r=>r.tier??i.tierMancante,"key"),init:a(r=>({tier:r.tier??i.tierMancante,order_count:1,total_amount:r.amount}),"init"),reduce:a((r,n)=>({...r,order_count:r.order_count+1,total_amount:r.total_amount+n.amount}),"reduce"),outputSchema:b}),{writeReport:I$1,purpose:"Conta gli ordini e somma i loro importi per fascia cliente. Gli ordini senza un cliente noto finiscono in una fascia a parte, cos\xEC nessun ordine resta fuori dai totali."}).output("tier-summary","per-tier").output("in","fatti"),"build")});function V(e,i,r={}){let n=I$1;return Fb("orders-enriched-daily").source("orders",e.orders,{writeReport:n,purpose:"Legge gli ordini di prova della dimostrazione, ognuno con il cliente che l'ha fatto, l'importo e la data."}).source("customers",e.customers,{writeReport:n,purpose:"Legge l'anagrafica di prova dei clienti, con il nome e la fascia di ciascuno, che servono a completare gli ordini."}).transform("orders","validate-orders",V$1("raw-order-contract",Ve),{writeReport:n,purpose:"Controlla che ogni ordine abbia cliente, importo e data validi. Un ordine fuori regola viene messo da parte fra gli scarti, e gli altri proseguono.",...r.ordersDeadLetter?{deadLetter:r.ordersDeadLetter}:{}}).transform("customers","validate-customers",V$1("raw-customer-contract",je),{writeReport:n,purpose:"Controlla che ogni cliente abbia un nome e una fascia ammessa. Un cliente fuori regola ferma la run: gli ordini completati con un'anagrafica sbagliata sarebbero sbagliati anche loro."}).join("enrich",{build:"validate-customers",probe:"validate-orders",how:"left",buildKey:a(a=>a.customer_id,"buildKey"),probeKey:a(a=>a.customer_id,"probeKey"),merge:a((a,s)=>({order_id:s.order_id,customer_id:s.customer_id,customer_name:a?.name??null,tier:a?.tier??null,amount:s.amount,created_at:s.created_at}),"merge")},{writeReport:n,purpose:"Completa ogni ordine con il nome e la fascia del suo cliente. Un ordine il cui cliente non \xE8 in anagrafica prosegue lo stesso, senza nome n\xE9 fascia."}).tryCatch("enrich","guard",{includeRawInReport:true,purpose:"Protegge, ordine per ordine, il riepilogo e il salvataggio: un ordine rifiutato pi\xF9 avanti, come quello con un importo non positivo, finisce fra gli errori e la run prosegue con gli altri."}).pipeline("guard","riepilogo-ordini",qe,{purpose:"Prepara i due risultati della giornata a partire dagli ordini completati: gli ordini controllati, pronti da salvare, e il riepilogo per fascia cliente."}).sink("riepilogo-ordini",i.enrichedOrders,{fromPort:"fatti",writeReport:n,purpose:"Salva gli ordini della giornata completati con i dati del cliente, uno per ordine: \xE8 il dettaglio su cui si appoggia ogni analisi."}).sink("riepilogo-ordini",i.tierSummary,{fromPort:"per-tier",writeReport:n,purpose:"Salva il riepilogo della giornata per fascia cliente, con quanti ordini e quale importo totale per ciascuna."}).transform("guard","log-errors",S$1("log-errors",(a,s)=>(s.logger.warn("orders-enriched-daily.error-caught",{nodeId:a.error.context.nodeId??null,stage:a.error.context.stage??null,message:a.error.message}),a)),{fromPort:"catch",writeReport:n,purpose:"Registra nel log ogni ordine finito fra gli errori, con il passo in cui l'errore \xE8 nato e il motivo, cos\xEC si capisce che cosa \xE8 andato storto."}).sink("log-errors",r.errorLog??M$1("caught-errors"),{writeReport:n,purpose:"Conserva gli errori registrati, ognuno con l'ordine che l'ha causato, per poterli esaminare dopo la run."}).transform("log-errors","recover-orders",U$1("recover-orders",a=>a.error.context.nodeId===i.enrichedOrders.name&&a.raw!==void 0),{writeReport:n,purpose:"Fra gli errori, tiene solo gli ordini che non si sono potuti salvare: sono gli unici da recuperare. Gli altri errori restano solo nel log."}).transform("recover-orders","restore-order",S$1("restore-order",a=>a.raw,{outputSchema:y}),{writeReport:n,purpose:"Riprende l'ordine com'era prima del salvataggio non riuscito, per poterlo salvare altrove."}).sink("restore-order",r.ordersFallback??M$1("orders-fallback"),{writeReport:n,purpose:"Salva in un archivio di riserva gli ordini che non si sono potuti salvare al loro posto, cos\xEC nessun ordine va perso."}).build()}a(V,"buildOrdersEnrichedDailyPipeline");var He=[{version:1,date:"2026-10-05",tickets:["ETL-120"],added:["Versione iniziale sotto versionamento (ADR-0086)"],changed:[],removed:[]},{version:2,date:"2026-10-05",tickets:["ETL-85","ETL-87","ETL-88"],added:[],changed:["Contratto del fatto e riepilogo per tier passano nella sub-pipeline `riepilogo-ordini`, istanziata da un nodo `pipeline` (ADR-0079): `fact-contract`, `tier-summary` e `tier-summary-contract` lasciano il posto ai nodi dell'istanza, e i due sink leggono dalle sue uscite `fatti` e `per-tier`","Un ordine con importo non positivo \xE8 rifiutato al confine d'ingresso dell'istanza invece che da `fact-contract`; il `guard` lo cattura e lo instrada sul ramo `catch` come prima"],removed:[]},{version:3,date:"2026-10-09",tickets:["ETL-193","ETL-195"],added:[],changed:["Nessun cambio di comportamento: il piano \xE8 identico alla v2. Gli import seguono l'infrastruttura (changelog, configurazione delle istanze, report di volume) uscita da `src/pipelines/` (ADR-0093 \xA71), e la pipeline si dichiara nel catalogo di `etl.config.ts` invece che in un registro (ADR-0093 \xA72)"],removed:[]}];var Ye=[{order_id:"O1",customer_id:"C1",amount:120.5,created_at:"2026-07-01T09:00:00Z"},{order_id:"O2",customer_id:"C2",amount:45,created_at:"2026-07-01T10:15:00Z"},{order_id:"O3",customer_id:"C1",amount:300,created_at:"2026-07-01T11:30:00Z"},{order_id:"O4",customer_id:"C9",amount:15,created_at:"2026-07-01T12:00:00Z"},{order_id:"O5",customer_id:"C2",amount:-10,created_at:"2026-07-01T13:45:00Z"},{order_id:"O6",customer_id:"C1",amount:0,created_at:"2026-07-01T14:10:00Z"},{order_id:"O7",customer_id:"C2",amount:-3.5,created_at:"2026-07-01T14:30:00Z"}],Ze=[{customer_id:"C1",name:"Acme S.p.A.",tier:"gold"},{customer_id:"C2",name:"Beta S.r.l.",tier:"silver"}],$e={name:"orders-enriched-daily",description:"Esempio DAG: ordini + anagrafica clienti \u2192 join a chiave \u2192 fan-out su fatto arricchito e riepilogo per tier",changelog:He,environment(){return []},getSpec(){return V({orders:L$1("orders",Ye),customers:L$1("customers",Ze)},{enrichedOrders:M$1("enriched_orders"),tierSummary:M$1("tier_summary")},{ordersDeadLetter:M$1("orders_dead_letter"),errorLog:M$1("caught_errors")}).getSpec()},async run(e){return V({orders:L$1("orders",Ye),customers:L$1("customers",Ze)},{enrichedOrders:M$1("enriched_orders"),tierSummary:M$1("tier_summary")},{ordersDeadLetter:M$1("orders_dead_letter"),errorLog:M$1("caught_errors")}).run(e)}};var Yo={client:"core",pipelines:[ve,Ne,Be,$e,a$2]};export{Yo as default};
|