@tricoteuses/senat 2.21.4 → 2.21.6

package/lib/config.d.ts

@@ -1,21 +1,3 @@
 import "dotenv/config";
-import { z } from "zod";
-export declare const configSchema: z.ZodObject<{
-    db: z.ZodObject<{
-        host: z.ZodString;
-        name: z.ZodString;
-        password: z.ZodString;
-        port: z.ZodCoercedNumber<unknown>;
-        user: z.ZodString;
-    }, z.core.$strip>;
-}, z.core.$strip>;
-declare const _default: {
-    db: {
-        host: string;
-        name: string;
-        password: string;
-        port: number;
-        user: string;
-    };
-};
-export default _default;
+declare const validConfig: any;
+export default validConfig;

package/lib/config.js

@@ -1,27 +1,16 @@
 import "dotenv/config";
-import { z } from "zod";
-const dbSchema = z.object({
-    host: z.string().trim().min(1, "Must not be empty"),
-    name: z.string().trim().min(1, "Must not be empty"),
-    password: z.string().trim().min(1, "Must not be empty"),
-    port: z.coerce.number().int().min(0).max(65535),
-    user: z.string().trim().min(1, "Must not be empty"),
-});
-export const configSchema = z.object({
-    db: dbSchema,
-});
+import { validateConfig } from "./validators/config";
 const config = {
     db: {
         host: process.env["TRICOTEUSES_SENAT_DB_HOST"] || "localhost",
-        name: process.env["TRICOTEUSES_SENAT_DB_NAME"] || "postgres",
         password: process.env["TRICOTEUSES_SENAT_DB_PASSWORD"] || "opendata",
         port: process.env["TRICOTEUSES_SENAT_DB_PORT"] || 5432,
         user: process.env["TRICOTEUSES_SENAT_DB_USER"] || "opendata",
     },
 };
-const result = configSchema.safeParse(config);
-if (!result.success) {
-    console.error(`Error in configuration:\n${JSON.stringify(config, null, 2)}\nError:\n${JSON.stringify(result.error.issues, null, 2)}`);
+const [validConfig, error] = validateConfig(config);
+if (error !== null) {
+    console.error(`Error in configuration:\n${JSON.stringify(validConfig, null, 2)}\nError:\n${JSON.stringify(error, null, 2)}`);
     process.exit(-1);
 }
-export default result.data;
+export default validConfig;

package/lib/loaders.js

@@ -193,7 +193,7 @@ export function* iterLoadSenatDocuments(dataDir, session, documentType, options
                         ...document,
                     };
                     const documentItem = {
-                        item: enrichedDocument,
+                        item: enrichedDocument
                     };
                     if (document.url) {
                         const documentName = path.parse(document.url).name;

package/lib/model/ameli.js

@@ -47,7 +47,9 @@ const findAllAmendementsQuery = dbSenat
     .leftJoin("ameli.typses", "ameli.typses.id", "ameli.ses.typid")
     .leftJoin("ameli.nat", "ameli.txt_ameli.natid", "ameli.nat.id")
     .leftJoin("ameli.lec_ameli", "ameli.txt_ameli.lecid", "ameli.lec_ameli.id")
-    .leftJoin("dosleg.texte", (join) => join.onRef("ameli.ses.ann", "=", "dosleg.texte.sesann").onRef("ameli.txt_ameli.numabs", "=", "dosleg.texte.texnum"))
+    .leftJoin("dosleg.texte", (join) => join
+    .onRef("ameli.ses.ann", "=", "dosleg.texte.sesann")
+    .onRef("ameli.txt_ameli.numabs", "=", "dosleg.texte.texnum"))
     .leftJoin("dosleg.lecass", "dosleg.texte.lecassidt", "dosleg.lecass.lecassidt")
     .leftJoin("ameli.mot", "ameli.amd.motid", "ameli.mot.id")
     .leftJoin("ameli.avicom", "ameli.amd.avcid", "ameli.avicom.id")

package/lib/model/documents.js

@@ -28,7 +28,10 @@ function documentsAttaches(rapportId) {
         .selectFrom("docatt")
         .leftJoin("typatt", "docatt.typattcod", "typatt.typattcod")
         .where("docatt.rapcod", "=", rapportId)
-        .select(["docatt.docatturl as url", "typatt.typattlib as type_document"]));
+        .select([
+        "docatt.docatturl as url",
+        "typatt.typattlib as type_document"
+    ]));
 }
 function selectRapportAttributes({ eb, ref, val }) {
     return [
@@ -67,9 +70,14 @@ const queryRapports = baseQueryRapports
     .leftJoin("lecass", "lecass.lecassidt", "lecassrap.lecassidt")
     .leftJoin("lecture", "lecture.lecidt", "lecass.lecidt")
     .leftJoin("loi", "loi.loicod", "lecture.loicod")
-    .select((args) => ["loi.signet as signet_dossier", ...selectRapportAttributes(args)]);
+    .select((args) => [
+    "loi.signet as signet_dossier",
+    ...selectRapportAttributes(args),
+]);
 export function rapports(lectureAssembleeId) {
-    return jsonArrayFrom(baseQueryRapports.select(selectRapportAttributes).where("lecassrap.lecassidt", "=", lectureAssembleeId));
+    return jsonArrayFrom(baseQueryRapports
+        .select(selectRapportAttributes)
+        .where("lecassrap.lecassidt", "=", lectureAssembleeId));
 }
 function auteursTexte(texteId) {
     return jsonArrayFrom(dbSenat
@@ -126,9 +134,14 @@ const queryTextes = baseQueryTextes
     .leftJoin("lecass", "lecass.lecassidt", "texte.lecassidt")
     .leftJoin("lecture", "lecture.lecidt", "lecass.lecidt")
     .leftJoin("loi", "loi.loicod", "lecture.loicod")
-    .select((args) => ["loi.signet as signet_dossier", ...selectTexteAttributes(args)]);
+    .select((args) => [
+    "loi.signet as signet_dossier",
+    ...selectTexteAttributes(args),
+]);
 export function textes(lectureAssembleeId) {
-    return jsonArrayFrom(baseQueryTextes.select(selectTexteAttributes).where("texte.lecassidt", "=", lectureAssembleeId));
+    return jsonArrayFrom(baseQueryTextes
+        .select(selectTexteAttributes)
+        .where("texte.lecassidt", "=", lectureAssembleeId));
 }
 export function findAllTextes() {
     return queryTextes.stream();

package/lib/model/dosleg.js

@@ -203,10 +203,10 @@ export function buildActesLegislatifs(dossier) {
                     numero: depotTexte.numero,
                     uid: `${loiSignet}-${phasePrefix}-DEPOT`,
                     session: lecAss.session,
-                    chambre: "SN",
+                    chambre: 'SN',
                     signet_dossier: loiSignet,
                     texte_url: depotTexte.url,
-                    code_organisme: null,
+                    code_organisme: null
                 });
             }
             // =================================================================
@@ -225,7 +225,7 @@ export function buildActesLegislatifs(dossier) {
                         adoption: rap.adoption,
                         uid: `${loiSignet}-${phasePrefix}-COM`,
                         session: lecAss.session,
-                        chambre: "SN",
+                        chambre: 'SN',
                         signet_dossier: loiSignet,
                         texte_url: rap.url,
                     });
@@ -247,9 +247,9 @@ export function buildActesLegislatifs(dossier) {
                         libelle: `Discussion en séance publique`,
                         uid: `${loiSignet}-${phasePrefix}-DEBATS-SEANCE`,
                         session: lecAss.session,
-                        chambre: "SN",
+                        chambre: 'SN',
                         signet_dossier: loiSignet,
-                        code_organisme: null,
+                        code_organisme: null
                     });
                 }
             }
@@ -281,10 +281,10 @@ export function buildActesLegislatifs(dossier) {
                     adoption: libelleStatut,
                     uid: `${loiSignet}-DEC-${texteFinal.numero}`,
                     session: lecAss.session,
-                    chambre: "SN",
+                    chambre: 'SN',
                     signet_dossier: loiSignet,
                     texte_url: texteFinal.url,
-                    code_organisme: null,
+                    code_organisme: null
                 });
             }
         }
@@ -294,19 +294,19 @@ export function buildActesLegislatifs(dossier) {
     // =================================================================
     if (dossier.date_decision_CoC) {
         actes.push({
-            code_acte: "CC",
+            code_acte: 'CC',
             date: dossier.date_decision_CoC,
             libelle: `Décision du Conseil constitutionnel`,
             id: dossier.url_decision_CoC,
             uid: `${loiSignet}-CC`,
-            chambre: "AN",
+            chambre: 'AN',
             signet_dossier: loiSignet,
             texte_url: dossier.url_decision_CoC || dossier.url_dossier_CoC,
         });
     }
     if (dossier.date_promulgation) {
         actes.push({
-            code_acte: "PROM",
+            code_acte: 'PROM',
             date: dossier.date_promulgation,
             libelle: `Promulgation de la loi`,
             date_publication_JO: dossier.date_publication_JO,
@@ -314,7 +314,7 @@ export function buildActesLegislatifs(dossier) {
             url_legifrance: dossier.url_JO,
             id: dossier.url_JO,
             uid: `${loiSignet}-PROM`,
-            chambre: "AN",
+            chambre: 'AN',
             signet_dossier: loiSignet,
         });
     }

package/lib/raw_types/questions.d.ts

@@ -113,10 +113,6 @@ export interface TamMinisteres {
     titreministre: string | null;
 }
 export interface TamQuestions {
-    /**
-     * Question caduque redéposée
-     */
-    caduque_redeposee: string | null;
     /**
      * Libellé de la circonscription
      */

package/lib/raw_types/senat.d.ts

@@ -2735,10 +2735,6 @@ export interface QuestionsTamMinisteres {
     titreministre: string | null;
 }
 export interface QuestionsTamQuestions {
-    /**
-     * Question caduque redéposée
-     */
-    caduque_redeposee: string | null;
     /**
      * Libellé de la circonscription
      */

package/lib/raw_types_schemats/ameli.d.ts

@@ -1,7 +1,7 @@
 /**
  * AUTO-GENERATED FILE - DO NOT EDIT!
  *
- * This file was automatically generated by schemats v.2.20.33
+ * This file was automatically generated by schemats v.2.19.6
  * $ schemats generate -c postgres://username:password@localhost:5432/senat -t amd -t amdsen -t avicom -t avigvt -t cab -t com_ameli -t ent -t etatxt -t fbu -t grppol_ameli -t gvt -t intora -t irr -t lec_ameli -t mot -t nat -t orarol -t sai -t saisen -t sea -t sen_ameli -t ses -t sor -t sub -t txt_ameli -t typrect -t typses -t typsub -t w_nivrec -s ameli
  *
  */

package/lib/raw_types_schemats/debats.d.ts

@@ -1,7 +1,7 @@
 /**
  * AUTO-GENERATED FILE - DO NOT EDIT!
  *
- * This file was automatically generated by schemats v.2.20.33
+ * This file was automatically generated by schemats v.2.19.6
  * $ schemats generate -c postgres://username:password@localhost:5432/senat -t debats -t intdivers -t intpjl -t lecassdeb -t secdis -t secdivers -t syndeb -t typsec -s debats
  *
  */

package/lib/raw_types_schemats/dosleg.d.ts

@@ -1,7 +1,7 @@
 /**
  * AUTO-GENERATED FILE - DO NOT EDIT!
  *
- * This file was automatically generated by schemats v.2.20.33
+ * This file was automatically generated by schemats v.2.19.6
  * $ schemats generate -c postgres://username:password@localhost:5432/senat -t amescr -t ass -t aud -t auteur -t ble -t catrap -t corscr -t date_seance -t deccoc -t denrap -t doc -t docatt -t docsea -t ecr -t etaloi -t evtsea -t forpub -t gen -t lecass -t lecassrap -t lecture -t lnkrap -t loi -t loithe -t natloi -t org -t orgnomhis -t orippr -t oritxt -t posvot -t qua -t rap -t raporg -t rapthe -t rolsig -t scr -t ses -t stavot -t texte -t texte_ancien -t the -t titsen -t typatt -t typaut -t typdoc -t typevtsea -t typlec -t typloi -t typorg -t typrap -t typtxt -t typurl -t votsen -s dosleg
  *
  */

package/lib/raw_types_schemats/questions.d.ts

@@ -1,7 +1,7 @@
 /**
  * AUTO-GENERATED FILE - DO NOT EDIT!
  *
- * This file was automatically generated by schemats v.2.20.33
+ * This file was automatically generated by schemats v.2.19.6
  * $ schemats generate -c postgres://username:password@localhost:5432/senat -t etatquestion -t legquestion -t naturequestion -t sortquestion -t tam_ministeres -t tam_questions -t tam_reponses -t the -s questions
  *
  */
@@ -76,7 +76,6 @@ export interface tam_ministeres {
     titreministre: tam_ministeresFields.titreministre;
 }
 export declare namespace tam_questionsFields {
-    type caduque_redeposee = string | null;
     type circonscription = string | null;
     type cirnum = number | null;
     type codequalite = string | null;
@@ -136,7 +135,6 @@ export declare namespace tam_questionsFields {
     type version = number | null;
 }
 export interface tam_questions {
-    caduque_redeposee: tam_questionsFields.caduque_redeposee;
     circonscription: tam_questionsFields.circonscription;
     cirnum: tam_questionsFields.cirnum;
     codequalite: tam_questionsFields.codequalite;

package/lib/raw_types_schemats/sens.d.ts

@@ -1,7 +1,7 @@
 /**
  * AUTO-GENERATED FILE - DO NOT EDIT!
  *
- * This file was automatically generated by schemats v.2.20.33
+ * This file was automatically generated by schemats v.2.19.6
  * $ schemats generate -c postgres://username:password@localhost:5432/senat -t acr -t activite -t activite_audit -t activite_delegation -t activite_delegation_audit -t activite_loi -t activite_loi_audit -t activite_obligatoire -t activite_participant -t activite_participant_audit -t activite_senateur -t activite_senateur_audit -t activite_senateur_params -t activite_senateur_params_audit -t activites_liees -t activites_liees_audit -t actpro -t adhgrpsen -t adr -t adresse -t adrsen -t app -t assparint -t asster -t autgrpsen -t autorisation_profil -t autorisations -t avis_nomination_art13 -t basdes -t bur -t bur3r -t bur4r -t cad -t candid -t candidat -t candtodelete -t categorie_activite -t catpro -t catpro2e -t catterrit -t cible_categorie_periode -t cirdep -t com -t con -t cotgip -t csp -t cspfam -t databasechangelog -t databasechangeloglock -t delega -t derogation -t derogation_audit -t derogation_senateur -t derogation_senateur_audit -t design -t designoep -t designorg -t discou -t div -t dpt -t dpt_seuil_presence -t dptele -t dptele_files -t dptele_processing -t dptele_processing_type -t dpttypman -t droits_acces -t droits_acces_audit -t droits_type_derogation -t ele -t eleloc -t elucan -t eludep -t eludiv -t elueur -t elueur_apf -t elumet -t elureg -t elusen -t elusen2e -t elusen3r -t elusen4r -t elusencommu -t elusenpair -t eluter -t elutit -t eluvil -t etadebman -t etadebman3r -t etadebman4r -t etafinman -t etafinman3r -t etafinman4r -t etaprr -t etarpm -t etasen -t ext2e_bio -t ext2e_csp -t ext2e_mandats -t ext2e_minist -t extsencom_identite -t extsencom_mandat -t fonact_participant -t foncandid -t foncom -t fondelega -t fongrppol -t fongrpsen -t fonmemcom -t fonmemdelega -t fonmemextpar -t fonmemgrppol -t fonmemgrpsen -t fonmemorg -t fonorg -t grppol -t grppol4r -t grpsenami -t grpsenamiadh -t grpsenamiadhreq -t grpsenamiadhreqeta -t grpsenamiunadh -t grpsim -t gvt -t insee_pays2008 -t jhi_authority -t jhi_user -t jhi_user_authority -t lanetr -t libcom -t libdelega -t libgrppol -t libgrpsen -t liborg -t lisdptele -t mel -t memcom -t memcomsea -t memdelega -t memextpar -t memgrppol -t memgrpsen -t memorg -t met -t minind -t minist -t mis -t misetafin -t mismin -t misrapeta -t missen -t moddes -t mode_acces_elusenpair -t nation -t nationgrpsen -t nivlan -t org -t orgext -t orgextpres -t orgthe -t pairie_elusenpair -t parpol -t parpolglo -t participa -t pcs -t pcs24 -t pcs42 -t pcs8 -t pcscatpro -t per -t per_sen -t perapp -t periode_presence -t perpolglo -t perrol -t pj_justificatif -t pj_justificatif_audit -t plaind -t plan_table -t plsql_profiler_runs -t plsql_profiler_units -t poicon -t posvot -t presences_scrutin_surcharge -t presencesrevisionentity -t profil_applicatif -t qua -t rap_the -t reg -t reladr -t requetes_profil -t reslis -t resultat -t reu -t revchanges -t rne_mandat -t rne_mandat_diff -t rne_sen -t rne_sen_diff -t rne_type_mandat -t rol -t sal -t scr -t scrusoldelega -t sea -t sec -t sec2e -t secexe -t sen -t senbur -t senbur3r -t senbur4r -t sennom -t senpj -t sensim -t sentablenom -t senurl -t seuil_presence -t sirpas_elusen -t sirpas_fonmemcom -t sirpas_fonmemdelega -t sirpas_fonmemgrppol -t sirpas_memcom -t sirpas_memdelega -t sirpas_memgrppol -t sirpas_mvt -t sirpas_mvtcm -t sirpas_mvttri -t sirpas_sen -t sirpas_senbur -t sirpas_trf -t srv -t stajur -t stavot -t suspensiontravaux -t suspensiontravaux_audit -t sysage -t syscognos -t sysevt -t sysvar -t sysvar_sendev -t sysvar_senprod -t tapsenrevchanges -t tapsenrevisionentity -t telephone -t temval -t tenpol -t territ -t testoracle -t titele -t titelerne -t titmin -t titnob -t tmpsd -t toutes -t turelu -t typadr -t typapppol -t typbister -t typcandid -t type_activite -t type_activite_participant -t type_activite_rol -t type_activite_senateur -t type_categorie -t type_derogation -t type_droit_acces -t type_pj_justificatif -t type_rne_diff -t type_type_derogation -t typele -t typgrpsen -t typman -t typmin -t typmoddes -t typorg -t typorgext -t typparpol -t typpoicon -t typprs -t typprssta -t typscr -t typtel -t typurl -t typvoi -t uploaded_file -t uploaded_file_type -t validation -t validation_defview_profil -t validation_profil -t vercand -t verres -t votes -t zongeo -s sens
  *
  */

package/lib/scripts/convert_data.js

@@ -5,7 +5,7 @@ import path from "path";
 import pLimit from "p-limit";
 import * as git from "../git";
 import { datasets, EnabledDatasets, getEnabledDatasets } from "../datasets";
-import { DATA_ORIGINAL_FOLDER, DATA_TRANSFORMED_FOLDER, DOCUMENT_METADATA_FILE, DOSLEG_DOSSIERS_FOLDER, SCRUTINS_FOLDER, RAPPORT_FOLDER, SENS_CIRCONSCRIPTIONS_FOLDER, SENS_ORGANISMES_FOLDER, SENS_SENATEURS_FOLDER, TEXTE_FOLDER, } from "../loaders";
+import { DATA_ORIGINAL_FOLDER, DATA_TRANSFORMED_FOLDER, DOCUMENT_METADATA_FILE, DOSLEG_DOSSIERS_FOLDER, SCRUTINS_FOLDER, RAPPORT_FOLDER, SENS_CIRCONSCRIPTIONS_FOLDER, SENS_ORGANISMES_FOLDER, SENS_SENATEURS_FOLDER, TEXTE_FOLDER } from "../loaders";
 import { findAllAmendements, findAllCirconscriptions, findAllDebats, findAllDossiers, findAllScrutins, findAllOrganismes, findAllQuestions, findAllSens, findAllTextes, findAllRapports, } from "../model";
 import { processRapport, processTexte } from "./retrieve_documents";
 import { buildActesLegislatifs } from "../model/dosleg";
@@ -164,7 +164,7 @@ async function convertDatasetDosLeg(dataDir, options) {
         const actesBrutsNormalises = buildActesLegislatifs(dossier);
         const dossierWithActes = {
             ...dossier,
-            actes_legislatifs: actesBrutsNormalises,
+            actes_legislatifs: actesBrutsNormalises
         };
         const dossierFile = `${dossier["signet"]}.json`;
         await fs.outputJSON(path.join(dossierReorganizedDir, dossierFile), dossierWithActes, { spaces: 2 });
@@ -236,7 +236,7 @@ async function convertTextes(dataDir, options) {
         const texteName = path.parse(texte["url"]).name;
         const texteDir = path.join(originalTextesDir, `${session}`, texteName);
         // oritxtcod = 1 corresponds to "Texte de loi déposé au Sénat"
-        const hasExposeDesMotifs = texte["origine"] === "Sénat" && texte["ordre_origine"] === "1";
+        const hasExposeDesMotifs = texte["origine"] === 'Sénat' && texte["ordre_origine"] === '1';
         const metadata = {
             name: texteName,
             session: texte["session"],

package/lib/scripts/retrieve_open_data.js

@@ -271,8 +271,7 @@ async function retrieveOpenData() {
     process.env = {
         ...process.env,
         PGHOST: process.env["PGHOST"] || config.db.host,
-        PGPORT: process.env["PGPORT"] || String(config.db.port),
-        PGDATABASE: process.env["PGDATABASE"] || config.db.name,
+        PGPORT: process.env["PGPORT"] || config.db.port,
         PGUSER: process.env["PGUSER"] || config.db.user,
         PGPASSWORD: process.env["PGPASSWORD"] || config.db.password,
     };

package/lib/scripts/test_iter_load.js

@@ -1,4 +1,4 @@
-import { iterLoadSenatRapports, } from "../loaders";
+import { iterLoadSenatRapports } from "../loaders";
 import commandLineArgs from "command-line-args";
 import { dataDirDefaultOption } from "./shared/cli_helpers";
 const optionsDefinitions = [dataDirDefaultOption];

package/lib/src/conversion_textes.d.ts

@@ -0,0 +1,11 @@
+export interface SenatMetadata {
+    number: string | null;
+    session: string | null;
+    date: string | null;
+    type: string | null;
+    authors: string | null;
+    title: string | null;
+    commission: string | null;
+}
+export declare function extractMetadata(xmlDoc: Document): SenatMetadata;
+export declare function convertSenatXmlToHtml(texteXml: string, outputFilePath: string): Promise<void>;