@tricoteuses/senat 2.8.1 → 2.8.5

package/lib/model/texte.ts

@@ -0,0 +1,174 @@
+import { JSDOM } from "jsdom"
+
+import { AKN_WORKFLOW_IDENTIFICATION_STRUCTURE_REGEXP, AKN_IDENTIFICATION_STRUCTURE_REGEXP } from "../scripts/datautil"
+import {
+  Alinea,
+  Article,
+  Division,
+  DivisionContent,
+  DivisionTag,
+  DivisionType,
+  FlatTexte, Step,
+  Version,
+} from "../types/texte"
+
+function buildWorklow (metaElement: HTMLMetaElement): Step[] {
+  const stepElements = metaElement.querySelectorAll("workflow step")
+  const steps: Step[] = []
+  for (const stepElement of stepElements) {
+    const identification = stepElement.getAttribute("href") ?? ""
+    const identificationParts = AKN_WORKFLOW_IDENTIFICATION_STRUCTURE_REGEXP.exec(identification)?.groups
+    steps.push({
+      eId: stepElement.getAttribute("eId")!,
+      date: stepElement.getAttribute("date") ? new Date(stepElement.getAttribute("date") ?? "") : null,
+      type: identificationParts?.type || null,
+      session: identificationParts?.session || null,
+      numero: identificationParts?.numTexte || null,
+      version: identificationParts?.version ? identificationParts.version as Version : null,
+      outcome: stepElement.getAttribute("outcome"),
+    })
+  }
+  return steps
+}
+
+function buildDivision (node: Node, index: number): Division {
+  const eId = (node as Element).getAttribute("eId")!
+  const tag = node.nodeName as DivisionTag
+  const level = DivisionType[tag]
+  const titleNode = (node as Element).querySelector("num")
+  const subtitleNode = (node as Element).querySelector("heading")
+  const headings: DivisionContent[] = [
+    ...(titleNode ? [{
+      text: titleNode.textContent?.trim() ?? null,
+      html: titleNode.innerHTML?.trim() ?? null,
+    }] : []),
+    ...(subtitleNode ? [{
+      text: subtitleNode.textContent?.trim() ?? null,
+      html: subtitleNode.innerHTML?.trim() ?? null,
+    }] : []),
+  ]
+  const division = {
+    index,
+    eId,
+    tag,
+    level,
+    headings,
+  }
+  if (tag === "article") {
+    (division as Article).alineas = []
+  }
+  return division
+}
+
+function buildAlinea (contentNode: Node, alineaNode: Node): Alinea {
+  const eId = (alineaNode as Element).getAttribute("eId")!
+  const heading = {
+    text: (alineaNode as Element).querySelector("num")?.textContent ?? null,
+  }
+  const pastille = (alineaNode as Element).getAttribute("data:pastille") ?? null
+  return {
+    eId,
+    heading,
+    text: (contentNode as Element).textContent?.trim() ?? null,
+    html: (contentNode as Element).innerHTML?.trim() ?? null,
+    pastille,
+  }
+}
+
+function buildEmptyArticle (index: number): Article {
+  return {
+    index: index,
+    eId: "",
+    tag: "article",
+    level: DivisionType["article"],
+    headings: [],
+    alineas: [],
+  }
+}
+
+function flattenTexte (texteContentRoot: Node): Division[] {
+  const divisions: Division[] = []
+  let divisionIndex = 0
+  const iter = (node: Node) => {
+    if (node.nodeName === "content") {
+      return
+    }
+    switch (node.nodeName) {
+      case "tome":
+      case "part":
+      case "book":
+      case "title":
+      case "subtitle":
+      case "chapter":
+      case "section":
+      case "subsection":
+      case "paragraph":
+      case "article":
+        divisions.push(buildDivision(node, divisionIndex++))
+        break
+    }
+    if (node.nodeName === "alinea") {
+      Array.from(node.childNodes)
+        // Find direct content children programmatically
+        // because `:scope` selector does not work
+        // https://github.com/jsdom/jsdom/issues/2998
+        .filter((alineaChildNode: Node) => alineaChildNode.nodeName === "content")
+        .forEach((alineaContentNode: Node) => {
+          // Hypothesis: alineas should always be enclosed in articles
+          let lastArticle = divisions.findLast(division => division.tag === "article") as Article
+          if (!lastArticle) {
+            lastArticle = buildEmptyArticle(divisionIndex++)
+            divisions.push(lastArticle)
+          }
+          lastArticle.alineas.push(buildAlinea(alineaContentNode, node))
+        })
+    }
+    if (node.hasChildNodes()) {
+      node.childNodes.forEach((childNode: Node) => iter(childNode))
+    }
+  }
+  iter(texteContentRoot)
+  return divisions
+}
+
+export function transformTexte (document: Document): FlatTexte | null {
+  let transformedTexte = null
+  const metaElement = document.querySelector("meta")
+  const identification = metaElement?.querySelector("FRBRExpression FRBRuri")?.getAttribute("value") ?? ""
+  const identificationParts = AKN_IDENTIFICATION_STRUCTURE_REGEXP.exec(identification)?.groups
+  const bodyElement = document.querySelector("body")
+  try {
+    transformedTexte = {
+      title: metaElement?.querySelector("FRBRalias[name='intitule-court']")
+        ?.getAttribute("value") || null,
+      signetDossierLegislatifSenat:
+        metaElement?.querySelector("FRBRalias[name='signet-dossier-legislatif-senat']")
+          ?.getAttribute("value") || null,
+      urlSenat: metaElement?.querySelector("FRBRalias[name='url-senat']")?.getAttribute("value") || null,
+      urlAssemblee: metaElement?.querySelector("FRBRalias[name='url-AN']")?.getAttribute("value") || null,
+      type: identificationParts?.type || null,
+      session: identificationParts?.session || null,
+      numero: identificationParts?.numTexte ? parseInt(identificationParts.numTexte) : null,
+      version: identificationParts?.version ? identificationParts.version as Version : null,
+      workflow: metaElement ? buildWorklow(metaElement) : [],
+      divisions: bodyElement ? flattenTexte(bodyElement) : [],
+    }
+  } catch (error: any) {
+    console.error(`Could not parse texte with error ${error}`)
+  }
+  return transformedTexte
+}
+
+export function parseTexte (texteXml: string): FlatTexte | null {
+  const { document } = (new JSDOM(texteXml, {
+    contentType: "text/xml",
+  })).window
+  return transformTexte(document)
+}
+
+// Prevent from memory leak
+// https://github.com/jsdom/jsdom/issues/2583#issuecomment-559520814
+export async function parseTexteFromFile (xmlFilePath: string): Promise<FlatTexte | null> {
+  const { document } = (await JSDOM.fromFile(xmlFilePath, { contentType: "text/xml" })).window
+  return transformTexte(document)
+}

package/lib/raw_types/ameli.d.ts

@@ -19,6 +19,10 @@ export interface Amd {
      * Identifiant de l'amendement pere pour les sous-amendements
      */
     amdperid: number | null;
+    /**
+     * Identifiant de l'amendement auquel celui-ci a été rendu similaire
+     */
+    amdrendusim: number | null;
     /**
      * Indication de la mention -Et plusieurs de ses collegues-
      */
@@ -35,6 +39,10 @@ export interface Amd {
      * Indication de la mendion -Et plusieurs de ses collegues- (uniquement pour les amendements de commission)
      */
     colleg: Generated<string>;
+    /**
+     * Commentaire sur les problèmes rencontrés lors du traitement de l'amendement
+     */
+    commentprobleme: string | null;
     /**
      * Date de depot de l'amendement
      */
@@ -51,6 +59,10 @@ export interface Amd {
      * Identifiant de l'etat de l'amendement
      */
     etaid: number;
+    /**
+     * Identifiant de l'état de traitement d'un amendement (lien fait à partir d'un enum dans le back)
+     */
+    etatraitid: Generated<number>;
     /**
      * Identifiant
      */
@@ -140,6 +152,14 @@ export interface Amd {
      * Identification des amendements portant sur article additionnel (si different de 0)
      */
     subpos: Generated<Int8 | null>;
+    /**
+     * Date de la dernière modification de l'amendement
+     */
+    traitementdate: Timestamp | null;
+    /**
+     * Identifiant de la dernière entité à avoir modifié l'amendement
+     */
+    traitemententid: number | null;
     /**
      * Identifiant du texte amende
      */

package/lib/raw_types/questions.d.ts

@@ -254,6 +254,10 @@ export interface TamQuestions {
      * Prénom du sénateur
      */
     prenom: string | null;
+    /**
+     * Ordre d¿affichage personnalisé des questions (modifiable par drag et drop)
+     */
+    rang: Int8 | null;
     /**
      * Type Appartenance
      */
@@ -335,74 +339,6 @@ export interface TamQuestions {
      */
     version: Int8 | null;
 }
-export interface TamReponses {
-    /**
-     * Date publication JO de la réponse
-     */
-    datejorep: Timestamp | null;
-    /**
-     * Délai en jours de la réponse
-     */
-    delaijoursrep: Int8 | null;
-    /**
-     * Date publication JO de l'erratum réponse
-     */
-    errdate: Timestamp | null;
-    /**
-     * Page de publication JO de l'erratum réponse
-     */
-    errpage: Int8 | null;
-    /**
-     * Identifiant de base de la question
-     */
-    idque: Int8;
-    /**
-     * Identifiant de base de la réponse dans le cas de réponses communes
-     */
-    idrepunique: string | null;
-    /**
-     * Identifiant du ministère ayant repondu à la question
-     */
-    minrepid: Int8 | null;
-    /**
-     * Libellé du ministère ayant repondu à la question
-     */
-    minreplib: string | null;
-    /**
-     * Page de publication JO de la réponse
-     */
-    pagejorep: Int8 | null;
-    /**
-     * Texte de l'erratum réponse
-     */
-    txterrrep: string | null;
-    /**
-     * Texte de la réponse
-     */
-    txtrep: string | null;
-    /**
-     * URL du compte rendu où figure la réponse sur senat.fr
-     */
-    urlrep: string | null;
-}
-export interface The {
-    /**
-     * Libellé d'édition thème
-     */
-    theali: string | null;
-    /**
-     * Code thème
-     */
-    thecle: number;
-    /**
-     * Libellé du thème
-     */
-    thelib: string;
-    /**
-     * Critère de tri
-     */
-    thenouidt: Int8 | null;
-}
 export interface DB {
     etatquestion: Etatquestion;
     legquestion: Legquestion;
@@ -410,6 +346,4 @@ export interface DB {
     sortquestion: Sortquestion;
     tam_ministeres: TamMinisteres;
     tam_questions: TamQuestions;
-    tam_reponses: TamReponses;
-    the: The;
 }