@tricoteuses/senat 2.6.1 → 2.7.1

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
@@ -26,6 +26,29 @@ function getUrlDossierSenat(lienElements) {
26
26
  .find(lienElement => lienElement.textContent?.includes("dossier législatif"));
27
27
  return urlElement ? urlElement.getAttribute("href") : null;
28
28
  }
29
+ function getQuantieme(eventElement, seancesElements) {
30
+ if (eventElement.classList.contains("evt-seance")) {
31
+ const seanceIndex = seancesElements.indexOf(eventElement);
32
+ if (seancesElements.length === 1 && seanceIndex === 0) {
33
+ return "Unique";
34
+ }
35
+ else {
36
+ switch (seanceIndex) {
37
+ case 0:
38
+ return "Première";
39
+ case 1:
40
+ return "Deuxième";
41
+ case 2:
42
+ return "Troisième";
43
+ case 3:
44
+ return "Quatrième";
45
+ case 4:
46
+ return "Cinquième";
47
+ }
48
+ }
49
+ }
50
+ return null;
51
+ }
29
52
  /**
30
53
  * Normalize time string to become a simple start time ("H'h'mm") or a duration ("'de 'H'h'mm' à 'H'h'mm").
31
54
  */
@@ -62,6 +85,8 @@ function getStartAndEndTimes(timeStr) {
62
85
  function transformAgenda(document, fileName) {
63
86
  const agendaEvents = [];
64
87
  const eventElements = document.querySelectorAll(".evt");
88
+ const seanceElements = Array.from(eventElements)
89
+ .filter(eventElement => eventElement.classList.contains("evt-seance"));
65
90
  for (const eventElement of eventElements) {
66
91
  const id = eventElement.previousElementSibling?.getAttribute("name") || null;
67
92
  if (!id) {
@@ -78,7 +103,8 @@ function transformAgenda(document, fileName) {
78
103
  ?.replace(/^- /, "")
79
104
  || null;
80
105
  const lieu = eventElement.querySelector(".lieu")?.textContent || null;
81
- const url_dossier_senat = getUrlDossierSenat(eventElement.querySelectorAll(".lien a"));
106
+ const videoElement = eventElement.querySelector(".video");
107
+ const urlDossierSenat = getUrlDossierSenat(eventElement.querySelectorAll(".lien a"));
82
108
  agendaEvents.push({
83
109
  id,
84
110
  type,
@@ -90,7 +116,9 @@ function transformAgenda(document, fileName) {
90
116
  organe,
91
117
  objet,
92
118
  lieu,
93
- url_dossier_senat,
119
+ captationVideo: videoElement !== null,
120
+ urlDossierSenat: urlDossierSenat,
121
+ quantieme: getQuantieme(eventElement, seanceElements),
94
122
  });
95
123
  }
96
124
  return agendaEvents;
@@ -231,6 +231,12 @@ declare const findAuteursQuery: import("kysely").SelectQueryBuilder<import("../r
231
231
  prenom: string | null;
232
232
  matricule: string | null;
233
233
  }>;
234
+ export declare function findAuteurs(): Promise<{
235
+ code: string;
236
+ nom: string;
237
+ prenom: string | null;
238
+ matricule: string | null;
239
+ }[]>;
234
240
  export declare function findAuteur(auteurCode: string): Promise<{
235
241
  code: string;
236
242
  nom: string;
@@ -215,6 +215,10 @@ const findAuteursQuery = dbDosleg
215
215
  "prenom as prenom",
216
216
  "autmat as matricule",
217
217
  ]);
218
+ export async function findAuteurs() {
219
+ return findAuteursQuery
220
+ .execute();
221
+ }
218
222
  export async function findAuteur(auteurCode) {
219
223
  return findAuteursQuery
220
224
  .where("autcod", "=", auteurCode)
@@ -1,5 +1,5 @@
1
1
  export { findAll as findAllAmendements } from "./ameli";
2
2
  export { findAll as findAllDebats } from "./debats";
3
- export { findAll as findAllLois, findAuteur, findSenatRapportUrls, findSenatTexteUrls, } from "./dosleg";
3
+ export { findAll as findAllLois, findAuteur, findAuteurs, findSenatRapportUrls, findSenatTexteUrls, } from "./dosleg";
4
4
  export { findAll as findAllQuestions } from "./questions";
5
5
  export { findAll as findAllSens, findAllCirconscriptions, findAllOrganismes, } from "./sens";
@@ -1,5 +1,5 @@
1
1
  export { findAll as findAllAmendements } from "./ameli";
2
2
  export { findAll as findAllDebats } from "./debats";
3
- export { findAll as findAllLois, findAuteur, findSenatRapportUrls, findSenatTexteUrls, } from "./dosleg";
3
+ export { findAll as findAllLois, findAuteur, findAuteurs, findSenatRapportUrls, findSenatTexteUrls, } from "./dosleg";
4
4
  export { findAll as findAllQuestions } from "./questions";
5
5
  export { findAll as findAllSens, findAllCirconscriptions, findAllOrganismes, } from "./sens";
@@ -4,7 +4,7 @@ import fs from "fs-extra";
4
4
  import path from "path";
5
5
  import { datasets, EnabledDatasets, getEnabledDatasets } from "../datasets";
6
6
  import { DATA_ORIGINAL_FOLDER, DOCUMENT_METADATA_FILE, DOSLEG_DOSSIERS_FOLDER, RAPPORT_FOLDER, SENS_CIRCONSCRIPTIONS_FOLDER, SENS_ORGANISMES_FOLDER, SENS_SENATEURS_FOLDER, TEXTE_FOLDER, } from "../loaders";
7
- import { findAllAmendements, findAllCirconscriptions, findAllDebats, findAllLois, findAllOrganismes, findAllQuestions, findAllSens, findAuteur, findSenatRapportUrls, findSenatTexteUrls, } from "../model";
7
+ import { findAllAmendements, findAllCirconscriptions, findAllDebats, findAllLois, findAllOrganismes, findAllQuestions, findAllSens, findAuteurs, findSenatRapportUrls, findSenatTexteUrls, } from "../model";
8
8
  import { UNDEFINED_SESSION } from "../types/sessions";
9
9
  import { getSessionFromDate, getSessionFromSignet } from "./datautil";
10
10
  import { commonOptions } from "./shared/cli_helpers";
@@ -66,11 +66,12 @@ async function convertDatasetDebats(dataDir) {
66
66
  }
67
67
  const debatsReorganizedRootDir = path.join(dataDir, dataset.database);
68
68
  ensureAndClearDir(debatsReorganizedRootDir);
69
+ const allAuteurs = await findAuteurs();
69
70
  for await (const debat of findAllDebats()) {
70
71
  if (options["verbose"]) {
71
72
  console.log(`Converting ${debat.id} file…`);
72
73
  }
73
- const enrichedDebat = await enrichDebat(debat);
74
+ const enrichedDebat = await enrichDebat(debat, allAuteurs);
74
75
  const session = getSessionFromDate(enrichedDebat.date_seance);
75
76
  const debatsReorganizedDir = path.join(debatsReorganizedRootDir, String(session));
76
77
  fs.ensureDirSync(debatsReorganizedDir);
@@ -78,20 +79,23 @@ async function convertDatasetDebats(dataDir) {
78
79
  fs.writeJSONSync(path.join(debatsReorganizedDir, debatFileName), enrichedDebat, { spaces: 2 });
79
80
  }
80
81
  }
81
- async function enrichDebat(debat) {
82
+ async function enrichDebat(debat, auteurs) {
82
83
  const enrichedDebat = { ...debat };
83
84
  for (const section of enrichedDebat.sections) {
84
85
  for (const intervention of section.interventions) {
85
- intervention.auteur = await findAuteur(intervention.auteur_code);
86
+ intervention.auteur = findAuteur(intervention.auteur_code, auteurs);
86
87
  }
87
88
  }
88
89
  for (const section of enrichedDebat.sections_divers) {
89
90
  for (const intervention of section.interventions) {
90
- intervention.auteur = await findAuteur(intervention.auteur_code);
91
+ intervention.auteur = findAuteur(intervention.auteur_code, auteurs);
91
92
  }
92
93
  }
93
94
  return enrichedDebat;
94
95
  }
96
+ function findAuteur(auteurCode, auteurs) {
97
+ return auteurs.find(auteur => auteur.code === auteurCode);
98
+ }
95
99
  async function convertDatasetDosLeg(dataDir) {
96
100
  const dataset = datasets.dosleg;
97
101
  if (!options["silent"]) {
@@ -9,5 +9,7 @@ export interface AgendaEvent {
9
9
  organe: string | null;
10
10
  objet: string | null;
11
11
  lieu: string | null;
12
- url_dossier_senat: string | null;
12
+ captationVideo: boolean;
13
+ urlDossierSenat: string | null;
14
+ quantieme: string | null;
13
15
  }
package/package.json CHANGED
@@ -1,6 +1,6 @@
1
1
  {
2
2
  "name": "@tricoteuses/senat",
3
- "version": "2.6.1",
3
+ "version": "2.7.1",
4
4
  "description": "Handle French Sénat's open data",
5
5
  "keywords": [
6
6
  "France",