edb-noumea 0.2.7__tar.gz → 0.2.9__tar.gz

{edb_noumea-0.2.7 → edb_noumea-0.2.9}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.4
 Name: edb-noumea
-Version: 0.2.7
+Version: 0.2.9
 Summary: Un scraper pour la qualité des eaux de baignade à Nouméa.
 Project-URL: Homepage, https://github.com/adriens/edb-noumea
 Project-URL: Repository, https://github.com/adriens/edb-noumea

{edb_noumea-0.2.7 → edb_noumea-0.2.9}/edb_noumea/details.py

@@ -90,30 +90,48 @@ def get_detailed_results():
 
     print(f"✅ {len(tables)} tableau(x) trouvé(s). Affichage du premier.")
     df = tables[0]
-
-    # --- Nettoyage du DataFrame ---
-    columns_to_keep = {
-        df.columns[0]: "site",
-        df.columns[1]: "point_de_prelevement",
-        df.columns[2]: "date",
-        df.columns[4]: "heure",
-        df.columns[6]: "e_coli_npp_100ml",
-        df.columns[9]: "enterocoques_npp_100ml"
+    print("\n--- Aperçu du tableau extrait (toutes colonnes) ---")
+    with pd.option_context('display.max_columns', None):
+        print(df)
+    print("\nColonnes:", list(df.columns))
+    print("Shape:", df.shape)
+
+    # Sélectionne et renomme les colonnes demandées
+    columns_map = {
+        'Unnamed: 0': 'Nom du site de baignade',
+        'Unnamed: 1': 'Point de prélèvement',
+        'Unnamed: 2': 'Date du prélèvement',
+        'Unnamed: 3': 'Heure du prélèvement',
+        'Escherichia': 'Escherichia coli (NPP/100ml)',
+        'Entérocoques': 'Entérocoques intestinaux (NPP/100ml)'
     }
-    cleaned_df = df[columns_to_keep.keys()].copy()
-    cleaned_df.rename(columns=columns_to_keep, inplace=True)
-    cleaned_df.replace({'<10': 0}, inplace=True)
-    cleaned_df['e_coli_npp_100ml'] = pd.to_numeric(cleaned_df['e_coli_npp_100ml'], errors='coerce')
-    cleaned_df['enterocoques_npp_100ml'] = pd.to_numeric(cleaned_df['enterocoques_npp_100ml'], errors='coerce')
-    cleaned_df.fillna(0, inplace=True)
-
-    # Split de la colonne point_de_prelevement
-    split_points = cleaned_df['point_de_prelevement'].str.split(',', n=1, expand=True)
-    cleaned_df['id_point_prelevement'] = split_points[0].str.strip()
-    cleaned_df['desc_point_prelevement'] = split_points[1].str.strip() if split_points.shape[1] > 1 else ''
-
-    # Conversion explicite de la colonne 'date' en type date Python
-    cleaned_df['date'] = pd.to_datetime(cleaned_df['date'], format='%d/%m/%Y', errors='coerce').dt.date
+    cleaned_df = df[list(columns_map.keys())].rename(columns=columns_map)
+    # Supprime la première ligne (ligne d'en-tête du PDF)
+    cleaned_df = cleaned_df.iloc[1:].reset_index(drop=True)
+    # Renomme les colonnes pour correspondre au style Python
+    cleaned_df = cleaned_df.rename(columns={
+        "Nom du site de baignade": "site",
+        "Point de prélèvement": "point_de_prelevement",
+        "Date du prélèvement": "date",
+        "Heure du prélèvement": "heure",
+        "Escherichia coli (NPP/100ml)": "e_coli_npp_100ml",
+        "Entérocoques intestinaux (NPP/100ml)": "enterocoques_npp_100ml"
+    })
+
+    # Ajoute deux colonnes issues du split de 'point_de_prelevement'
+    split_points = cleaned_df["point_de_prelevement"].str.split(",", n=1, expand=True)
+    cleaned_df["id_point_prelevement"] = split_points[0].str.strip()
+    cleaned_df["desc_point_prelevement"] = split_points[1].str.strip() if split_points.shape[1] > 1 else ""
+
+    # S'assurer que la colonne 'heure' est bien présente et de type string
+    if "heure" in cleaned_df.columns:
+        cleaned_df["heure"] = cleaned_df["heure"].astype(str)
+
+    # Nettoyer et convertir les colonnes e_coli_npp_100ml et enterocoques_npp_100ml
+    for col in ["e_coli_npp_100ml", "enterocoques_npp_100ml"]:
+        if col in cleaned_df.columns:
+            cleaned_df[col] = cleaned_df[col].replace(r"<\s*10", "10", regex=True)
+            cleaned_df[col] = pd.to_numeric(cleaned_df[col], errors="coerce").astype('Int64')
 
     return cleaned_df
 

{edb_noumea-0.2.7 → edb_noumea-0.2.9}/edb_noumea.egg-info/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.4
 Name: edb-noumea
-Version: 0.2.7
+Version: 0.2.9
 Summary: Un scraper pour la qualité des eaux de baignade à Nouméa.
 Project-URL: Homepage, https://github.com/adriens/edb-noumea
 Project-URL: Repository, https://github.com/adriens/edb-noumea

{edb_noumea-0.2.7 → edb_noumea-0.2.9}/pyproject.toml

@@ -1,6 +1,6 @@
 [project]
 name = "edb-noumea"
-version = "0.2.7"
+version = "0.2.9"
 description = "Un scraper pour la qualité des eaux de baignade à Nouméa."
 dependencies = [
     "requests",