mdbq 2.4.4__tar.gz → 2.4.6__tar.gz

{mdbq-2.4.4 → mdbq-2.4.6}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: mdbq
-Version: 2.4.4
+Version: 2.4.6
 Home-page: https://pypi.org/project/mdbsql
 Author: xigua, 
 Author-email: 2587125111@qq.com

{mdbq-2.4.4 → mdbq-2.4.6}/mdbq/aggregation/aggregation.py

@@ -1291,7 +1291,7 @@ def test2():
     dp.cleaning(is_move=False, )  # 清洗数据, 存入 self.datas
     dp.upload_df(service_databases=[
         # {'home_lx': 'mongodb'},
-        {'home_lx': 'mysql'},
+        {'company': 'mysql'},
         # {'nas': 'mysql'}
     ], path=None, service_name=None)
 

{mdbq-2.4.4 → mdbq-2.4.6}/mdbq/aggregation/query_data.py

@@ -2112,6 +2112,6 @@ def main():
 
 
 if __name__ == '__main__':
-    data_aggregation(service_databases=[{'company': 'mysql'}], months=0)  # 正常的聚合所有数据
+    data_aggregation(service_databases=[{'company': 'mysql'}], months=24)  # 正常的聚合所有数据
     # data_aggregation_one(service_databases=[{'company': 'mysql'}], months=1)  # 单独聚合某一个数据库，具体库进函数编辑
     # optimize_data.op_data(service_databases=[{'company': 'mysql'}], days=3650)  # 立即启动对聚合数据的清理工作

{mdbq-2.4.4 → mdbq-2.4.6}/mdbq/dataframe/converter.py

@@ -43,10 +43,13 @@ class DataFrameConverter(object):
             if col.lower() == 'id':
                 df.pop(col)  # 等待插入的 df 不能包含 id 列，否则可能跟现有 id 主键冲突
                 continue
-            if col.endswith('占比') or col.endswith('率'):
-                df = df.astype({col: float}, errors='raise')
+
             # 百分比在某些数据库中不兼容, 转换百分比为小数
             df[col] = df[col].apply(lambda x: float(float((str(x).rstrip("%"))) / 100) if str(x).endswith('%') and '~' not in str(x) else x)
+
+            if col.endswith('占比') or col.endswith('率'):
+                df = df.astype({col: float}, errors='raise')
+
             # 尝试转换合适的数据类型
             if df[col].dtype == 'object':
                 #  "_"符号会被错误识别

{mdbq-2.4.4 → mdbq-2.4.6}/mdbq/mysql/mysql.py

@@ -68,7 +68,7 @@ class MysqlUpload:
 
         return wrapper
 
-    # @try_except
+    @try_except
     def df_to_mysql(self, df, table_name, db_name='远程数据源', icm_update=[], service_database={'home_lx': 'mysql'}, move_insert=False, df_sql=False, drop_duplicates=False, filename=None, count=None, json_path=None, reset_id=False):
         """
         将 df 写入数据库
@@ -167,6 +167,7 @@ class MysqlUpload:
                     index=False,
                     chunksize=1000
                 )
+                # print(f'重置自增')
                 # 6. 重置自增列
                 try:
                     cursor.execute(f"SHOW COLUMNS FROM {table_name} LIKE 'id'")

{mdbq-2.4.4 → mdbq-2.4.6}/mdbq.egg-info/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: mdbq
-Version: 2.4.4
+Version: 2.4.6
 Home-page: https://pypi.org/project/mdbsql
 Author: xigua, 
 Author-email: 2587125111@qq.com

{mdbq-2.4.4 → mdbq-2.4.6}/setup.py

@@ -3,7 +3,7 @@
 from setuptools import setup, find_packages
 
 setup(name='mdbq',
-      version='2.4.4',
+      version='2.4.6',
       author='xigua, ',
       author_email="2587125111@qq.com",
       url='https://pypi.org/project/mdbsql',