mdbq 1.3.5__tar.gz → 1.3.7__tar.gz

{mdbq-1.3.5 → mdbq-1.3.7}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: mdbq
-Version: 1.3.5
+Version: 1.3.7
 Home-page: https://pypi.org/project/mdbsql
 Author: xigua, 
 Author-email: 2587125111@qq.com

{mdbq-1.3.5 → mdbq-1.3.7}/mdbq/aggregation/aggregation.py

@@ -601,7 +601,7 @@ class DatabaseUpdate:
 
     def upload_df(self, service_databases=[{}], path=None, system_name=None):
         """
-        将清洗后的 df 上传数据库
+        将清洗后的 df 上传数据库, copysh.py 调用
         """
         df_to_json = df_types.DataTypes()  # json 文件, 包含数据的 dtypes 信息
         for service_database in service_databases:
@@ -980,9 +980,9 @@ def test2():
 
 
 if __name__ == '__main__':
-    # username, password, host, port = get_myconf.select_config_values(target_service='nas', database='mysql')
-    # print(username, password, host, port)
-    file_dir(one_file=False)
+    username, password, host, port = get_myconf.select_config_values(target_service='nas', database='mysql')
+    print(username, password, host, port)
+    # file_dir(one_file=False)
     # one_file_to_mysql(
     #     file='/Users/xigua/数据中心/原始文件2/推广报表/品销宝/账户/账户_明星店铺报表_2023-11-13_2023-12-12.csv',
     #     db_name='推广数据2',

{mdbq-1.3.5 → mdbq-1.3.7}/mdbq/aggregation/query_data.py

@@ -500,6 +500,7 @@ def data_aggregation(service_databases=[{}], months=1, system_name=None,):
     1. 从数据库中读取数据
     2. 数据聚合清洗
     3. 统一回传数据库: <聚合数据>  （不再导出为文件）
+    公司台式机调用
     """
     for service_database in service_databases:
         for service_name, database in service_database.items():
@@ -580,6 +581,7 @@ def data_aggregation(service_databases=[{}], months=1, system_name=None,):
                 system_name=system_name,
             )
 
+    # 这是 optimize_data.py 独立的程序，但不在这里清洗数据, 而是通过修改配置文件的方式触发 optimize_datas.py(有s)程序进行全局清理
     # optimize_data.op_data(service_databases=service_databases, days=3650)  # 立即启动对聚合数据的清理工作
 
 

{mdbq-1.3.5 → mdbq-1.3.7}/mdbq/company/copysh.py

@@ -301,18 +301,18 @@ def op_data(days: int =3650):
         s = mysql.OptimizeDatas(username=username, password=password, host=host, port=port)
         s.db_name_lists = [
             '京东数据2',
-            '天猫数据2',
+            '推广数据2',
             '市场数据2',
-            '生意参谋数据2',
+            '生意参谋2',
             '生意经2',
             '属性设置2',
-            # '聚合数据',
+            '聚合数据',
         ]
         s.days = days
         s.optimize_list()
 
     # 聚合数据，并清理聚合数据
-    query_data.data_aggregation(service_databases=[{'company': 'mysql'}])
+    query_data.data_aggregation(service_databases=[{'company': 'mysql'}], months=1, system_name='company')
 
 
 
@@ -328,7 +328,7 @@ def main():
 
             dp = aggregation.DatabaseUpdate(path=d_path)
             dp.new_unzip(is_move=True)
-            dp.cleaning(is_move=True)  # 公司台式机需要移除
+            dp.cleaning(is_move=True)  # 公司台式机需要移除自身下载的文件
             dp.upload_df(service_databases=[{'company': 'mysql'}])
 
             # 此操作用于修改 .copysh_conf 文件，将 ch_record 改为 false (更新完成)
@@ -343,8 +343,6 @@ def main():
 
 
 if __name__ == '__main__':
-    # main()
-    dp = aggregation.DatabaseUpdate(path='')
-    # dp.new_unzip(is_move=True)
-    # dp.cleaning(is_move=True)  # 公司台式机需要移除
-    # dp.upload_df(service_databases=[{'company': 'mysql'}])
+    main()
+    # # 聚合数据，并清理聚合数据
+    # query_data.data_aggregation(service_databases=[{'company': 'mysql'}], months=1, system_name='company')

{mdbq-1.3.5 → mdbq-1.3.7}/mdbq.egg-info/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: mdbq
-Version: 1.3.5
+Version: 1.3.7
 Home-page: https://pypi.org/project/mdbsql
 Author: xigua, 
 Author-email: 2587125111@qq.com

{mdbq-1.3.5 → mdbq-1.3.7}/setup.py

@@ -3,7 +3,7 @@
 from setuptools import setup, find_packages
 
 setup(name='mdbq',
-      version='1.3.5',
+      version='1.3.7',
       author='xigua, ',
       author_email="2587125111@qq.com",
       url='https://pypi.org/project/mdbsql',