mdbq 0.1.3__tar.gz → 0.1.5__tar.gz

{mdbq-0.1.3 → mdbq-0.1.5}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: mdbq
-Version: 0.1.3
+Version: 0.1.5
 Home-page: https://pypi.org/project/mdbsql
 Author: xigua, 
 Author-email: 2587125111@qq.com

{mdbq-0.1.3 → mdbq-0.1.5}/mdbq/dataframe/converter.py

@@ -24,6 +24,7 @@ class DataFrameConverter(object):
         df.replace(to_replace=['="'], value='', regex=True, inplace=True)  # ="和"不可以放在一起清洗, 因为有: id=86785565
         df.replace(to_replace=['"'], value='', regex=True, inplace=True)
         cols = df.columns.tolist()
+
         for col in cols:
             # df[col] = df[col].apply(lambda x: re.sub('[="]', '', str(x)) if '="' in str(x) else x)
             # 百分比在某些数据库中不兼容, 转换百分比为小数
@@ -31,9 +32,14 @@ class DataFrameConverter(object):
             # 尝试转换合适的数据类型
             if df[col].dtype == 'object':
                 try:
-                    df[col] = df[col].astype(int)  # 尝试转换 int
+                    # df[col] = df[col].astype(int)  # 尝试转换 int
+                    df[col] = df[col].apply(lambda x: int(x) if '_' not in str(x) else x)
                 except:
-                    df[col] = df[col].astype('float64', errors='ignore')    # 尝试转换 float, 报错则忽略
+                    # df[col] = df[col].astype('float64', errors='ignore')    # 尝试转换 float, 报错则忽略
+                    try:
+                        df[col] = df[col].apply(lambda x: float(x) if '_' not in str(x) else x)
+                    except:
+                        pass
             if df[col].dtype == 'float':  # 对于小数类型, 保留 6 位小数
                 df[col] = df[col].apply(lambda x: round(float(x), 6) if x != 0 else x)
             # 清理列名, 在 mysql 里面列名不能含有某些特殊字符

{mdbq-0.1.3 → mdbq-0.1.5}/mdbq/mysql/mysql.py

@@ -181,6 +181,8 @@ class MysqlUpload:
         # 最优先处理 ID 类型, 在 mysql 里面, 有些列数字过长不能存储为 int 类型
         if 'id' in col or 'ID' in col or 'Id' in col or '摘要' in col or '商家编码' in col or '单号' in col or '款号' in col:
             return 'mediumtext'
+        if '文件大小' in col:  # bw 程序
+            return 'mediumtext'
         elif '日期' in col or '时间' in col:
             try:
                 k = pd.to_datetime(df[col].tolist()[0])  # 检查是否可以转为日期

{mdbq-0.1.3 → mdbq-0.1.5}/mdbq.egg-info/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: mdbq
-Version: 0.1.3
+Version: 0.1.5
 Home-page: https://pypi.org/project/mdbsql
 Author: xigua, 
 Author-email: 2587125111@qq.com

{mdbq-0.1.3 → mdbq-0.1.5}/setup.py

@@ -3,7 +3,7 @@
 from setuptools import setup, find_packages
 
 setup(name='mdbq',
-      version='0.1.3',
+      version='0.1.5',
       author='xigua, ',
       author_email="2587125111@qq.com",
       url='https://pypi.org/project/mdbsql',