mdbq 3.1.6__tar.gz → 3.1.8__tar.gz

{mdbq-3.1.6 → mdbq-3.1.8}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: mdbq
-Version: 3.1.6
+Version: 3.1.8
 Home-page: https://pypi.org/project/mdbq
 Author: xigua, 
 Author-email: 2587125111@qq.com

{mdbq-3.1.6 → mdbq-3.1.8}/mdbq/dataframe/converter.py

@@ -61,7 +61,10 @@ class DataFrameConverter(object):
             if df[col].dtype == 'object':
                 #  "_"符号会被错误识别
                 try:
-                    df[col] = df[col].apply(lambda x: int(x) if '_' not in str(x) and '.' not in str(x) else x)  # 不含小数点尝试转整数
+                    # 不能直接使用 int() ，对于大数，可能转为uint64，导致数据库入库可能异常
+                    df[col] = df[col].apply(
+                        lambda x: np.int64(str(x)) if '_' not in str(x) and '.' not in str(x) else x)  # 不含小数点尝试转整数
+                    # df[col] = df[col].apply(lambda x: int(x) if '_' not in str(x) and '.' not in str(x) else x)  # 不含小数点尝试转整数
                 except:
                     pass
                 if df[col].dtype == 'object':

{mdbq-3.1.6 → mdbq-3.1.8}/mdbq/mysql/mysql.py

@@ -381,8 +381,9 @@ class MysqlUpload:
             df[col] = df[col].apply(lambda x: float(re.sub(r'%$', '', str(x))) / 100 if (
                     str(x) != '' and str(x).endswith('%')) and not re.findall('[\\u4e00-\\u9fa5]', str(x)) else '0.0' if str(x) == '0%' else x)
             try:
+                # 不能直接使用 int() ，对于大数，可能转为uint64，导致数据库入库可能异常
                 df[col] = df[col].apply(
-                    lambda x: int(x) if '_' not in str(x) and '.' not in str(x) else x)  # 不含小数点尝试转整数
+                    lambda x: np.int64(str(x)) if '_' not in str(x) and '.' not in str(x) else x)  # 不含小数点尝试转整数
             except:
                 pass
             try:

{mdbq-3.1.6 → mdbq-3.1.8}/mdbq/other/download_sku_picture.py

@@ -978,6 +978,7 @@ def download_spu(username, password, host, port, col_name='白底图', save_path
     df['日期'] = df['日期'].astype('datetime64[ns]')
     df.sort_values(by=['商品id', '日期'], ascending=[False, True], ignore_index=True, inplace=True)
     df.drop_duplicates(subset=['商品id'], keep='last', inplace=True, ignore_index=True)
+    df = df.head(30)
     # df = df.head(2)
     if len(df) > 0:
         #  5. 实例化一个下载器类，并下载数据

{mdbq-3.1.6 → mdbq-3.1.8}/mdbq.egg-info/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: mdbq
-Version: 3.1.6
+Version: 3.1.8
 Home-page: https://pypi.org/project/mdbq
 Author: xigua, 
 Author-email: 2587125111@qq.com

{mdbq-3.1.6 → mdbq-3.1.8}/setup.py

@@ -3,7 +3,7 @@
 from setuptools import setup, find_packages
 
 setup(name='mdbq',
-      version='3.1.6',
+      version='3.1.8',
       author='xigua, ',
       author_email="2587125111@qq.com",
       url='https://pypi.org/project/mdbq',