mdbq 4.0.30__py3-none-any.whl → 4.0.32__py3-none-any.whl

mdbq/__version__.py

@@ -1 +1 @@
-VERSION = '4.0.30'
+VERSION = '4.0.32'

mdbq/aggregation/query_data.py

@@ -1,6 +1,5 @@
 # -*- coding: UTF-8 –*-
 import re
-# from mdbq.mysql import mysql
 from mdbq.mysql import uploader
 from mdbq.mysql import s_query
 from mdbq.myconf import myconf
@@ -114,11 +113,13 @@ def upload_data_decorator(**upload_kwargs):
                 set_type = get_param_value('set_type', ['set_type', 'set_typ'])
                 db_name = get_param_value('db_name')
                 table_name = get_param_value('table_name')
+                logger.info('更新', {'库': db_name, '表': table_name, 'func': func.__name__, 'args': args, 'kwargs': kwargs})
 
                 # 执行原始函数
                 result = func(*args, **kwargs)
                 
                 if result is None:
+                    logger.info('函数返回None，直接返回原结果，不执行上传', {'库': db_name, '表': table_name, 'func': func.__name__})
                     return None
 
                 # 处理 DataFrame 结果
@@ -143,18 +144,19 @@ def upload_data_decorator(**upload_kwargs):
                     }
                     
                     uld.upload_data(data=result, **merged_kwargs)
+                    logger.info('上传完成', {'库': db_name, '表': table_name, 'func': func.__name__})
                     return True
 
                 # 处理元组结果
                 elif isinstance(result, tuple):
                     if len(result) < 2:
-                        logger.warning('函数返回的元组长度小于2，直接返回原结果，不执行上传', {'函数': func.__name__, '库': db_name, '表': table_name})
+                        logger.warning('函数返回的元组长度小于2，直接返回原结果，不执行上传', {'库': db_name, '表': table_name, 'func': func.__name__})
                         return result
 
                     df, extra_kwargs = result[0], result[1]
                     
                     if not isinstance(df, (pd.DataFrame, list, dict)):
-                        logger.warning('函数返回的元组第一个元素不是DataFrame/list/dict，直接返回原结果，不执行上传', {'函数': func.__name__, '库': db_name, '表': table_name})
+                        logger.warning('函数返回的元组第一个元素不是DataFrame/list/dict，直接返回原结果，不执行上传', {'库': db_name, '表': table_name, 'func': func.__name__})
                         return result
 
                     if set_type is not None:
@@ -179,13 +181,13 @@ def upload_data_decorator(**upload_kwargs):
                     }
                     
                     uld.upload_data(data=df, **merged_kwargs)
-                    
+                    logger.info('上传完成', {'库': db_name, '表': table_name, 'func': func.__name__})
                     return result if len(result) > 2 else True
-
+                logger.info('上传完成', {'库': db_name, '表': table_name, 'func': func.__name__})
                 return result
 
             except Exception as e:
-                logger.error('数据上传失败', {'函数': func.__name__, '库': db_name, '表': table_name, '错误': str(e)})
+                logger.error('数据上传失败', {'库': db_name, '表': table_name, 'func': func.__name__, '错误': str(e)})
                 return False
 
         return wrapper
@@ -311,7 +313,7 @@ class MysqlDatasQuery:
                      '成交笔数', '成交金额', '直接成交笔数', '直接成交金额', '自然流量曝光量']]
             }
         )
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
+        logger.info('更新', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         
         uld.upload_data(
             db_name=db_name,
@@ -362,7 +364,7 @@ class MysqlDatasQuery:
             '花费': 'decimal(12,2)',
             '更新时间': 'timestamp',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': '属性设置3', '表': '商品索引表_主推排序调用'})
+        logger.info('更新', {'主机': f'{host}:{port}', '库': '属性设置3', '表': '商品索引表_主推排序调用'})
         uld.upload_data(
             db_name='属性设置3',
             table_name='商品索引表_主推排序调用',
@@ -471,7 +473,6 @@ class MysqlDatasQuery:
             '直接成交笔数': 'int',
             '直接成交金额': 'decimal(12,2)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -578,7 +579,6 @@ class MysqlDatasQuery:
             '直接成交笔数': 'int',
             '直接成交金额': 'decimal(12,2)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -685,7 +685,6 @@ class MysqlDatasQuery:
             '直接成交笔数': 'int',
             '直接成交金额': 'decimal(12,2)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -761,7 +760,6 @@ class MysqlDatasQuery:
             '件均价': 'mediumint',
             '价格带': 'varchar(100)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -969,7 +967,6 @@ class MysqlDatasQuery:
             '用户年龄': 'varchar(100)',
             '人群分类': 'varchar(100)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1103,7 +1100,6 @@ class MysqlDatasQuery:
             '是否品牌词': 'varchar(100)',
             '词分类': 'varchar(100)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1270,7 +1266,6 @@ class MysqlDatasQuery:
             '直接成交笔数': 'int',
             '直接成交金额': 'decimal(12,2)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1379,7 +1374,7 @@ class MysqlDatasQuery:
             '品牌搜索量': 'int',
             '品牌搜索人数': 'int',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
+        logger.info('更新', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1428,7 +1423,7 @@ class MysqlDatasQuery:
             '三级类目': 'varchar(100)',
             '更新时间': 'timestamp'
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
+        logger.info('更新', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1479,7 +1474,6 @@ class MysqlDatasQuery:
             'sku地址': 'varchar(255)',
             '更新时间': 'timestamp'
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1529,7 +1523,6 @@ class MysqlDatasQuery:
         df['上市年份'] = df['商品id'].apply(lambda x: check_year(x))
         p = df.pop('上市年份')
         df.insert(loc=5, column='上市年份', value=p)
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         set_typ = {
             '日期': 'date',
             '店铺id': 'bigint',
@@ -1666,7 +1659,6 @@ class MysqlDatasQuery:
             '更新时间': 'timestamp',
             '上市年份': 'varchar(100)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1772,7 +1764,6 @@ class MysqlDatasQuery:
             '二级来源索引': 'smallint',
             '三级来源索引': 'smallint',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1810,7 +1801,6 @@ class MysqlDatasQuery:
             '天猫页面价': 'decimal(10,2)',
             '天猫中促价': 'decimal(10,2)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1915,7 +1905,6 @@ class MysqlDatasQuery:
             '直接加购数': 'int',
             '总加购数': 'int',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -1983,7 +1972,6 @@ class MysqlDatasQuery:
             '核心位置展现量': 'int',
             '核心位置点击量': 'int',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -2083,7 +2071,6 @@ class MysqlDatasQuery:
             'k_是否品牌词': 'varchar(100)',
             's_是否品牌词': 'varchar(100)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -2146,7 +2133,6 @@ class MysqlDatasQuery:
             '成交金额': 'decimal(10,2)',
             'sku_id': 'varchar(100)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -2209,7 +2195,6 @@ class MysqlDatasQuery:
             '成交金额': 'decimal(10,2)',
             'spu_id': 'varchar(100)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -2283,7 +2268,6 @@ class MysqlDatasQuery:
             '客单价': 'decimal(10,2)',
             'uv价值': 'decimal(10,2)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -2386,7 +2370,6 @@ class MysqlDatasQuery:
             '封面图': 'text',
             '更新时间': 'timestamp',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         ordered_columns = [
             '日期',
             '店铺名称',
@@ -2882,7 +2865,6 @@ class MysqlDatasQuery:
             '成交笔数': 'int',
             '成交金额': 'decimal(12,2)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -2972,7 +2954,6 @@ class MysqlDatasQuery:
             '数据更新时间': 'timestamp',
             '更新时间': 'timestamp',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -3021,7 +3002,6 @@ class MysqlDatasQuery:
             '长周期成交价值': 'decimal(13, 2)',
             '达摩盘id': 'int',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -3128,7 +3108,6 @@ class MysqlDatasQuery:
             '消费能力等级': 'varchar(100)',
             '用户性别': 'varchar(100)',
         }
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,
@@ -3517,7 +3496,6 @@ class MysqlDatasQuery:
             '自然流量曝光量': 'int',
         }
         df['日期'] = pd.to_datetime(df['日期'], format='%Y-%m-%d', errors='ignore')
-        logger.info('正在更新数据库', {'主机': f'{host}:{port}', '库': db_name, '表': table_name})
         return df, {
             'db_name': db_name,
             'table_name': table_name,

mdbq/myconf/myconf.py

@@ -151,9 +151,12 @@ class ConfigParser:
     def open(self, file_path: Union[str, Path]) -> 'ConfigParser':
         """打开配置文件"""
         file_path = Path(file_path)
+        logger.debug(f'尝试打开配置文件: {file_path}')
         if not file_path.exists() and not self.options.auto_create:
+            logger.error(f'配置文件不存在: {file_path}')
             raise ConfigException.file_not_found(file_path)
         self._current_file = file_path
+        logger.debug(f'配置文件已打开: {file_path}')
         return self
 
     def _ensure_file_open(self) -> None:
@@ -208,6 +211,7 @@ class ConfigParser:
     
     def _update_cache(self, file_path: str, config: Dict[str, Any]) -> None:
         """更新配置缓存"""
+        logger.debug(f'更新配置缓存: {file_path}')
         self._config_cache[file_path] = config
         self._cache_timestamps[file_path] = time.time()
     
@@ -232,11 +236,13 @@ class ConfigParser:
     def _clear_cache(self, file_path: Optional[str] = None) -> None:
         """清除配置缓存"""
         if file_path:
+            logger.debug(f'清除指定文件的缓存: {file_path}')
             self._config_cache.pop(file_path, None)
             self._cache_timestamps.pop(file_path, None)
             self._comments_cache.pop(file_path, None)
             self._section_map.pop(file_path, None)
         else:
+            logger.debug('清除所有配置缓存')
             self._config_cache.clear()
             self._cache_timestamps.clear()
             self._comments_cache.clear()
@@ -317,10 +323,12 @@ class ConfigParser:
                  default: Any = None, value_type: Optional[Type[T]] = None,
                  file_path: Optional[Union[str, Path]] = None) -> T:
         """获取指定配置项的值"""
+        logger.debug(f'获取配置项: section={section}, key={key}, file_path={file_path}')
         if file_path is None:
             self._ensure_file_open()
             file_path = self._current_file
         if not self._validate_key(key):
+            logger.error(f'无效的键名: {key}')
             raise ConfigException.invalid_key_error(key, file_path, section)
         config = self.read(file_path)
         section = section or self.options.default_section
@@ -328,11 +336,15 @@ class ConfigParser:
         original_section = self._get_original_section(str(file_path), normalized_section)
         if original_section is None:
             if default is not None:
+                logger.warning(f'节不存在，返回默认值: section={section}, key={key}, default={default}')
                 return default
+            logger.error(f'配置节不存在: {section}')
             raise ConfigException.section_not_found(file_path, section)
         if key not in config[original_section]:
             if default is not None:
+                logger.warning(f'键不存在，返回默认值: section={section}, key={key}, default={default}')
                 return default
+            logger.error(f'配置键不存在: {key}')
             raise ConfigException.key_not_found(file_path, original_section, key)
         value = config[original_section][key]
         if value_type is not None:
@@ -344,6 +356,7 @@ class ConfigParser:
                   value_types: Optional[Dict[str, Type]] = None,
                   file_path: Optional[Union[str, Path]] = None) -> Dict[str, Any]:
         """批量获取多个配置项的值"""
+        logger.debug(f'批量获取配置项: section={section}, keys={keys}, file_path={file_path}')
         if file_path is None:
             self._ensure_file_open()
             file_path = self._current_file
@@ -375,6 +388,7 @@ class ConfigParser:
                           value_types: Optional[Dict[str, Type]] = None,
                           file_path: Optional[Union[str, Path]] = None) -> Tuple[Any, ...]:
         """获取指定节点下多个键的值元组"""
+        logger.debug(f'获取节下多个键的值: section={section}, keys={keys}, file_path={file_path}')
         if file_path is None:
             self._ensure_file_open()
             file_path = self._current_file
@@ -405,6 +419,7 @@ class ConfigParser:
                  value_type: Optional[Type] = None,
                  file_path: Optional[Union[str, Path]] = None) -> None:
         """设置指定配置项的值"""
+        logger.debug(f'准备写入配置项: section={section}, key={key}, value={value}, file_path={file_path}')
         if file_path is None:
             self._ensure_file_open()
             file_path = self._current_file
@@ -412,6 +427,7 @@ class ConfigParser:
             file_path = Path(file_path)
             
         if not self._validate_key(key):
+            logger.error(f'无效的键名: {key}')
             raise ConfigException.invalid_key_error(key, file_path, section)
             
         section = section or self.options.default_section
@@ -436,6 +452,7 @@ class ConfigParser:
                     else:
                         value = value_type(value)
                 except (ValueError, TypeError) as e:
+                    logger.error(f'类型转换失败: value={value}, type={value_type}, error={e}')
                     raise ConfigException.conversion_error(value, value_type, file_path, section=section, key=key)
                     
             if isinstance(value, bool):
@@ -492,17 +509,21 @@ class ConfigParser:
                     file.write(f'{key}={value}\n')
                     
             self._clear_cache(str(file_path))
+            logger.info(f'配置项写入成功: section={section}, key={key}, value={value}, file_path={file_path}')
             
         except Exception as e:
+            logger.error(f'写入配置项失败: section={section}, key={key}, value={value}, file_path={file_path}, error={e}')
             raise ConfigException.write_error(file_path, e)
 
     def set_values(self, section: Optional[str] = None, values: Dict[str, Any] = None,
                   value_types: Optional[Dict[str, Type]] = None,
                   file_path: Optional[Union[str, Path]] = None) -> None:
         """批量设置多个配置项的值"""
+        logger.debug(f'批量写入配置项: section={section}, keys={list(values.keys())}, file_path={file_path}')
         for key, value in values.items():
             value_type = value_types.get(key) if value_types else None
             self.set_value(section, key, value, value_type, file_path)
+        logger.info(f'批量写入配置项完成: section={section}, file_path={file_path}')
 
     def validate_config(self, section: Optional[str] = None, schema: Dict[str, Type] = None,
                        file_path: Optional[Union[str, Path]] = None) -> bool:
@@ -539,12 +560,15 @@ class ConfigParser:
         else:
             file_path = Path(file_path)
         
+        logger.debug(f'开始读取配置文件: {file_path}')
         cached_config = self._get_cached_config(str(file_path))
         if cached_config is not None:
+            logger.debug(f'命中配置缓存: {file_path}')
             return cached_config
         
         if not file_path.exists():
             if not self.options.auto_create:
+                logger.error(f'配置文件不存在: {file_path}')
                 raise ConfigException.file_not_found(file_path)
             logger.info(f'配置文件不存在，将创建: {file_path}')
             file_path.parent.mkdir(parents=True, exist_ok=True)
@@ -568,6 +592,7 @@ class ConfigParser:
                     if stripped_line.startswith('[') and stripped_line.endswith(']'):
                         current_section = stripped_line[1:-1]
                         if not self._validate_key(current_section):
+                            logger.error(f'无效的节名: {current_section}')
                             raise ConfigException.invalid_section_error(current_section, file_path)
                         self._update_section_map(str(file_path), current_section)
                         if current_section not in config:
@@ -581,6 +606,7 @@ class ConfigParser:
                     if key_value:
                         key, value = key_value
                         if not self._validate_key(key):
+                            logger.error(f'无效的键名: {key}')
                             raise ConfigException.invalid_key_error(key, file_path, current_section)
                         value, comment = self._extract_comment(value)
                         
@@ -595,9 +621,11 @@ class ConfigParser:
                             self._comments_cache.setdefault(str(file_path), {}).setdefault(current_section, []).append(comment)
                 
                 self._update_cache(str(file_path), config)
+                logger.debug(f'配置文件读取成功: {file_path}')
                 return config
                 
         except Exception as e:
+            logger.error(f'读取配置文件失败: {file_path}, error={e}')
             raise ConfigException.read_error(file_path, e)
 
 

mdbq/mysql/deduplicator.py

@@ -64,8 +64,8 @@ class MySQLDeduplicator:
             max_retries: int = 3,
             retry_waiting_time: int = 5,
             pool_size: int = 20,
-            mincached: int = 5,
-            maxcached: int = 10,
+            mincached: int = 0,
+            maxcached: int = 0,
             primary_key: str = 'id',
             date_range: Optional[List[str]] = None,
             recent_month: Optional[int] = None,
@@ -85,8 +85,9 @@ class MySQLDeduplicator:
         :param exclude_databases: 排除的数据库名列表
         :param exclude_tables: 排除的表名字典 {数据库名: [表名, ...]}
         :param duplicate_keep_mode: 'keep_one'（默认，重复组保留一条），'remove_all'（全部删除重复组）
-        :param mincached: 连接池空闲连接数
-        :param maxcached: 连接池最大缓存连接数
+        :param mincached: 空闲连接数量
+        :param maxcached: 最大空闲连接数, 0表示不设上限, 由连接池自动管理
+        
         """
         # 连接池状态标志
         self._closed = False
@@ -978,18 +979,6 @@ class MySQLDeduplicator:
                 r[1] for db in all_results.values()
                 for r in db.values()
             )
-            logger.debug('全局完成', {
-                "总重复组": total_dup, 
-                "总删除行": total_del, 
-                "参数": {
-                    "模拟运行": dry_run, 
-                    "并行处理": parallel, 
-                    '排除列': self.exclude_columns, 
-                    '重排id': reorder_id, 
-                    'use_python_dedup': use_python_dedup
-                    }, 
-                "详细结果": dict(all_results)
-                })
             # 只显示有删除的详细结果
             if total_del > 0:
                 filtered_results = {

mdbq/mysql/s_query.py

@@ -35,7 +35,7 @@ class QueryDatas:
     """
 
     def __init__(self, username: str, password: str, host: str, port: int, charset: str = 'utf8mb4',
-                 pool_size: int = 20, mincached: int = 2, maxcached: int = 5,
+                 pool_size: int = 20, mincached: int = 0, maxcached: int = 0,
                  connect_timeout: int = 10, read_timeout: int = 30, write_timeout: int = 30,
                  max_retries: int = 3, retry_waiting_time: int = 5, collation: str = 'utf8mb4_0900_ai_ci') -> None:
         """
@@ -48,8 +48,8 @@ class QueryDatas:
             port: 数据库端口
             charset: 字符集，默认utf8mb4
             pool_size: 最大活动连接数，默认20
-            mincached: 最小缓存连接数，空闲连接数量，默认2
-            maxcached: 最大缓存连接数，最大空闲连接数，默认5
+            mincached: 空闲连接数量
+            maxcached: 最大空闲连接数, 0表示不设上限, 由连接池自动管理
             connect_timeout: 连接超时时间，默认10秒
             read_timeout: 读取超时时间，默认30秒
             write_timeout: 写入超时时间，默认30秒

mdbq/mysql/unique_.py

@@ -33,8 +33,8 @@ class UniqueManager:
         self.pool = PooledDB(
             creator=pymysql,
             maxconnections=10,
-            mincached=2,
-            maxcached=5,
+            mincached=0,
+            maxcached=0,
             blocking=True,
             host=self.host,
             user=self.username,

mdbq/mysql/uploader.py

@@ -87,6 +87,8 @@ class MySQLUploader:
             max_retries: int = 10,
             retry_waiting_time: int = 10,
             pool_size: int = 5,
+            mincached: int = 0,
+            maxcached: int = 0,
             connect_timeout: int = 10,
             read_timeout: int = 30,
             write_timeout: int = 30,
@@ -104,6 +106,8 @@ class MySQLUploader:
         :param max_retries: 最大重试次数，默认为10
         :param retry_waiting_time: 重试间隔(秒)，默认为10
         :param pool_size: 连接池大小，默认为5
+        :param mincached: 空闲连接数量
+        :param maxcached: 最大空闲连接数, 0表示不设上限, 由连接池自动管理
         :param connect_timeout: 连接超时(秒)，默认为10
         :param read_timeout: 读取超时(秒)，默认为30
         :param write_timeout: 写入超时(秒)，默认为30
@@ -118,6 +122,8 @@ class MySQLUploader:
         self.max_retries = max(max_retries, 1)
         self.retry_waiting_time = max(retry_waiting_time, 1)
         self.pool_size = max(pool_size, 1)
+        self.mincached = mincached
+        self.maxcached = maxcached
         self.connect_timeout = connect_timeout
         self.read_timeout = read_timeout
         self.write_timeout = write_timeout
@@ -149,6 +155,8 @@ class MySQLUploader:
             'charset': self.charset,
             'cursorclass': pymysql.cursors.DictCursor,
             'maxconnections': self.pool_size,
+            'mincached': self.mincached,
+            'maxcached': self.maxcached,
             'ping': 7,
             'connect_timeout': self.connect_timeout,
             'read_timeout': self.read_timeout,