pyxllib 0.3.122__tar.gz → 0.3.123__tar.gz

{pyxllib-0.3.122/pyxllib.egg-info → pyxllib-0.3.123}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: pyxllib
-Version: 0.3.122
+Version: 0.3.123
 Summary: 厦门理工模式识别团队通用python代码工具库
 Home-page: https://github.com/XLPRUtils/pyxllib
 Author: code4101

{pyxllib-0.3.122 → pyxllib-0.3.123}/pyxllib/data/pglib.py

@@ -58,13 +58,17 @@ class Connection(psycopg.Connection, SqlBase):
     def __1_库(self):
         pass
 
-    def get_db_activities(self):
+    def get_db_activities(self, datname=None):
         """
         检索当前数据库的活动信息。
+
+        :param datname: 这个字段理论上应该要能自动检测出来才对，但这会急着没空钻研，先手动输入吧
         """
         sql = SqlBuilder('pg_stat_activity')
         sql.select('pid', 'datname', 'usename', 'state', 'query', 'age(now(), query_start) AS "query_age"')
         sql.where("state = 'active'")
+        if datname:
+            sql.where(f"datname = '{datname}'")
         return self.exec2dict(sql.build_select()).fetchall()
 
     def __2_表格(self):

{pyxllib-0.3.122 → pyxllib-0.3.123}/pyxllib/file/specialist/filelib.py

@@ -1112,7 +1112,7 @@ class XlPath(type(pathlib.Path())):
             s = str(best_match)
             encoding = best_match.encoding
         else:
-            with open(self, 'r', encoding=encoding) as f:
+            with open(self, 'r', encoding=encoding, errors=errors) as f:
                 s = f.read()
 
         # 如果用\r\n作为换行符会有一些意外不好处理
@@ -1212,7 +1212,7 @@ class XlPath(type(pathlib.Path())):
         :param int max_items: 限制读取的条目数，默认为None，表示读取所有条目
         :param int batch_size:
             默认为None，表示一次性读取所有数据
-            如果设置了数值，则会流式读取，常用语太大，超过内存大小等的jsonl文件读取
+            如果设置了数值，则会流式读取，常用于太大，超过内存大小等的jsonl文件读取
                 注意如果设置了大小，只是底层每次一批读取的大小，但返回的data仍然是一维的数据格式迭代器
         :return: 返回读取到的数据列表，如果return_mode为True，则同时返回文件编码格式
 
@@ -1248,10 +1248,10 @@ class XlPath(type(pathlib.Path())):
         else:
             return data
 
-    def write_jsonl(self, list_data, ensure_ascii=False, default=None, mode='w'):
+    def write_jsonl(self, list_data, ensure_ascii=False, default=None, mode='w', errors=None):
         """ 由于这种格式主要是跟商汤这边对接，就尽量跟它们的格式进行兼容 """
         content = '\n'.join([json.dumps(x, ensure_ascii=ensure_ascii, default=default) for x in list_data])
-        self.write_text_unix(content + '\n', mode=mode)
+        self.write_text_unix(content + '\n', mode=mode, errors=errors)
 
     def add_json_line(self, data, ensure_ascii=False, default=None, mode='a'):
         """ 在文件末尾添加一行JSON数据 """

{pyxllib-0.3.122 → pyxllib-0.3.123}/pyxllib/file/xlsxlib.py

@@ -121,7 +121,7 @@ def is_valid_excel_address(address):
         return is_valid_excel_cell(address)
 
 
-@run_once('str', debug=True)
+@run_once('str')
 def xlfmt2pyfmt_date(xl_fmt):
     """ 日期的渲染操作
 
@@ -2478,7 +2478,11 @@ def extract_workbook_summary2(file_path, *,
     res['fileName'] = file_path.name
     start_time = time.time()
     wb, suffix = load_as_xlsx_file(file_path, keep_links=keep_links, keep_vba=keep_vba)
-    res['fileType'] = suffix or 'error'
+    if suffix:
+        res['fileType'] = suffix
+    else:
+        res['error'] = 'fileType error'
+
     load_time = time.time() - start_time
     if wb is None:  # 不支持的文件类型，不报错，只是返回最基本的文件名信息
         if return_mode == 1:
@@ -2959,6 +2963,9 @@ class WorkbookSummary3:
             return y
 
         x = summary2
+        if 'error' in x:
+            return x
+
         y = {
             'fileName': x['fileName'],
             'fileType': x['fileType'],

{pyxllib-0.3.122 → pyxllib-0.3.123}/pyxllib/prog/pupil.py

@@ -1129,6 +1129,7 @@ def support_multi_processes(default_processes=1):
         def wrapper(*args, **kwargs):
             process_count = int(kwargs.pop('process_count', default_processes))
             process_id = kwargs.pop('process_id', None)
+            shell = kwargs.pop('shell', False)
 
             if process_count == 1 or process_id is not None:
                 if process_id is None:
@@ -1150,7 +1151,7 @@ def support_multi_processes(default_processes=1):
                     for k, v in kwargs.items():
                         cmds.append(f'--{k}')  # 添加关键字参数的键
                         cmds.append(str(v))  # 添加关键字参数的值
-                    mpl.add_process_python(sys.argv[0], cmds)
+                    mpl.add_process_python(sys.argv[0], cmds, shell=shell)
                 mpl.run_endless()
 
         return wrapper

{pyxllib-0.3.122 → pyxllib-0.3.123}/pyxllib/text/jiebalib.py

@@ -250,7 +250,7 @@ class TextClassifier:
         return sims[:maxn]
 
     def refine_vecs(self):
-        """ 优化向量数据 """
+        """ 优化向量数据，去掉权重小余0.0001的维度 """
         # 1 计算每个向量的长度
         vecs = []
         for vec in tqdm(self.vecs, '优化向量'):

{pyxllib-0.3.122 → pyxllib-0.3.123/pyxllib.egg-info}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: pyxllib
-Version: 0.3.122
+Version: 0.3.123
 Summary: 厦门理工模式识别团队通用python代码工具库
 Home-page: https://github.com/XLPRUtils/pyxllib
 Author: code4101

{pyxllib-0.3.122 → pyxllib-0.3.123}/setup.py

@@ -45,7 +45,7 @@ _dir = Path(__file__).parent
 
 setup(
     name='pyxllib',  # pip 安装时用的名字
-    version='0.3.122',  # 当前版本，每次更新上传到pypi都需要修改; 第4位版本号一般是修紧急bug
+    version='0.3.123',  # 当前版本，每次更新上传到pypi都需要修改; 第4位版本号一般是修紧急bug
     author='code4101',
     author_email='877362867@qq.com',
     url='https://github.com/XLPRUtils/pyxllib',

{pyxllib-0.3.122 → pyxllib-0.3.123}/pyxllib.egg-info/requires.txt

@@ -21,28 +21,28 @@ Jinja2
 pandas>=0.23.4
 
 [xlai]
-visdom
+pynvml
 pillow
+visdom
 opsdroid-get-image-size
-pynvml
 opencv-python
 
 [xlall]
+sentencepiece
+flask-wtf
+flask-cors
+ujson
 flask
+zhconv
 pillow
-html2text
-flask-restful
 opsdroid-get-image-size
-flask-cors
-xlrd
-flask-wtf
 flask-jwt-extended
-ujson
+xlrd
 opencv-python
-sentencepiece
-zhconv
+flask-restful
+html2text
 
 [xlcv]
-opsdroid-get-image-size
-opencv-python
 pillow
+opencv-python
+opsdroid-get-image-size