complex-text-tools 0.2.2__tar.gz → 0.2.4__tar.gz

{complex_text_tools-0.2.2 → complex_text_tools-0.2.4}/CHANGELOG.md

@@ -5,6 +5,21 @@
 格式基于 [Keep a Changelog](https://keepachangelog.com/en/1.0.0/)，
 项目遵循 [语义化版本控制](https://semver.org/spec/v2.0.0.html) 规范。
 
+## [0.2.4] - 2026-01-21
+
+### 修复
+- 修复 `fix_punctuation` 函数以正确处理标点符号一边是中文的情况
+  - 现在只要标点符号的任意一边是中文，就会转换为中文标点
+  - 解决了如 "1.3%,且" 这种中英文混合场景下标点符号未转换的问题
+
+## [0.2.3] - 2026-01-20
+
+### 新增
+- 添加 `fix_punctuation` 函数，用于修复中文文本中的标点符号
+  - 将英文标点转换为中文标点（如 `,` → `，`, `.` → `。`）
+  - 自动处理中文文本中的标点符号
+  - 移除重复的标点符号
+
 ## [0.2.2] - 2025-09-22
 
 ### 修复

{complex_text_tools-0.2.2/complex_text_tools.egg-info → complex_text_tools-0.2.4}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: complex-text-tools
-Version: 0.2.2
+Version: 0.2.4
 Summary: A package for processing complex text with mixed Chinese and English characters
 Home-page: https://github.com/mooremok/complex-text-tools
 Author: mooremok
@@ -38,6 +38,7 @@ Requires-Dist: pytest>=6.0; extra == "dev"
 - 移除中英文字符之间的多余空格
 - 正确处理标点符号周围的间距
 - 根据特定规则计算文本长度（中文字符、英文单词、数字、等式等）
+- 修复中文文本中的标点符号（将英文标点转换为中文标点）
 - 高效处理混合语言文本
 
 ## 安装
@@ -70,6 +71,17 @@ print(result)
 # 输出:15
 ```
 
+### 修复标点符号
+
+```python
+from complex_text_tools import fix_punctuation
+
+text = "这是中文文本，但使用了英文标点.这看起来不太自然，对吗？"
+fixed_text = fix_punctuation(text)
+print(fixed_text)
+# 输出: "这是中文文本，但使用了中文标点。这看起来不太自然，对吗？"
+```
+
 ## 许可证
 
 该项目基于 MIT 许可证 - 详情请见 [LICENSE](LICENSE) 文件。

{complex_text_tools-0.2.2 → complex_text_tools-0.2.4}/README.md

@@ -12,6 +12,7 @@
 - 移除中英文字符之间的多余空格
 - 正确处理标点符号周围的间距
 - 根据特定规则计算文本长度（中文字符、英文单词、数字、等式等）
+- 修复中文文本中的标点符号（将英文标点转换为中文标点）
 - 高效处理混合语言文本
 
 ## 安装
@@ -44,6 +45,17 @@ print(result)
 # 输出:15
 ```
 
+### 修复标点符号
+
+```python
+from complex_text_tools import fix_punctuation
+
+text = "这是中文文本，但使用了英文标点.这看起来不太自然，对吗？"
+fixed_text = fix_punctuation(text)
+print(fixed_text)
+# 输出: "这是中文文本，但使用了中文标点。这看起来不太自然，对吗？"
+```
+
 ## 许可证
 
 该项目基于 MIT 许可证 - 详情请见 [LICENSE](LICENSE) 文件。

{complex_text_tools-0.2.2 → complex_text_tools-0.2.4}/complex_text_tools/__init__.py

@@ -6,7 +6,7 @@ This package provides utilities for:
 2. Counting effective text length according to specific rules
 """
 
-from .text_processor import remove_extra_spaces, count_eff_len
+from .text_processor import remove_extra_spaces, count_eff_len, fix_punctuation
 
-__all__ = ['remove_extra_spaces', 'count_eff_len']
-__version__ = '0.2.2'
+__all__ = ['remove_extra_spaces', 'count_eff_len', 'fix_punctuation']
+__version__ = '0.2.4'

{complex_text_tools-0.2.2 → complex_text_tools-0.2.4}/complex_text_tools/text_processor.py

@@ -101,4 +101,33 @@ def count_eff_len(text: str) -> int:
     punctuation = re.findall(r"[^\w\s]", remaining_text)
     count += len(punctuation)
 
-    return count
+    return count
+
+
+def fix_punctuation(text):
+    """修复文本的标点符号"""
+    def replace_punc(match):
+        punc = match.group()
+        return {
+            ',': '，',
+            '.': '。',
+            ';': '；',
+            ':': '：',
+            '?': '？',
+            '!': '！',
+            '(': '（',
+            ')': '）',
+        }.get(punc, punc)
+    
+    pattern = r'(?<=[\u4e00-\u9fff\u3000-\u303f\uff00-\uffef])[,.;:?!()]|[,.;:?!()](?=[\u4e00-\u9fff\u3000-\u303f\uff00-\uffef])'
+    text = re.sub(pattern, replace_punc, text)
+    
+    text = re.sub(r'，+', '，', text)
+    text = re.sub(r'。+', '。', text)
+    
+    return text
+
+
+if __name__ == "__main__":
+    text = "成人CHF患者患病率已达1.3%,且患病后5年生存率仅约50%,严重威胁了患者生命健康[2]。"
+    print(fix_punctuation(text))

{complex_text_tools-0.2.2 → complex_text_tools-0.2.4/complex_text_tools.egg-info}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: complex-text-tools
-Version: 0.2.2
+Version: 0.2.4
 Summary: A package for processing complex text with mixed Chinese and English characters
 Home-page: https://github.com/mooremok/complex-text-tools
 Author: mooremok
@@ -38,6 +38,7 @@ Requires-Dist: pytest>=6.0; extra == "dev"
 - 移除中英文字符之间的多余空格
 - 正确处理标点符号周围的间距
 - 根据特定规则计算文本长度（中文字符、英文单词、数字、等式等）
+- 修复中文文本中的标点符号（将英文标点转换为中文标点）
 - 高效处理混合语言文本
 
 ## 安装
@@ -70,6 +71,17 @@ print(result)
 # 输出:15
 ```
 
+### 修复标点符号
+
+```python
+from complex_text_tools import fix_punctuation
+
+text = "这是中文文本，但使用了英文标点.这看起来不太自然，对吗？"
+fixed_text = fix_punctuation(text)
+print(fixed_text)
+# 输出: "这是中文文本，但使用了中文标点。这看起来不太自然，对吗？"
+```
+
 ## 许可证
 
 该项目基于 MIT 许可证 - 详情请见 [LICENSE](LICENSE) 文件。