python-negar 1.3__tar.gz → 1.4.1__tar.gz

{python_negar-1.3 → python_negar-1.4.1}/Changelog.txt

@@ -1,3 +1,10 @@
+1.4.1 - 2025-01-06
+-- Fixed issue with immutability check.
+-- Added several additional immutable words.
+
+1.4 - 2025-01-05
+-- Added a new feature to ignore text after #> as a comment trigger.
+
 1.3 - 2025-01-01
 -- Enhanced the handling of immutable words to achieve greater accuracy in results.
 

{python_negar-1.3 → python_negar-1.4.1}/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: python-negar
-Version: 1.3
+Version: 1.4.1
 Summary: Negar is a spell corrector and Persian text editor
 Home-page: http://github.com/shahinism/python-negar
 Author: Shahin Azad
@@ -42,7 +42,7 @@ Installation
 
 ## Git
 
-You can get latest stable changes from github server:
+You can get the latest stable changes from the GitHub server:
 
     $ git clone https://github.com/shahinism/python-negar.git
     $ cd python-negar
@@ -62,11 +62,11 @@ Get the latest tarball & install:
 
 ### Windows
 
-Download latest zip archive.
+Download the latest zip archive.
 
 https://github.com/shahinism/python-negar/archive/master.zip
 
-Decompress it, and run the following command in root directory of `python-negar`
+Decompress it, and run the following command in the root directory of `python-negar`
 
     $ python setup.py install
 
@@ -85,7 +85,7 @@ Calling by default options:
     * جایگزینی
     + خط تیره های پیاپی نظیر (--) و (---) با معادل های استاندارد شان
     + سه نقطه ی پیاپی (...) با کاراکتر استانداردش در زبان فارسی
-        + علایمی نظیر کتیشن فارسی با گیومه ؛  'نگار'
+        + علایمی نظیر کوتیشن فارسی با گیومه ؛  'نگار'
         + اعداد عربی '١٢٣٤٥٦٧٨٩٠' و انگلیسی '1234567890'  با معادل فارسی
         + کاراکتر های غیر فارسی نظیر ',;%يةك' با معادل های فارسی
 

{python_negar-1.3 → python_negar-1.4.1}/README.md

@@ -21,7 +21,7 @@ Installation
 
 ## Git
 
-You can get latest stable changes from github server:
+You can get the latest stable changes from the GitHub server:
 
     $ git clone https://github.com/shahinism/python-negar.git
     $ cd python-negar
@@ -41,11 +41,11 @@ Get the latest tarball & install:
 
 ### Windows
 
-Download latest zip archive.
+Download the latest zip archive.
 
 https://github.com/shahinism/python-negar/archive/master.zip
 
-Decompress it, and run the following command in root directory of `python-negar`
+Decompress it, and run the following command in the root directory of `python-negar`
 
     $ python setup.py install
 
@@ -64,7 +64,7 @@ Calling by default options:
     * جایگزینی
     + خط تیره های پیاپی نظیر (--) و (---) با معادل های استاندارد شان
     + سه نقطه ی پیاپی (...) با کاراکتر استانداردش در زبان فارسی
-        + علایمی نظیر کتیشن فارسی با گیومه ؛  'نگار'
+        + علایمی نظیر کوتیشن فارسی با گیومه ؛  'نگار'
         + اعداد عربی '١٢٣٤٥٦٧٨٩٠' و انگلیسی '1234567890'  با معادل فارسی
         + کاراکتر های غیر فارسی نظیر ',;%يةك' با معادل های فارسی
 

{python_negar-1.3 → python_negar-1.4.1}/negar/constants.py

@@ -1,7 +1,7 @@
 import platform
 from pathlib import Path
 
-__version__ = "1.3"
+__version__ = "1.4.1"
 
 DATAFILE = Path(__file__).parent.absolute() / "data/immutable.words"
 APPDATA = "AppData/Roaming/" if platform.system() == "Windows" else "."

{python_negar-1.3 → python_negar-1.4.1}/negar/data/immutable.words

@@ -194,6 +194,8 @@
 بلغارستان
 بلوچستان
 بلوچستان
+بمان
+بمانی
 بنانها
 بنگستان
 بنگستان
@@ -213,6 +215,8 @@
 بهترین
 به‌تنهایی
 بهمان
+بهمان
+بهمانی
 بوتان
 بودنتان
 بوستان
@@ -337,6 +341,9 @@
 بیبل
 بی‌بها
 بی‌بهایی
+بیبی
+بیبی‌فیس
+بیبی‌گرل
 بیت
 بیت‌التکمه‌ها
 بیت‌الحکمه
@@ -416,6 +423,7 @@
 بیدی
 بیر
 بیرالده
+بیرانوند
 بیراه
 بیراهه
 بیراهه‌ها
@@ -800,6 +808,7 @@
 پاک‌نها
 پانسمان
 پایتان
+پخشان
 پراستر
 پراشتها
 پرالتها
@@ -883,6 +892,9 @@
 تنهای
 تنهایی
 تنهایی
+تنهایی‌ها
+تنهایی‌های
+تنهایی‌هایی
 تنوره‌کشان
 تهیدستان
 توتستان
@@ -910,8 +922,15 @@
 چایمان
 چپ‌دستان
 چچستان
+چشمانتان
+چشمان‌تان
+چشمانشان
+چشمان‌شان
+چشمانمان
+چشمان‌مان
 چنارستان
 چیستان
+حاکمان
 حرفتان
 حسابتان
 حصیرستان
@@ -978,6 +997,7 @@
 دفتری
 دکتر
 دکتری
+دکترین
 دلستر
 دنیاپرستان
 دهستان
@@ -1065,6 +1085,8 @@
 شبستری
 شبها
 شتان
+شتر
+شتری
 شعردوستان
 شفها
 شکرافشان
@@ -1860,6 +1882,8 @@
 هلی‌کوپتر
 هلیکوپتر
 همان
+همان
+همان‌ها
 همانی
 هم‌بستر
 هم‌پیمان

{python_negar-1.3 → python_negar-1.4.1}/negar/virastar.py

@@ -57,6 +57,7 @@ class PersianEditor:
         self.cleanup()
 
     def cleanup(self):
+        self.__handle_comments__(State.save)
         self.__handle_urls__(State.save)
         # fix punctuation spaces at first
         # : ; , ! ? and their Persian counterparts should have one space after and no space before
@@ -95,6 +96,7 @@ class PersianEditor:
         if self._trim_leading_trailing_whitespaces:
             self.text = "\n".join([line.strip() for line in self.text.split("\n")])
         self.__handle_urls__(State.restore)
+        self.__handle_comments__(State.restore)
         return self.text
 
     def __repr__(self):
@@ -102,8 +104,19 @@ class PersianEditor:
 
     __str__ = __repr__
 
+    def __handle_comments__(self, state):
+        """Extract comments, process the content, and reinsert the comments at the end."""
+        if state == State.save:
+            self.comments = list(set(re.findall(r"#>.*$", self.text, re.I | re.M)))
+            self.comments.sort(key=lambda x: len(x), reverse=True)
+            for i, comment in enumerate(self.comments):
+                self.text = regex.sub(rf"{re.escape(comment)}", rf"__COMMENT__#{i}__", self.text)
+        if state == State.restore:
+            for i, comment in enumerate(self.comments):
+                self.text = re.sub(f"__COMMENT__#{i}__", comment, self.text)
+
     def __handle_urls__(self, state):
-        """Remove URLs and putting them back at the end of the process."""
+        """Remove URLs temporarily and reinsert them at the end of the process."""
         if state == State.save:
             self.urls = list(set(re.findall(URLREGX, self.text, re.M | re.I | re.X)))
             self.urls.sort(key=lambda x: len(x), reverse=True)
@@ -114,12 +127,12 @@ class PersianEditor:
                 self.text = re.sub(f"__URL__#{i}__", url, self.text)
 
     def __handle_immutable_words__(self, state):
-        """Remove URLs and putting them back at the end of the process."""
+        """Remove immutable words temporarily and reapply them at the end of the process."""
         if state == State.save:
             self.immutable_words = {}
-            words = self.text.split()
+            words = re.findall(r"\b[\w\u200c]+\b", self.text, re.UNICODE)
             for i, word in enumerate(words):
-                if (word:=word.strip()) in ImmutableWords.get():
+                if (word := word.strip()) in ImmutableWords.get():
                     self.immutable_words[i] = word
                     self.text = regex.sub(rf"\b{word}\b", rf"__IMM__#{i}__", self.text)
         if state == State.restore:

{python_negar-1.3 → python_negar-1.4.1}/python_negar.egg-info/PKG-INFO

@@ -1,6 +1,6 @@
 Metadata-Version: 2.1
 Name: python-negar
-Version: 1.3
+Version: 1.4.1
 Summary: Negar is a spell corrector and Persian text editor
 Home-page: http://github.com/shahinism/python-negar
 Author: Shahin Azad
@@ -42,7 +42,7 @@ Installation
 
 ## Git
 
-You can get latest stable changes from github server:
+You can get the latest stable changes from the GitHub server:
 
     $ git clone https://github.com/shahinism/python-negar.git
     $ cd python-negar
@@ -62,11 +62,11 @@ Get the latest tarball & install:
 
 ### Windows
 
-Download latest zip archive.
+Download the latest zip archive.
 
 https://github.com/shahinism/python-negar/archive/master.zip
 
-Decompress it, and run the following command in root directory of `python-negar`
+Decompress it, and run the following command in the root directory of `python-negar`
 
     $ python setup.py install
 
@@ -85,7 +85,7 @@ Calling by default options:
     * جایگزینی
     + خط تیره های پیاپی نظیر (--) و (---) با معادل های استاندارد شان
     + سه نقطه ی پیاپی (...) با کاراکتر استانداردش در زبان فارسی
-        + علایمی نظیر کتیشن فارسی با گیومه ؛  'نگار'
+        + علایمی نظیر کوتیشن فارسی با گیومه ؛  'نگار'
         + اعداد عربی '١٢٣٤٥٦٧٨٩٠' و انگلیسی '1234567890'  با معادل فارسی
         + کاراکتر های غیر فارسی نظیر ',;%يةك' با معادل های فارسی
 

{python_negar-1.3 → python_negar-1.4.1}/setup.py

@@ -40,5 +40,4 @@ setup(
         "Programming Language :: Python",
         "Programming Language :: Python :: 3",
     ],
-
 )

{python_negar-1.3 → python_negar-1.4.1}/tests/test_unittest.py

@@ -11,7 +11,9 @@ class Test(unittest.TestCase):
             def wrapper(self, *args, **kwargs):
                 func(self, *args, **kwargs)
                 return self.assertEqual(f"{PersianEditor(self.input_)}", self.output_, message)
+
             return wrapper
+
         return decorator
 
     # @unittest.skip("")
@@ -22,8 +24,8 @@ class Test(unittest.TestCase):
 
     @_assertEqual("Fix Hamzeh")
     def test_fix_hamzeh(self):
-        self.input_ = "کلماتی که با 'ی' پسوند همراه هستند مانند 'همه ی ' -- و البته امکان جایگزینی آن با حمزه 'ء' ( در صورت انتخاب کاربر )" # noqa: E501
-        self.output_ = "کلماتی که با «ی» پسوند همراه هستند مانند «همه‌ی» – و البته امکان جایگزینی آن با حمزه «ء» (در صورت انتخاب کاربر)"     # noqa: E501
+        self.input_ = "کلماتی که با 'ی' پسوند همراه هستند مانند 'همه ی ' -- و البته امکان جایگزینی آن با حمزه 'ء' ( در صورت انتخاب کاربر )"  # noqa: E501
+        self.output_ = "کلماتی که با «ی» پسوند همراه هستند مانند «همه‌ی» – و البته امکان جایگزینی آن با حمزه «ء» (در صورت انتخاب کاربر)"  # noqa: E501
 
     @_assertEqual("Numbers as a Version -- Triple Dots")
     def test_versioning_numbers_triple(self):
@@ -61,7 +63,6 @@ class Test(unittest.TestCase):
     def test_persian_quotations_ii(self):
         self.input_ = "«تاثیر نسبی داشته است. »"
         self.output_ = "«تاثیر نسبی داشته است.»"
-    
 
     @_assertEqual("Persian Numbers")
     def test_persian_numbers(self):
@@ -102,7 +103,7 @@ class Test(unittest.TestCase):
     def test_fix_prefix_ZWNJ_iii(self):
         self.input_ = r"می ‌شود"
         self.output_ = "می‌شود"
-        
+
     @_assertEqual("Fix Suffix ZWNJ I")
     def test_fix_suffix_ZWNJ_I(self):
         self.input_ = r"در پسوند کلمات با نیم‌فاصله نظیر کتابها، خوشترین -- و البته امکان عدم تنظیم (در صورت انتخاب کاربر)"
@@ -127,7 +128,7 @@ class Test(unittest.TestCase):
     def test_immutable_words_i(self):
         self.input_ = "تنها ترین خدمتگزار (تنها ترین خدمتگزار)"
         self.output_ = "تنهاترین خدمتگزار (تنهاترین خدمتگزار)"
-        
+
     @_assertEqual("Immutable Words II")
     def test_immutable_words_ii(self):
         self.input_ = "تنها ترین خدمتگزار (تنها ترین خدمتگزار)"
@@ -138,6 +139,16 @@ class Test(unittest.TestCase):
         self.input_ = "بیستم ماه میلادی"
         self.output_ = "بیستم ماه میلادی"
 
+    @_assertEqual("Ignore Comment")
+    def test_ignore_comment(self):
+        self.input_ = "کشیـــــــــده  شده اند #> می نویسد  .... "
+        self.output_ = "کشیده شده‌اند #> می نویسد  .... "
+
+    @_assertEqual("mix_parentheses_suffix")
+    def test_mix_parentheses_suffix(self):
+        self.input_ = '"دختر تنهایی "   ( کهتر بمان )'
+        self.output_ = "«دختر تنهایی» (کهتر بمان)"
+
 
 if __name__ == "__main__":
     unittest.main()