igo 0.1.4.2 → 0.1.4.4

checksums.yaml

@@ -1,7 +1,7 @@
 ---
 SHA256:
-  metadata.gz: 676a3bfd6e2aa4c63963d67ec65aa18364b1c3b93e4478721453a9ec0cbe37f3
-  data.tar.gz: b925f5b3fd74c3136cde15388451c8dcafcbd8f8d0bb458c414a01f142bbf124
+  metadata.gz: f3bb523eb2fb2de5a99f48c655e4b100cbd37cb21a4052c69ae7f5035415ba72
+  data.tar.gz: 5abec0cf2b57f2994a16b0e158ac5d5a36951c50c2bbeec176134aed529c984b
 SHA512:
-  metadata.gz: 9cd700bdcd72406257e00a17a87d133b3d6ddb2aa216afc3a9289cf8b013e59b82d4d47a034974d77b22b1c8210ebce18d143886c0934eb0bfd022088873bcd7
-  data.tar.gz: 25740b6c8ad3ad5e562bcb3c2d1925d9835ae0c0b6cca5d6901051f3dc89081d1963ba950bf594aa4a9ef680200fac7b98a7b4baeccc68f27f230e77d2394640
+  metadata.gz: 731af0cf150373bc8af9dc2a6577102d3ac6bffac7f90d4960da8b5af2fbb7f1f8f4b70c1093accc2327561cf1939655a286fdb16e717be5705f1b012e73ea74
+  data.tar.gz: 6e11f5dbc4ef39ded02b50e26e16cb836a7724f6b514987b086650edbbdbdf0032ee4a8cd5e802783f67d5c51f589806f58b32505c8cf5c73804b7b843b1824f

data/README.en.md

@@ -5,11 +5,11 @@
 Support `zh-CN`, `ja-JP`
 
 ```ruby
-ja.cut "あー、合成は結合法則を満たすんでしたね"
-#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
 
-zh.tag "全世界的无产者，联合起来！", s: true
-#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: "/"
+#=>  "あー/、/合成/は/結合法則/を/満たす/ん/でした/ね"
 
 ```
 
@@ -36,10 +36,10 @@ require 'igo/ja'
 j = Igo::Ja
 
 cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
-#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+#=> ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
 
 cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: true
-#=> "では 、 圏論 の 話 を しましょ う か N この 前 は 、圏 について 紹介しました"
+#=>  "あー 、 合成 は 結合法則 を 満たす ん でした ね"
 
 ```
 
@@ -61,7 +61,7 @@ z = Igo::Zh
 
 ```ruby
 z.pinyin "全世界的无产者，联合起来！"
-#=> ["quan2", "shi4", "jie4", "de", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
+#=> ["quan2", "shi4", "jie4", "de5", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
 z.pinyin "全世界的无产者，联合起来！", s: 1
 #=> "quan2 shi4 jie4 de wu2 chan3 zhe3 lian2 he2 qi3 lai2"
 ```

data/README.ja.md

@@ -5,11 +5,11 @@
 Support `zh-CN`, `ja-JP`
 
 ```ruby
-ja.cut "あー、合成は結合法則を満たすんでしたね"
-#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
 
-zh.tag "全世界的无产者，联合起来！", s: true
-#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: "/"
+#=>  "あー/、/合成/は/結合法則/を/満たす/ん/でした/ね"
 
 ```
 
@@ -35,10 +35,10 @@ require 'igo/ja'
 j = Igo::Ja
 
 cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
-#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+#=> ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
 
 cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: true
-#=> "では 、 圏論 の 話 を しましょ う か N この 前 は 、圏 について 紹介しました"
+#=>  "あー 、 合成 は 結合法則 を 満たす ん でした ね"
 
 ```
 
@@ -60,7 +60,7 @@ z = Igo::Zh
 
 ```ruby
 z.pinyin "全世界的无产者，联合起来！"
-#=> ["quan2", "shi4", "jie4", "de", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
+#=> ["quan2", "shi4", "jie4", "de5", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
 z.pinyin "全世界的无产者，联合起来！", s: 1
 #=> "quan2 shi4 jie4 de wu2 chan3 zhe3 lian2 he2 qi3 lai2"
 ```

data/README.md

@@ -6,7 +6,7 @@ Support `zh-CN`, `ja-JP`
 
 ```ruby
 ja.cut "あー、合成は結合法則を満たすんでしたね"
-#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+#=>  ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
 
 zh.tag "全世界的无产者，联合起来！", s: true
 #=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
@@ -36,10 +36,10 @@ require 'igo/ja'
 j = Igo::Ja
 
 cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
-#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+#=> ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
 
-cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: true
-#=> "では 、 圏論 の 話 を しましょ う か N この 前 は 、圏 について 紹介しました"
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: "/"
+#=>  "あー/、/合成/は/結合法則/を/満たす/ん/でした/ね"
 
 ```
 
@@ -61,7 +61,7 @@ z = Igo::Zh
 
 ```ruby
 z.pinyin "全世界的无产者，联合起来！"
-#=> ["quan2", "shi4", "jie4", "de", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
+#=> ["quan2", "shi4", "jie4", "de5", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
 z.pinyin "全世界的无产者，联合起来！", s: 1
 #=> "quan2 shi4 jie4 de wu2 chan3 zhe3 lian2 he2 qi3 lai2"
 ```

data/README.zh.md

@@ -5,11 +5,11 @@
 Support `zh-CN`, `ja-JP`
 
 ```ruby
-ja.cut "あー、合成は結合法則を満たすんでしたね"
-#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
 
-zh.tag "全世界的无产者，联合起来！", s: true
-#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: "/"
+#=>  "あー/、/合成/は/結合法則/を/満たす/ん/でした/ね"
 
 ```
 
@@ -36,10 +36,10 @@ require 'igo/ja'
 j = Igo::Ja
 
 cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
-#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+#=> ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
 
 cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: true
-#=> "では 、 圏論 の 話 を しましょ う か N この 前 は 、圏 について 紹介しました"
+#=>  "あー 、 合成 は 結合法則 を 満たす ん でした ね"
 
 ```
 
@@ -61,7 +61,7 @@ z = Igo::Zh
 
 ```ruby
 z.pinyin "全世界的无产者，联合起来！"
-#=> ["quan2", "shi4", "jie4", "de", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
+#=> ["quan2", "shi4", "jie4", "de5", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
 z.pinyin "全世界的无产者，联合起来！", s: 1
 #=> "quan2 shi4 jie4 de wu2 chan3 zhe3 lian2 he2 qi3 lai2"
 ```

data/lib/igo/ja.rb

@@ -3,16 +3,46 @@ require 'open-uri'
 require 'uri'
 
 module Igo
+
+  # ## 使い方 :: Usage / Ja
+  #
+  #   require 'igo'
+  #   require 'igo/ja'
+  #
+  #   j = Igo::Ja
+  #
+  #   cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
+  #   #=> ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
+  #
+  #   cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: true
+  #   #=>  "あー 、 合成 は 結合法則 を 満たす ん でした ね"
+  #
+  # 下ノ関数は、暫く未完成です、ごめんね：
+  #
+  # `j.romaji`, `j.kana`, `j.tag`。
+  #
   module Ja
 
     SEARCH_URL = "https://jisho.org/search/"
 
     class << self
+      # ## 使い方 :: Usage / Ja
+      #
+      #   j = Igo::Ja
+      #
+      #   cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
+      #   #=> ["あー", "、", "合成", "は", "結合法則", "を", "満たす", "ん", "でした", "ね"]
+      #
+      #   cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: "/"
+      #   #=>  "あー/、/合成/は/結合法則/を/満たす/ん/でした/ね"
+      #
       def cut str, s: false
         str = URI.encode_www_form_component(str)
         doc = Nokogiri::HTML(URI.open(SEARCH_URL + str).read)
         cutted = doc.css(".japanese_word__text_wrapper").map{_1.text.strip}
-        s ? cutted.join(" ") : cutted
+        # s ? cutted.join(s) : cutted
+        sep = s.is_a?(String) ? s : " "
+        s ? cutted.join(sep) : cutted
       end
       # def romaji str
       # end
@@ -21,8 +51,10 @@ module Igo
       # end
     end
 
+    # TODO: tag word function
+    #
     def tag str, s: false, ns: 0
-
+      # TODO
     end
 
   end

data/lib/igo/version.rb

@@ -1,5 +1,5 @@
 # frozen_string_literal: true
 
 module Igo
-  VERSION = "0.1.4.2"
+  VERSION = "0.1.4.4"
 end

data/lib/igo/zh.rb

@@ -1,26 +1,77 @@
 require 'ruby_pinyin'
 
+
+
 module Igo
+  # # 用法 :: Usage / Zh
+
+  # Lack __Trad-Zh__ :: 暂不支持「正體中文」
+  #
+  # ```ruby
+  # require 'igo'
+  # require 'igo/zh'
+  # z = Igo::Zh
+  # ```
+  #
+  # ### Pinyin :: 拼音
+  #
+  # ```ruby
+  # z.pinyin "全世界的无产者，联合起来！"
+  # #=> ["quan2", "shi4", "jie4", "de5", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
+  # z.pinyin "全世界的无产者，联合起来！", s: 1
+  # #=> "quan2 shi4 jie4 de wu2 chan3 zhe3 lian2 he2 qi3 lai2"
+  # ```
+  #
+  # ### seperate word :: 分词
+  #
+  # ```ruby
+  # z.cut "全世界的无产者，联合起来！"
+  # #=> ["全世界", "的", "無產階級", "，", "聯合", "起來", "！"]
+  # z.cut "全世界的无产者，联合起来！", s: true
+  # #=> "全世界 的 无产者 ！ 联合 起来 ！"
+  # ```
+  # ### Taging word :: 标注词类
+  #
+  # 后续可能添加 `by` 关键词指定函数。
+  #
+  # ```ruby
+  # z.tag "全世界的无产者，联合起来！"
+  # #=>  [["全世界", "n"], ["的", "uj"], ["无产者", "n"], ["！", "x"], ["联合", "v"], ["起来", "v"], ["！", "x"]]
+  # z.tag "全世界的无产者，联合起来！", s: true
+  # #=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+  # ```
+  # ### 词频统计
+  #
+  # ```ruby
+  # z.freq "全世界的无产者，联合起来！", 5
+  # #=>  [["无产者", 9.96885201925], ["全世界", 6.80147590842], ["联合", 5.64979650728], ["起来", 3.96134044655]]
+  #
+  # # alias 拼音, 分词, 标记, 词频
+  #
+  # ```
   module Zh
 
     Tagging = JiebaRb::Tagging.new
     Segment = JiebaRb::Segment.new mode: :mix, user_dict: "ext/cppjieba/dict/user.dict.utf8"
     Keyword = JiebaRb::Keyword.new
 
-    # @params chinese: String
-    # @returns pinyin_numeraltone: String
     class << self
-      def pinyin str, s: false
-        res = str.each_char.map{PinYin.of_string(_1, :ascii)}.flatten
-        s ? res.join(" ") : res
+      # ### Pinyin :: 拼音
+      #
+      #   z.pinyin "全世界的无产者，联合起来！"
+      #   #=> ["quan2", "shi4", "jie4", "de5", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
+      #   z.pinyin "全世界的无产者，联合起来！", s: " "
+      #   #=> "quan2 shi4 jie4 de wu2 chan3 zhe3 lian2 he2 qi3 lai2"
+      #
+      # @params chinese: String
+      # @returns pinyin_numeraltone: String
+      def pinyin str, s: false, ommit: " "
+        # tone 1, 2, 3, 4, 5
+        res = str.split(/(?=[^A-Z\d])|(?<=[^A-Z\d])/i).map{|ch| ch.ord > 0x4e00 ? (py = PinYin.of_string(ch, :ascii)[0]; py =~ /\d/ ? py : (py+"5")) : ch }.flatten.select{_1 != s and _1 != ommit}
+        sep = s.is_a?(String) ? s : " "
+        s ? res.join(sep) : res
 
       end
-      def pinyin_tonal_s str
-        PinYin.sentence(token, :ascii)
-      end
-      def pinyin_tonal_a str
-        PinYin.of_string(token, :ascii)
-      end
 
       def cut str, s: false, tag: false, by: "jieba"
         case by
@@ -28,24 +79,39 @@ module Igo
           if tag
             s ? Tagging.tag(str).map{_1.to_a.flatten.join("_")}.join(" ") : Tagging.tag(str).map{_1.to_a.flatten}
           else
-            res = Segment.cut(str)
-            s ? res.join(" ") : res
+            cutted = Segment.cut(str)
+            sep = s.is_a?(String) ? s : " "
+            s ? cutted.join(sep) : cutted
           end
         when /thulac/
+          require_relative 'thulac'
           Thulac.cut(str, text: s)
         end
       end
 
+      # ### Taging word :: 标注词类
+      #
+      # 后续可能添加 `by` 关键词指定函数。
+      #
+      #   z.tag "全世界的无产者，联合起来！"
+      #   #=>  [["全世界", "n"], ["的", "uj"], ["无产者", "n"], ["！", "x"], ["联合", "v"], ["起来", "v"], ["！", "x"]]
+      #   z.tag "全世界的无产者，联合起来！", s: true
+      #   #=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+      #
       def tag str, s: false, by: 0
         case by
         when /thu/
-          require './thulac'
+          require_relative 'thulac'
           Thulac.cut str, text: s
         else
           s ? Tagging.tag(str).map{_1.to_a.flatten.join("_")}.join(" ") : Tagging.tag(str).map{_1.to_a.flatten}
         end
       end
 
+      # ### 词频统计
+      #
+      #   z.freq "全世界的无产者，联合起来！", 5
+      #   #=>  [["无产者", 9.96885201925], ["全世界", 6.80147590842], ["联合", 5.64979650728], ["起来", 3.96134044655]]
       def termfreq string, num
         Keyword.extract string, num
       end

data/lib/igo.rb

@@ -2,8 +2,22 @@
 
 require_relative "igo/version"
 require 'jieba_rb'
-require 'igo/zh'
-require 'igo/ja'
+require_relative 'igo/zh'
+require_relative 'igo/ja'
+
+
+#
+# __AUTHOR__: *saisui* saisui.github.io
+#
+#    ja.cut "あー、合成は結合法則を満たすんでしたね"
+#    #=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+#
+#    zh.pinyin "床前明月光，疑是地上霜，好了", s: 1
+#    #=> chuang2 qian2 ming2 yue4 guang1, yi2 shi4 di4 shang4 shuang1, hao3 le5.
+#
+#    zh.tag "全世界的无产者，联合起来！", s: true
+#    #=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+#
 
 module Igo
   class Error < StandardError; end

metadata

@@ -1,7 +1,7 @@
 --- !ruby/object:Gem::Specification
 name: igo
 version: !ruby/object:Gem::Version
-  version: 0.1.4.2
+  version: 0.1.4.4
 platform: ruby
 authors:
 - saisui