igo 0.1.3 → 0.1.4.2

checksums.yaml

@@ -1,7 +1,7 @@
 ---
 SHA256:
-  metadata.gz: cd6b6d4214bdb3825759167d9d17797e0b988b72665cde7ecbd9162d9723deff
-  data.tar.gz: a1e18a3d1e598b553a2da2e47a1955312d08fb0dc6a56bf4bea35d9eb26defc9
+  metadata.gz: 676a3bfd6e2aa4c63963d67ec65aa18364b1c3b93e4478721453a9ec0cbe37f3
+  data.tar.gz: b925f5b3fd74c3136cde15388451c8dcafcbd8f8d0bb458c414a01f142bbf124
 SHA512:
-  metadata.gz: 4855cc233e4594677d671eb8cfea48ff20fddd51b22a7abda157229652761dc9af4a55b66ea71649a27ade2c9afba3435085d3d78d9ce883c1022030e09c7602
-  data.tar.gz: 2ba7a4d3ea3749d69aba62f1edbcf057a68a5e39c1db6866d3b178f3ff1676be6f9a494ad7a924b735d8de85dab08391ca208841a452946a6cdca8adbe9679aa
+  metadata.gz: 9cd700bdcd72406257e00a17a87d133b3d6ddb2aa216afc3a9289cf8b013e59b82d4d47a034974d77b22b1c8210ebce18d143886c0934eb0bfd022088873bcd7
+  data.tar.gz: 25740b6c8ad3ad5e562bcb3c2d1925d9835ae0c0b6cca5d6901051f3dc89081d1963ba950bf594aa4a9ef680200fac7b98a7b4baeccc68f27f230e77d2394640

data/README.en.md

@@ -0,0 +1,105 @@
+# 言語 :: Igo
+
+[🌏](README.md) | [中文](README.zh.md) | [English](README.en.md) | [日本語](README.ja.md)
+
+Support `zh-CN`, `ja-JP`
+
+```ruby
+ja.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+
+zh.tag "全世界的无产者，联合起来！", s: true
+#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+
+```
+
+## Install :: インストール
+
+```cmd
+gem install igo
+```
+
+for use `Thulac` in __Python__, you need to install:
+
+```cmd
+
+pip install thulac
+
+```
+
+## 使い方 :: Usage / Ja
+
+```ruby
+require 'igo'
+require 'igo/ja'
+
+j = Igo::Ja
+
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: true
+#=> "では 、 圏論 の 話 を しましょ う か N この 前 は 、圏 について 紹介しました"
+
+```
+
+下ノ関数は、暫く未完成です、ごめんね：
+
+`j.romaji`, `j.kana`, `j.tag`。
+
+## 用法 :: Usage / Zh
+
+Lack __Trad-Zh__ :: 暂不支持「正體中文」
+
+```ruby
+require 'igo'
+require 'igo/zh'
+z = Igo::Zh
+```
+
+### Pinyin :: 拼音
+
+```ruby
+z.pinyin "全世界的无产者，联合起来！"
+#=> ["quan2", "shi4", "jie4", "de", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
+z.pinyin "全世界的无产者，联合起来！", s: 1
+#=> "quan2 shi4 jie4 de wu2 chan3 zhe3 lian2 he2 qi3 lai2"
+```
+
+### seperate word :: 分词
+
+```ruby
+z.cut "全世界的无产者，联合起来！"
+#=> ["全世界", "的", "無產階級", "，", "聯合", "起來", "！"]
+z.cut "全世界的无产者，联合起来！", s: true
+#=> "全世界 的 无产者 ！ 联合 起来 ！"
+```
+### Taging word :: 标注词类
+
+后续可能添加 `by` 关键词指定函数。
+
+```ruby
+z.tag "全世界的无产者，联合起来！"
+#=>  [["全世界", "n"], ["的", "uj"], ["无产者", "n"], ["！", "x"], ["联合", "v"], ["起来", "v"], ["！", "x"]]
+z.tag "全世界的无产者，联合起来！", s: true
+#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+```
+### 词频统计
+
+```ruby
+z.freq "全世界的无产者，联合起来！", 5
+#=>  [["无产者", 9.96885201925], ["全世界", 6.80147590842], ["联合", 5.64979650728], ["起来", 3.96134044655]]
+
+# alias 拼音, 分词, 标记, 词频
+
+```
+
+## LINCENCE :: 协议
+
+__MPL 2.0__
+
+## Requires
+
+- `jieba-rb`
+- `nokogiri`
+- `open-uri`

data/README.ja.md

@@ -0,0 +1,104 @@
+# 言語 :: Igo
+
+[🌏](README.md) | [中文](README.zh.md) | [English](README.en.md) | [日本語](README.ja.md)
+
+Support `zh-CN`, `ja-JP`
+
+```ruby
+ja.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+
+zh.tag "全世界的无产者，联合起来！", s: true
+#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+
+```
+
+## Install :: インストール
+
+```cmd
+gem install igo
+```
+
+__Python__ ノ `Thulac` 使いたいなら、以下の pip がインストール必要です:
+
+```cmd
+
+pip install thulac
+```
+
+## 使い方 :: Usage / Ja
+
+```ruby
+require 'igo'
+require 'igo/ja'
+
+j = Igo::Ja
+
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: true
+#=> "では 、 圏論 の 話 を しましょ う か N この 前 は 、圏 について 紹介しました"
+
+```
+
+下ノ関数は、暫く未完成です、ごめんね：
+
+`j.romaji`, `j.kana`, `j.tag`。
+
+## 用法 :: Usage / Zh
+
+Lack __Trad-Zh__ :: 暂不支持「正體中文」
+
+```ruby
+require 'igo'
+require 'igo/zh'
+z = Igo::Zh
+```
+
+### Pinyin :: 拼音
+
+```ruby
+z.pinyin "全世界的无产者，联合起来！"
+#=> ["quan2", "shi4", "jie4", "de", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
+z.pinyin "全世界的无产者，联合起来！", s: 1
+#=> "quan2 shi4 jie4 de wu2 chan3 zhe3 lian2 he2 qi3 lai2"
+```
+
+### seperate word :: 分词
+
+```ruby
+z.cut "全世界的无产者，联合起来！"
+#=> ["全世界", "的", "無產階級", "，", "聯合", "起來", "！"]
+z.cut "全世界的无产者，联合起来！", s: true
+#=> "全世界 的 无产者 ！ 联合 起来 ！"
+```
+### Taging word :: 标注词类
+
+后续可能添加 `by` 关键词指定函数。
+
+```ruby
+z.tag "全世界的无产者，联合起来！"
+#=>  [["全世界", "n"], ["的", "uj"], ["无产者", "n"], ["！", "x"], ["联合", "v"], ["起来", "v"], ["！", "x"]]
+z.tag "全世界的无产者，联合起来！", s: true
+#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+```
+### 词频统计
+
+```ruby
+z.freq "全世界的无产者，联合起来！", 5
+#=>  [["无产者", 9.96885201925], ["全世界", 6.80147590842], ["联合", 5.64979650728], ["起来", 3.96134044655]]
+
+# alias 拼音, 分词, 标记, 词频
+
+```
+
+## LINCENCE :: 协议
+
+__MPL 2.0__
+
+## Requires
+
+- `jieba-rb`
+- `nokogiri`
+- `open-uri`

data/README.md

@@ -1,12 +1,32 @@
 # 言語 :: Igo
 
+[🌏](README.md) | [中文](README.zh.md) | [English](README.en.md) | [日本語](README.ja.md)
+
 Support `zh-CN`, `ja-JP`
 
-install
+```ruby
+ja.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+
+zh.tag "全世界的无产者，联合起来！", s: true
+#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+
+```
+
+## Install :: インストール
+
 ```cmd
 gem install igo
 ```
 
+for use `Thulac` in __Python__, you need to install:
+
+```cmd
+
+pip install thulac
+
+```
+
 ## 使い方 :: Usage / Ja
 
 ```ruby

data/README.zh.md

@@ -0,0 +1,105 @@
+# 言語 :: Igo
+
+[🌏](README.md) | [中文](README.zh.md) | [English](README.en.md) | [日本語](README.ja.md)
+
+Support `zh-CN`, `ja-JP`
+
+```ruby
+ja.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+
+zh.tag "全世界的无产者，联合起来！", s: true
+#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+
+```
+
+## Install :: 安装
+
+```cmd
+gem install igo
+```
+
+要使用 __Python__ 库的 `Thulac`，你得先安装...：
+
+```cmd
+
+pip install thulac
+
+```
+
+## 使い方 :: Usage / Ja
+
+```ruby
+require 'igo'
+require 'igo/ja'
+
+j = Igo::Ja
+
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね"
+#=> ["では", "、", "圏論", "の", "話", "を", "しましょ", "う", "か", "N", "この", "前", "は", "、圏", "について", "紹介 しました"]
+
+cutted = j.cut "あー、合成は結合法則を満たすんでしたね", s: true
+#=> "では 、 圏論 の 話 を しましょ う か N この 前 は 、圏 について 紹介しました"
+
+```
+
+下ノ関数は、暫く未完成です、ごめんね：
+
+`j.romaji`, `j.kana`, `j.tag`。
+
+## 用法 :: Usage / Zh
+
+Lack __Trad-Zh__ :: 暂不支持「正體中文」
+
+```ruby
+require 'igo'
+require 'igo/zh'
+z = Igo::Zh
+```
+
+### Pinyin :: 拼音
+
+```ruby
+z.pinyin "全世界的无产者，联合起来！"
+#=> ["quan2", "shi4", "jie4", "de", "wu2", "chan3", "zhe3", "lian2", "he2", "qi3", "lai2"]
+z.pinyin "全世界的无产者，联合起来！", s: 1
+#=> "quan2 shi4 jie4 de wu2 chan3 zhe3 lian2 he2 qi3 lai2"
+```
+
+### seperate word :: 分词
+
+```ruby
+z.cut "全世界的无产者，联合起来！"
+#=> ["全世界", "的", "無產階級", "，", "聯合", "起來", "！"]
+z.cut "全世界的无产者，联合起来！", s: true
+#=> "全世界 的 无产者 ！ 联合 起来 ！"
+```
+### Taging word :: 标注词类
+
+后续可能添加 `by` 关键词指定函数。
+
+```ruby
+z.tag "全世界的无产者，联合起来！"
+#=>  [["全世界", "n"], ["的", "uj"], ["无产者", "n"], ["！", "x"], ["联合", "v"], ["起来", "v"], ["！", "x"]]
+z.tag "全世界的无产者，联合起来！", s: true
+#=> "全世界_n 的_uj 无产者_n ，_x 联合_v 起来_v ！_x"
+```
+### 词频统计
+
+```ruby
+z.freq "全世界的无产者，联合起来！", 5
+#=>  [["无产者", 9.96885201925], ["全世界", 6.80147590842], ["联合", 5.64979650728], ["起来", 3.96134044655]]
+
+# alias 拼音, 分词, 标记, 词频
+
+```
+
+## LINCENCE :: 协议
+
+__MPL 2.0__
+
+## Requires
+
+- `jieba-rb`
+- `nokogiri`
+- `open-uri`

data/lib/igo/ja.rb

@@ -1,10 +1,9 @@
-require 'jisho_api'
 require 'nokogiri'
 require 'open-uri'
 require 'uri'
 
 module Igo
-  module Jisho
+  module Ja
 
     SEARCH_URL = "https://jisho.org/search/"
 
@@ -21,9 +20,13 @@ module Igo
       # def kana str
       # end
     end
+
+    def tag str, s: false, ns: 0
+
+    end
+
   end
 
-  Ja = Jisho
 
   class << self
     def 日本語

data/lib/igo/thulac.rb

@@ -0,0 +1,15 @@
+require 'pycall/import'
+
+module Thulac
+  PyCall.exec("import thulac")
+  PyCall.exec("thulac1 = thulac.thulac()")
+end
+class << Thulac
+  def cut str, text: false
+    text = text ? "True" : "False"
+    PyCall.eval(<<-EOF
+      thulac1.cut(#{str.inspect}, text=#{text})
+    EOF
+    )
+  end
+end

data/lib/igo/version.rb

@@ -1,5 +1,5 @@
 # frozen_string_literal: true
 
 module Igo
-  VERSION = "0.1.3"
+  VERSION = "0.1.4.2"
 end

data/lib/igo/zh.rb

@@ -22,17 +22,28 @@ module Igo
         PinYin.of_string(token, :ascii)
       end
 
-      def cut str, s: false, tag: false
-        if tag
-          s ? Tagging.tag(str).map{_1.to_a.flatten.join("_")}.join(" ") : Tagging.tag(str).map{_1.to_a.flatten}
-        else
-          res = Segment.cut(str)
-          s ? res.join(" ") : res
+      def cut str, s: false, tag: false, by: "jieba"
+        case by
+        when /jieba/
+          if tag
+            s ? Tagging.tag(str).map{_1.to_a.flatten.join("_")}.join(" ") : Tagging.tag(str).map{_1.to_a.flatten}
+          else
+            res = Segment.cut(str)
+            s ? res.join(" ") : res
+          end
+        when /thulac/
+          Thulac.cut(str, text: s)
         end
       end
 
-      def tag str, s: false
-        s ? Tagging.tag(str).map{_1.to_a.flatten.join("_")}.join(" ") : Tagging.tag(str).map{_1.to_a.flatten}
+      def tag str, s: false, by: 0
+        case by
+        when /thu/
+          require './thulac'
+          Thulac.cut str, text: s
+        else
+          s ? Tagging.tag(str).map{_1.to_a.flatten.join("_")}.join(" ") : Tagging.tag(str).map{_1.to_a.flatten}
+        end
       end
 
       def termfreq string, num

data/lib/igo.rb

@@ -1,7 +1,6 @@
 # frozen_string_literal: true
 
 require_relative "igo/version"
-require 'jisho_api'
 require 'jieba_rb'
 require 'igo/zh'
 require 'igo/ja'

metadata

@@ -1,14 +1,14 @@
 --- !ruby/object:Gem::Specification
 name: igo
 version: !ruby/object:Gem::Version
-  version: 0.1.3
+  version: 0.1.4.2
 platform: ruby
 authors:
 - saisui
 autorequire:
 bindir: exe
 cert_chain: []
-date: 2023-12-23 00:00:00.000000000 Z
+date: 2023-12-24 00:00:00.000000000 Z
 dependencies: []
 description: It is easy.
 email:
@@ -22,14 +22,16 @@ files:
 - CHANGELOG.md
 - CODE_OF_CONDUCT.md
 - LICENSE.txt
+- README.en.md
+- README.ja.md
 - README.md
+- README.zh.md
 - Rakefile
-- igo.rb
 - lib/igo.rb
 - lib/igo/ja.rb
+- lib/igo/thulac.rb
 - lib/igo/version.rb
 - lib/igo/zh.rb
-- sig/igo.rbs
 homepage: https://github.com/saisui/igo-rb
 licenses:
 - MPL-2.0

data/igo.rb

@@ -1,12 +0,0 @@
-require 'jisho_api'
-require 'jieba_rb'
-
-module Igo
-  Jisho = JishoAPI::JishoAPI
-  module Ja
-  end
-  module Zh
-  end
-end
-
-include Natlang

data/sig/igo.rbs

@@ -1,4 +0,0 @@
-module Igo
-  VERSION: String
-  # See the writing guide of rbs: https://github.com/ruby/rbs#guides
-end