rabbit-slide-hiroyuki-sato-groonga-meatup-2015 2015.11.29.1

checksums.yaml

@@ -0,0 +1,7 @@
+---
+SHA1:
+  metadata.gz: e7cd30555544b3da3020914010fd4109504684e7
+  data.tar.gz: 8baadd19b234d5548b45157f3481145fa0947e2b
+SHA512:
+  metadata.gz: f9a1de5cc8393a5f3c1540c775cf11bd2fd991ec63f0201fb86bef704730e2b20c627ec67387b644690c5081562937db3c2474b9d75927b1646f283e3196dec7
+  data.tar.gz: cc03a9332dfe17da2d59e0363fd87eeb4bd3b0a2fefc0481a7caf487375da21fdfaa66f468e3c4b0070899e3a202637b16d98251066ca192eb8c706615d55e51

data/.rabbit

@@ -0,0 +1 @@
+groonga-meatup-2015.md

data/README.md

@@ -0,0 +1,10 @@
+= Title
+
+: author
+   佐藤博之
+: content-source
+   Groonga Meatup 2015
+: date
+   2015-11-29
+: allotted-time
+   15m

data/Rakefile

@@ -0,0 +1,17 @@
+require "rabbit/task/slide"
+
+# Edit ./config.yaml to customize meta data
+
+spec = nil
+Rabbit::Task::Slide.new do |task|
+  spec = task.spec
+  # spec.files += Dir.glob("doc/**/*.*")
+  # spec.files -= Dir.glob("private/**/*.*")
+  task.spec.add_runtime_dependency("rabbit-theme-groonga")
+end
+
+desc "Tag #{spec.version}"
+task :tag do
+  sh("git", "tag", "-a", spec.version.to_s, "-m", "Publish #{spec.version}")
+  sh("git", "push", "--tags")
+end

data/config.yaml

@@ -0,0 +1,21 @@
+---
+id: groonga-meatup-2015
+base_name: groonga-meatup-2015
+tags:
+- groonga
+presentation_date: 2015-11-29
+version: 2015.11.29.1
+licenses:
+- CC BY-SA 4.0
+#slideshare_id: groonga-night-5
+#speaker_deck_id: groongazu-2014
+ustream_id: 
+vimeo_id: 
+youtube_id: 
+author:
+  markup_language: :md
+  name: hiroyuki-sato
+  email: hiroysato@gmail.com
+  rubygems_user: hiroyuki-sato
+#  slideshare_user: hiroyuki-sato
+#  speaker_deck_user: hiroyuki-sato

data/groonga-meatup-2015.md

@@ -0,0 +1,193 @@
+# Groonga\\n導入事例
+
+author
+:  佐藤 博之
+
+content-source
+:  Groonga Meatup 2015  
+
+date
+:  2015-11-29
+
+theme
+:   .
+
+# 自己紹介
+
+* 佐藤博之
+  * Twitter: @hiroysato
+  * GitHub: hiroyuki-sato
+* 営業・インフラ担当
+
+# 最近の営業活動
+
+* OS
+  * Linux, Windows, OSX
+* Infiniband/RoCE
+  * RDMA, iSER, SRP
+* その他
+  * VyOS、Asterisk、Sisimai、PostgreSQL
+
+# 目次
+
+* 構築したサービスの要件
+* Groongaを選んだ理由
+* システム構成
+* Groongaへデータ登録方法
+* 使ってみて
+
+# 構築したサービスの要件
+
+* 入力ソース
+  * 電子メール
+* 出力
+  * 指定したキーワードの含まれる記事をピックアップ
+  * PDF・Excelなどに整形
+
+# 構築したサービスの要件
+
+![](images/mail.pdf){: relative_height="100"}
+
+# 全文検索ソフトウェア
+
+**日本語全文検索**
+-> Groonga
+
+# なぜGroonga
+
+* 単体で日本語対応してくれそう
+  * 実際単体で全角英字や半角英字を正規化してくれた。
+  * Groonga Ｇｒｏｏｏｎｇａ など
+* 須藤さんがメンテナ
+  * ActiveLDAP, rcairoなどの実績
+
+# サーバ構成
+
+* 全文検索システム: Groonga
+* メールの定期取得
+  * fetchmail/procmail
+* データ登録: embulk
+  * プラグインを自作
+* データ出力: groonga-client
+
+# 構成
+
+![](images/architecture.pdf){: relative_height="100"}
+
+# embulk(エンバルク)
+
+* オープンソースバルクローダ
+* マルチプラットフォーム
+  * OSX, Linux, Windows..
+* プラグインアーキテクチャ
+  * 約100個のプラグインが利用可能
+  * 言語: Java(Scala)とJRuby
+
+# embulkの構成
+
+![](images/embulk.png){: relative_height="80"}
+
+{::note}出典：http://www.slideshare.net/frsyuki/embuk-making-data-integration-works-relaxed{:/note}
+
+# groongaプラグイン
+
+* embulk-output-groonga
+  * groongaデータロード用
+* ライセンス
+  * オープンソース
+  * https://github.com/hiroyuki-sato/embulk-output-groonga
+
+# プラグイン利用例
+
+![](images/groonga-output.pdf){: relative_height="100"}
+
+# サンプルデータ
+
+![](images/csv.pdf){: relative_height="80"}
+
+# 設定例(入力部)
+
+```
+in:
+  type: file
+  path_prefix: hoge/csv/sample_
+  decoders:
+  - {type: gzip}
+  parser:
+    charset: UTF-8
+    newline: CRLF
+    type: csv
+    columns:
+    - {name: id, type: long}
+    - {name: title, type: string}
+    - {name: date, type: timestamp, format: '%Y/%m/%d'}
+    - {name: comment, type: string}
+```
+{: lang="yaml"}
+
+# 設定例(出力部)
+
+```
+out:
+  type: groonga
+  table: Data # 投入先のテーブル名
+  host: localhost
+  protocol: http
+  key_column: title # キーにするカラム
+```
+{: lang="yaml"}
+
+# Embulkの情報サイト
+
+* Embulk
+  * http://www.embulk.org
+* Qiita: Fluentdのバッチ版Embulk(エンバルク)のまとめ
+  * http://qiita.com/hiroysato/items/397f36c4838a0a93e352
+
+# 導入結果
+
+なんか遅い
+
+# 疑似コード
+
+```
+select \
+  --table Data \
+  --match_columns article \
+  --output_columns "_key,highlight_html(article),line_no" \
+  --query "( Groonga OR ぐるんが ) OR (line_no:>1 + line_no:<500)" \
+  --command_version 2 \
+  --limit -1
+```
+
+Groongaなどのキーワードは40個ぐらい
+
+# 遅い原因
+
+![](images/highlight_slow.pdf){: relative_height="100"}
+
+# 遅い原因
+
+**highlight_html**がとても遅い
+
+# highlight_html
+
+* **ぐるんが**は全文検索エンジンです。
+* ぐるなびさんでも活用されれている**Groonga**
+* 毎年11月29日に開催される**Groonga**の会
+
+# 不具合報告
+
+**須藤さん**助けて
+
+# 不具合報告
+
+![](images/github.png){: relative_height="100"}
+
+# 改修結果(5.0.8~)
+
+![](images/highlight_slow2.pdf){: relative_height="100"}
+
+# Thanks
+
+**ありがとうございました。**

data/theme.rb

@@ -0,0 +1,4 @@
+@table_header_font_props["size"] = @x_small_font_size
+@table_cell_font_props["size"] = @x_small_font_size
+
+include_theme("groonga")

metadata

@@ -0,0 +1,95 @@
+--- !ruby/object:Gem::Specification
+name: rabbit-slide-hiroyuki-sato-groonga-meatup-2015
+version: !ruby/object:Gem::Version
+  version: 2015.11.29.1
+platform: ruby
+authors:
+- hiroyuki-sato
+autorequire: 
+bindir: bin
+cert_chain: []
+date: 2015-12-01 00:00:00.000000000 Z
+dependencies:
+- !ruby/object:Gem::Dependency
+  name: rabbit
+  requirement: !ruby/object:Gem::Requirement
+    requirements:
+    - - ">="
+      - !ruby/object:Gem::Version
+        version: 2.0.2
+  type: :runtime
+  prerelease: false
+  version_requirements: !ruby/object:Gem::Requirement
+    requirements:
+    - - ">="
+      - !ruby/object:Gem::Version
+        version: 2.0.2
+- !ruby/object:Gem::Dependency
+  name: rabbit-theme-groonga
+  requirement: !ruby/object:Gem::Requirement
+    requirements:
+    - - ">="
+      - !ruby/object:Gem::Version
+        version: '0'
+  type: :runtime
+  prerelease: false
+  version_requirements: !ruby/object:Gem::Requirement
+    requirements:
+    - - ">="
+      - !ruby/object:Gem::Version
+        version: '0'
+description: |
+  : author
+     佐藤博之
+  : content-source
+     Groonga Meatup 2015
+  : date
+     2015-11-29
+  : allotted-time
+     15m
+email:
+- hiroysato@gmail.com
+executables: []
+extensions: []
+extra_rdoc_files: []
+files:
+- ".rabbit"
+- README.md
+- Rakefile
+- config.yaml
+- groonga-meatup-2015.md
+- images/architecture.pdf
+- images/csv.pdf
+- images/embulk.png
+- images/github.png
+- images/groonga-output.pdf
+- images/highlight_slow.pdf
+- images/highlight_slow2.pdf
+- images/mail.pdf
+- pdf/groonga-meatup-2015-groonga-meatup-2015.pdf
+- theme.rb
+homepage: http://slide.rabbit-shocker.org/authors/hiroyuki-sato/groonga-meatup-2015/
+licenses:
+- CC BY-SA 4.0
+metadata: {}
+post_install_message: 
+rdoc_options: []
+require_paths:
+- lib
+required_ruby_version: !ruby/object:Gem::Requirement
+  requirements:
+  - - ">="
+    - !ruby/object:Gem::Version
+      version: '0'
+required_rubygems_version: !ruby/object:Gem::Requirement
+  requirements:
+  - - ">="
+    - !ruby/object:Gem::Version
+      version: '0'
+requirements: []
+rubyforge_project: 
+rubygems_version: 2.4.5.1
+signing_key: 
+specification_version: 4
+summary: "= Title"
+test_files: []