rabbit-slide-kou-groonga-meatup-2015 2015.11.29.0

checksums.yaml

@@ -0,0 +1,7 @@
+---
+SHA1:
+  metadata.gz: 706bbc41f8c48eacd6f177ef822b82bf59ba8545
+  data.tar.gz: 5f561f4ba9c994d266aee13b91e1c7872b58eed6
+SHA512:
+  metadata.gz: 7d8db869b71aec6f4fa3d381c48b00b19adef6b11aebc1684b995f0354176280f0e7b48240344ae9c4b23c181d4c5281fa032f10740aadb0cb27884f8c94558b
+  data.tar.gz: a3ab1bb515cf6946cbc7f3ec4e2da7f8dd478d93903eb746ef0a9ee33d1654750de79b97c7fafc5451b5ca28f6a49e88bf29ce1d67d00b8a87f0828c46449a5f

data/.rabbit

@@ -0,0 +1 @@
+groonga-family-2015.rab

data/README.rd

@@ -0,0 +1,44 @@
+= Groonga族2015
+
+Groonga、Mroonga、PGroonga、Rroonga、Droongaなど、Groonga関連プロジェクトの概要と2015年現在の最新情報を紹介します。
+
+== ライセンス
+
+=== スライド
+
+CC BY-SA 4.0
+
+原著作者名は以下の通りです。
+
+  * 須藤功平（またはKouhei Sutou）
+
+=== 画像
+
+==== 各種Groonga関連プロダクトのロゴ
+
+CC BY 3.0
+
+原著作者名は以下の通りです。
+
+  * Groongaプロジェクト
+
+== 作者向け
+
+=== 表示
+
+  rake
+
+=== 公開
+
+  rake publish
+
+== 閲覧者向け
+
+=== インストール
+
+  gem install rabbit-slide-kou-groonga-meatup-2015
+
+=== 表示
+
+  rabbit rabbit-slide-kou-groonga-meatup-2015.gem
+

data/Rakefile

@@ -0,0 +1,17 @@
+require "rabbit/task/slide"
+
+# Edit ./config.yaml to customize meta data
+
+spec = nil
+Rabbit::Task::Slide.new do |task|
+  spec = task.spec
+  # spec.files += Dir.glob("doc/**/*.*")
+  # spec.files -= Dir.glob("private/**/*.*")
+  spec.add_runtime_dependency("rabbit-theme-groonga")
+end
+
+desc "Tag #{spec.version}"
+task :tag do
+  sh("git", "tag", "-a", spec.version.to_s, "-m", "Publish #{spec.version}")
+  sh("git", "push", "--tags")
+end

data/config.yaml

@@ -0,0 +1,28 @@
+---
+id: groonga-meatup-2015
+base_name: groonga-family-2015
+tags:
+- rabbit
+- groonga
+- mroonga
+- pgroonga
+- rroonga
+- droonga
+- full-text-search
+presentation_date: 2015-11-29
+version: 2015.11.29.0
+licenses:
+- CC BY-SA 4.0
+- CC BY 3.0
+slideshare_id: groonga-meatup-2015
+speaker_deck_id: 
+ustream_id: 
+vimeo_id: 
+youtube_id: 
+author:
+  markup_language: :rd
+  name: Kouhei Sutou
+  email: kou@clear-code.com
+  rubygems_user: kou
+  slideshare_user: kou
+  speaker_deck_user: kou

data/groonga-family-2015.rab

@@ -0,0 +1,1698 @@
+= Groonga族2015
+
+: author
+   須藤功平
+: institution
+   株式会社クリアコード
+: content-source
+   Groonga Meatup 2015
+: date
+   2015-11-29
+: allotted-time
+   30m
+: theme
+   .
+
+= 内容
+
+  * Groonga族の概要
+  * Groonga族の最新情報
+  * Groonga族の今後の情報
+
+= Groonga族
+
+総称
+
+= Groonga族
+
+  * ((*Groongaそのもの*))
+  * Groongaと他のプロダクトを\n
+    ((*つなぐプロダクト*))
+  * ((*名前がXroonga*))
+
+= つなぐプロダクト
+
+  # image
+  # src = images/groonga-family-glue.svg
+  # relative_width = 110
+
+(('note:ポイント'))\n
+(('note:Groongaはライブラリーとして他のプロダクトに埋め込める！'))
+
+= Groonga族：Groonga
+
+  # image
+  # src = images/groonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+ぐるんが
+
+= Groongaのよいところ1
+
+高速な\n
+全文検索機能\n
+(('note:（全文検索エンジンなので当然）'))
+
+= Groongaのよいところ2
+
+即時更新
+
+= 即時更新
+
+  * 更新→すぐに検索可能
+    * 思想：新鮮なデータは高価値
+    * 新しいデータはすぐに入れて！
+  * 工夫：更新中も検索性能キープ
+    * 即時データ投入を妨げる理由を減少
+    * 実装：参照ロックフリー
+
+= 性能の傾向
+
+  # image
+  # src = images/groonga-performance-characteristic.svg
+  # relative_width = 100
+
+= Groongaのよいところ3
+
+高速な集計処理
+
+= 高速な集計処理
+
+  * 集計処理
+    * 同一カラムの値を一気にアクセス
+  * 工夫：↑向けデータ構造を採用
+    * 高速な集計処理を実現
+    * 実装：カラムストア
+
+= カラムストア
+
+  # image
+  # src = images/groonga-column-store.svg
+  # relative_width = 100
+
+= Groongaのよいところ3
+
+手厚い\n
+日本語サポート
+
+= サポート例：RKサーチ
+
+(('tag:center'))
+ローマ字でカナを検索\n
+(('note:Romaji to Kana prefix search'))
+
+  * 例：「ya」→「ヤキニク」
+    * 「や」・「ヤ」→「ヤキニク」も可
+  * 用意するもの
+    * カタカナでのヨミガナだけ\n
+      (('note:（ひらがな・ローマ字はいらない）'))\n
+      (('note:（ローマ字の訓令式・ヘボン式の差はGroongaが吸収）'))
+
+= RKサーチの利用例1
+
+(('tag:center'))
+(('tag:margin-bottom'))
+入力補助
+
+  * 例：タグの入力\n
+    (('note:同じことに違うタグをつけると検索精度があがらない'))\n
+    (('note:全体で一貫性があることは重要'))\n
+    (('note:既存のタグを入力補助することで同じことに同じタグをつけやすくする'))
+  * 使い所：妥当な値の集合がある
+    * タグ入力なら既存タグ
+
+= RKサーチの利用例2
+
+(('tag:center'))
+(('tag:margin-bottom'))
+検索ボックスでの補完
+
+  * Googleもやっているやつ
+  * ぐるなびはGroongaで実現
+
+= ぐるなびでの利用例
+
+  # image
+  # src = images/gnavi-complete.png
+  # relative_height = 70
+
+(('tag:center'))
+(('note:「yu」→「ユウラクチョウ」→「有楽町」'))
+
+(('note:出典：Groongaのサジェストで四苦八苦 by Walker'))\n
+(('note:https://speakerdeck.com/redfigure/groongafalsesaziesutodesi-ku-ba-ku'))
+
+= 補完の使い方1
+
+(('tag:center'))
+スキーマ作成
+
+  % groonga-suggest-create-dataset \
+      DB_PATH stations
+
+= 補完の使い方2
+
+(('tag:center'))
+データ準備
+
+  # coderay json
+
+  [
+    {
+      "_key": "有楽町",
+       "kana": ["ユウラクチョウ"],
+       "boost": 100
+    }
+  ]
+
+(('tag:center'))
+(('note:boostを100以上にすること'))
+
+= 補完の使い方3
+
+(('tag:center'))
+データロード
+
+  % curl \
+      'localhost:10041/d/load?table=item_stations' \
+      --header 'Content-Type: application/json' \
+      --data-binary @stations.json
+
+(('note:curlを使うときは--dataではなく--data-binaryを使うこと'))\n
+(('note:--dataは改行を削除するため'))
+
+= 補完の使い方4
+
+(('tag:center'))
+補完
+
+  % curl \
+      'localhost:10041/d/suggest' \
+      --get \
+      --data-urlencode 'types=complete' \
+      --data-urlencode 'table=item_stations' \
+      --data-urlencode 'column=kana' \
+      --data-urlencode 'query=yu'
+  [
+    [...],
+    {"complete": [[1],[...],["有楽町",101]]}
+  ]
+
+= Groongaのよいところ4
+
+組み込める
+
+= 組み込める
+
+  * ライブラリーとして利用可能
+    * ＝インターフェイスを変えられる
+    * ＝使いやすい方法で使える
+
+= つなぐプロダクト
+
+  # image
+  # src = images/groonga-family-glue.svg
+  # relative_width = 110
+
+(('note:ポイント'))\n
+(('note:Groongaはライブラリーとして他のプロダクトに埋め込める！'))
+
+= Groonga族：Mroonga
+
+  # image
+  # src = images/mroonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+むるんが\n
+((*M*))ySQL + G((*roonga*))
+
+= Mroongaのよいところ1
+
+簡単に使える
+
+= 簡単
+
+  * SQLで使える
+  * 全文検索の知識なしで\n
+    使い始められる
+
+= Mroongaを使う：スキーマ
+
+  # coderay sql
+  CREATE TABLE texts (
+    content TEXT,
+    FULLTEXT INDEX (content)
+    -- ↑と↓を追加
+  ) ENGINE=Mroonga
+    DEFAULT CHARSET=utf8mb4;
+
+(('tag:center'))
+(('note:ポイント：全文検索の索引を作ると言っているだけ'))
+
+= Mroongaを使う：検索
+
+  # coderay sql
+  SELECT * FROM texts
+    WHERE
+      MATCH(content)
+      AGAINST('*D+ キーワード1 キーワード2'
+              IN BOOLEAN MODE);
+
+(('tag:center'))
+(('note:ポイント：Web検索エンジンと同様にクエリーを書ける'))
+
+= なぜ知識なしで使えるの？
+
+適切な\n
+デフォルト値
+
+= デフォルト値
+
+  * トークナイザー：可変長Bigram\n
+    (('note:（トークナイザー≒検索キーワード抽出モジュール）'))
+    * 日本語+英語でもいい感じに動く
+  * ノーマライザー：MySQL互換\n
+    (('note:（ノーマライザー≒テキスト正規化モジュール）'))
+    * 一部非互換：🍣≠🍺
+
+= Mroongaのよいところ2
+
+MySQLの機能を\n
+使える
+
+= MySQLの機能
+
+  * レプリケーション
+  * ユーザー管理
+  * クライアントライブラリー
+  * ...
+
+= Mroongaのよいところ3
+
+速い！
+
+= 例：MySQL 5.7と比較
+
+(('tag:center'))
+(('note:ポイント：MySQL 5.7のInnoDBは日本語全文検索対応！'))
+
+  # RT
+
+  クエリー, 文字数, InnoDB\nmecab, InnoDB\nbigram, Mroonga\nbigram
+
+  COUNT, 1, (('2.62s')), N/A, ((*0.74s*))
+  COUNT, 2, ((*0.07s*)), (('1.74s')), (('0.27s'))
+  ORDER BY, 1, (('2.78s')), N/A, ((*0.83s*))
+  ORDER BY, 2, ((*0.09s*)), (('2.72s')), (('0.31s'))
+
+(('tag:center'))
+(('note:出典：MySQLの全文検索に関するあれやこれや by yoku0825'))\n
+(('note:http://www.slideshare.net/yoku0825/mysql-47364986'))
+
+  * InnoDB mecabは遅いことがある
+  * Mroongaは安定して速い
+
+= MySQL 5.7で日本語全文検索
+
+  # coderay sql
+  CREATE TABLE texts (
+    content TEXT,
+    FULLTEXT INDEX (content)
+      WITH PARSER mecab -- ←がポイント
+  ) ENGINE=InnoDB
+    DEFAULT CHARSET=utf8mb4;
+
+(('tag:center'))
+(('note:mecabの代わりにngramも指定できるが実用的ではなさそう'))\n
+(('note:mecabを使い場合は↑の他にMeCabの設定が必要'))\n
+(('note:https://dev.mysql.com/doc/refman/5.7/en/fulltext-search-mecab.html'))
+
+= Mroonga vs MySQL 5.7
+
+  * Mroonga
+    * デフォルトでいい感じに動く\n
+      (('note:（選びたければ指定できる）'))
+    * 安定して速い
+  * MySQL 5.7 InnoDB
+    * パーサーを選ばないといけない\n
+      (('note:（mecab?ngram?違いは？）'))
+    * 遅いこともある
+
+= Mroongaが速い理由：1
+
+Groonga直結\n
+↓\n
+Groongaが速いと\n
+Mroongaも速い
+
+= Mroongaが速い理由：2
+
+(({ORDER BY LIMIT}))を最適化
+
+= (({ORDER BY LIMIT}))最適化
+
+  # coderay sql
+  SELECT * FROM texts
+    WHERE MATCH(content1)
+          AGAINST('...' IN BOOLEAN MODE)
+    ORDER BY priority
+    LIMIT 10;
+
+(('tag:center'))
+MySQLに先頭10件しか返さない\n
+(('note:ORDER BY LIMITをMySQLが処理するより'))\n
+(('note:Groongaが処理する方が速いので速くなる'))
+
+= (({ORDER BY LIMIT}))最適化！
+
+  # coderay sql
+  SELECT * FROM texts
+    WHERE MATCH(content)
+          AGAINST('...' IN BOOLEAN MODE)
+      AND n_likes < 100 -- 追加
+    ORDER BY priority
+    LIMIT 10;
+
+(('tag:center'))
+Groonga:(({MATCH AGAINST}))以外も処理\n
+(('note:MySQLが処理するよりGroongaが処理する方が速いので速くなる'))
+
+= Mroongaが速い理由：3
+
+必要なカラム\n
+((*のみ*))\n
+アクセス
+
+= 必要なカラムのみアクセス
+
+  # coderay sql
+  SELECT c1, c3, c5 FROM t;
+
+(('tag:center'))
+(({c2})), (({c4}))にはアクセスしない\n
+→I/Oが減って速い
+
+= Groongaはカラムストア
+
+(('tag:center'))
+(('note:必要なカラムのみアクセスできる理由'))
+
+  # image
+  # src = images/groonga-column-store.svg
+  # relative_width = 100
+
+= Groonga族：PGroonga
+
+  # image
+  # src = images/pgroonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+ぴーじーるんが\n
+((*P*))ost((*g*))reSQL + ((*Groonga*))
+
+= PGroongaのよいところ1
+
+簡単に使える
+
+= 簡単
+
+  * SQLで使える
+  * 全文検索の知識なしで\n
+    使い始められる
+
+= PGroongaを使う：索引
+
+  # coderay sql
+  CREATE INDEX name ON texts
+    USING pgroonga (content);
+
+(('tag:center'))
+(('note:ポイント：全文検索の索引を作ると言っているだけ'))
+
+= PGroongaを使う：検索
+
+  # coderay sql
+  SELECT * FROM texts
+    WHERE
+      content @@ 'キーワード1 キーワード2';
+
+(('tag:center'))
+(('note:ポイント：Web検索エンジンと同様にクエリーを書ける'))
+
+= なぜ知識なしで使えるの？
+
+適切な\n
+デフォルト値
+
+= デフォルト値
+
+  * トークナイザー：可変長Bigram\n
+    (('note:（トークナイザー≒検索キーワード抽出モジュール）'))
+    * 日本語+英語でもいい感じに動く
+  * ノーマライザー：NFKC\n
+    (('note:（ノーマライザー≒テキスト正規化モジュール）'))
+    * Unicode正規化形式の1つ
+
+= PGroongaのよいところ2
+
+PostgreSQLの\n
+機能を使える
+
+= PostgreSQLの機能
+
+  * トランザクション
+  * ユーザー管理
+  * クライアントライブラリー
+  * ...
+
+= PGroongaのよいところ3
+
+速い！
+
+= 例：pg_bigmと比較
+
+(('tag:center'))
+(('note:ポイント：PostgreSQL標準では日本語全文検索非対応'))
+
+  # RT
+  delimiter = [|]
+
+  ヒット数 | PGroonga | pg_bigm
+
+  368 | ((*0.030s*)) | (('0.107s'))
+  17,172 | ((*0.121s*)) | (('1.224s'))
+  22,885 | ((*0.179s*)) | (('2.472s'))
+  625,792(*) | (('0.646s')) | ((*0.556s*))
+
+(('note:データ：Wikipedia日本語版'))\n
+(('note:約184万レコード・平均サイズ約3.8KB'))\n
+(('note:詳細：http://www.clear-code.com/blog/2015/5/25.html'))
+
+(('note:(*) 他は検索語が3文字以上でこれだけ2文字'))
+
+(('tag:center'))
+PGroongaは安定して速い！
+
+= 更新中も性能維持
+
+  # image
+  # src = images/groonga-performance-characteristic.svg
+  # relative_width = 100
+
+= GINと更新と参照
+
+  # image
+  # src = images/read-while-write-gin.svg
+  # relative_height = 95
+
+(('tag:center'))
+(('note:GINはpg_bigmが使っているPostgreSQL標準の転置索引実装'))
+
+= PGroongaと更新と参照
+
+  # image
+  # src = images/read-while-write-pgroonga.svg
+  # relative_height = 95
+
+(('tag:center'))
+(('note:PGroongaはGroongaを使っているので参照ロックフリー'))
+
+= ロード時間も速い
+
+  # RT
+  delimiter = [|]
+
+  元データの\nロード時間 | 索引\n作成時間\nPGroonga | 索引\n作成時間\npg_bigm
+
+  16分31秒 | 25分37秒 | 5時間56分15秒
+
+(('note:データ：Wikipedia日本語版'))\n
+(('note:約184万レコード・平均サイズ約3.8KB'))\n
+(('note:詳細：http://www.clear-code.com/blog/2015/5/25.html'))
+
+(('tag:center'))
+pg_bigmより約14倍速い！
+
+= Groonga族：Rroonga
+
+  # image
+  # src = images/rroonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+るるんが\n
+((*R*))uby + ((*Groonga*))
+
+= Rroongaのよいところ1
+
+Rubyで書ける
+
+= RubyでDB作成
+
+  # coderay ruby
+
+  Groonga::Database.create(:path => "/tmp/db")
+
+= Rubyでテーブル定義
+
+  # coderay ruby
+
+  Groonga::Schema.define do |schema|
+    schema.create_table("Users",
+                        :type => :hash) do |table|
+      table.short_text("name")
+      table.int8("age")
+    end
+  end
+
+= Rubyでデータロード
+
+  # coderay ruby
+
+  users = Groonga["Users"]
+  users.add("alice",
+            :name => "Alice",
+            :age => 29)
+
+= Rubyでデータロード
+
+  # coderay ruby
+
+  users = Groonga["Users"]
+  users.add("alice",
+            :name => "Alice",
+            :age => 29)
+
+= Rubyで検索
+
+  # coderay ruby
+
+  twentys = users.select do |record|
+    (record.age >= 20) & (record.age < 30)
+  end
+  twentys.each do |twenty|
+    p twenty.name # => "Alice"
+  end
+
+= Rroongaのよいところ2
+
+サーバーいらず
+
+= サーバーいらず
+
+  * ローカルのDBを操作
+    * SQLiteと同じ
+  * 向き不向き
+    * 向き：1台で扱えるデータ量
+    * 不向き：1台で扱えないデータ量
+
+= Rroongaの利用事例1
+
+Milkode\n
+ソースコード\n
+検索\n
+(('note:http://milkode.ongaeshi.me/'))
+
+= Mlikode
+
+  * 行指向のソースコード検索\n
+    (('note:grepの親戚'))
+  * 数万ファイルも余裕
+    * grepだと遅いけど1台で扱える量
+  * 検索方法
+    * Rroongaでファイル検索
+    * →絞り込んだファイルをgrep\n
+      (('note:ポイント：絞り込んだ後ならgrepでも速い！'))
+
+= Rroongaの利用事例2
+
+ROMA\n
+分散KVS\n
+(('note:http://roma-kvs.org/'))
+
+= ROMA
+
+  * Rakuten/Ruby\n
+    On-Memory\n
+    Architecture
+  * Rubyで実装された分散KVS
+  * ストレージにGroongaを利用\n
+    (('note:Tokyo Cabinetも使える'))
+
+= Rroongaの利用事例3
+
+Droonga
+
+= Groonga族：Droonga
+
+  # image
+  # src = images/droonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+どゅるんが\n
+((*D*))istributed ((*Groonga*))\n
+(('note:分散対応Groonga'))
+
+= Droongaのよいところ1
+
+分散機能
+
+= 分散機能
+
+  * レプリケーション：実装済み\n
+    (('note:ダウンタイムなしでノード追加可能'))
+    * データ複製
+    * 参照性能・可用性向上
+  * シャーディング：実装予定
+    * データ分割
+    * 更新性能・最大データ量向上
+
+= レプリケーション時の性能
+
+  # image
+  # src = images/droonga-throughput.png
+  # relative_width = 100
+
+= Droongaのよいところ2
+
+Groonga互換API
+
+= Groonga互換API
+
+  * Groongaと同じように使える
+    * Groongaからの移行手順あり\n
+      (('note:http://droonga.org/ja/tutorial/groonga/'))
+    * DroongaからGroongaも可
+  * クライアント無変更で動く
+
+= 概要のまとめ
+
+  * Groonga：高速・日本語得意
+  * Mroonga：高速・簡単
+  * PGroonga：高速・簡単
+  * Rroonga：高速・手軽
+  * Droonga：高速・スケーラブル
+
+= 最新情報
+
+= 最新情報：Groonga
+
+  # image
+  # src = images/groonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+ぐるんが
+
+= Groonga: 1
+
+groonga-httpdを\n
+正式機能に
+
+= groonga-httpd
+
+  * nginxにGroongaを組み込み
+    * Groonga族
+    * nginxのモジュールとして実装
+  * Groonga HTTPサーバー互換
+  * ↑より高機能(('note:（HTTPサーバーとして）'))
+    * 認証・TLS・HTTP/2
+
+= Groonga: 2
+
+Windowsでの\n
+DBサイズ減少\n
+(('note:（1/3以下になるケースもあり）'))
+
+= Groonga: 3
+
+ドリルダウンの\n
+高機能化
+
+= ドリルダウンの高機能化1
+
+(('tag:center'))
+(('tag:margin-bottom'))
+集計処理を追加
+
+  * 既存：
+    * カウントのみ
+  * 追加：
+    * 合計・最小値・最大値・平均
+
+= ドリルダウン+平均
+
+(('tag:center'))\n
+グループでドリルダウンして\n
+グループ毎の平均年齢も計算
+
+  % curl \
+      'localhost:10041/d/select' \
+      --get \
+      --data-urlencode 'table=users' \
+      --data-urlencode 'drilldown=group' \
+      --data-urlencode 'drilldown_calc_types=AVG' \
+      --data-urlencode 'drilldown_calc_target=age' \
+      --data-urlencode 'drilldown_output_columns=_key,_avg'
+
+= 平均の出力例
+
+  # coderay json
+  [... [
+    [100], # 100グループ
+    [
+      ["_key", "ShortText"],
+      ["_avg", "Float"]
+    ],
+    [
+      ["グループ1", 29.0], # 平均29.0歳
+      ["グループ2", 22.9], # 平均22.9歳
+      ...
+    ]]]
+
+= ドリルダウンの高機能化2
+
+(('tag:center'))
+(('tag:margin-bottom'))
+複数キーでのドリルダウン\n
+↓\n
+クロス集計
+
+(('tag:center'))
+例：市と年齢でのクロス集計
+
+  # RT
+
+  市＼年齢, 20歳, 21歳
+
+  札幌市, 999人, 100人
+  仙台市, 500人, 200人
+
+= 複数キードリルダウン例
+
+(('tag:center'))
+市と年齢でドリルダウン
+
+  % curl \
+      'localhost:10041/d/select' \
+      --get \
+      --data-urlencode 'table=users' \
+      --data-urlencode \
+        'drilldown[city_age].keys=city,age' \
+      --data-urlencode \
+        'drilldown[city_age].output_columns=
+          _value.city,_value.age,_nsubrecs'
+
+= 出力例
+
+  # coderay json
+  [... [
+    [100], # 100パターン
+    [
+      ["city", "ShortText"],
+      ["age", "Int8"]
+      ["_nsubrecs", "Int32"]
+    ],
+    [
+      ["札幌市", 20, 999], # 札幌市の20歳は999人
+      ["札幌市", 21, 100], # 札幌市の21歳は100人
+      ["仙台市", 20, 500], # 仙台市の20歳は500人
+      ...
+    ]]]
+
+= Groonga: 4
+
+リクエスト\n
+キャンセル\n
+対応
+
+= リクエストキャンセル
+
+  % curl \
+      'localhost:10041/d/select' \
+      --get \
+      --data-urlencode 'table=users' \
+      --data-urlencode 'request_id=XXX' &
+  % curl \
+      'localhost:10041/d/request_cancel' \
+      --get \
+      --data-urlencode 'id=XXX'
+
+(('note:注：リクエストIDを重複無く付けることはクライアントの責任'))
+
+= Groonga: 5
+
+(({dump}))の\n
+ストリーム対応
+
+= (({dump}))のストリーム対応
+
+  * Before
+    * メモリー上で全部作ってから出力
+    * 大きなDBではメモリー使用量が多い
+  * After
+    * ダンプ内容を順次出力
+    * 大きなDBでもメモリー消費が少ない
+
+= Groonga: 6
+
+シャーディング\n
+対応
+
+= シャーディング対応
+
+  * 同一DB内
+    * 複数のホストにデータ分散ではない
+  * 目的
+    * テーブルの最大レコード数制限突破\n
+      (('note:1テーブルあたり最大約2億レコード'))
+  * サポート
+    * 月・日でのシャーディング
+
+= シャーディング：定義
+
+  % curl 'localhost:10041/d/table_create' \
+      --get \
+      --data-urlencode 'name=Logs_20151129' \
+      --data-urlencode 'flags=TABLE_NO_KEY'
+  % curl 'localhost:10041/d/column_create' \
+      --get \
+      --data-urlencode 'table=Logs_20151129' \
+      --data-urlencode 'name=timestamp' \
+      --data-urlencode 'flags=COLUMN_SCALAR' \
+      --data-urlencode 'type=Time'
+
+= シャーディング：ロード
+
+  # coderay json
+  [
+  {"timestamp": "2015-11-29 00:00:29"},
+  {"timestamp": "2015-11-29 00:00:30"},
+  {"timestamp": "2015-11-29 00:00:31"}
+  ]
+
+= シャーディング：準備
+
+  % curl 'localhost:10041/d/plugin_register' \
+      --gets \
+      --data-urlencode 'name=sharding'
+
+= シャーディング：検索
+
+  logical_select \
+    --logical_table Logs \
+    --shard_key timestamp \
+    --min "2015-11-29 00:00:00" \
+    --min_border "include" \
+    --max "2015-11-30 00:00:00" \
+    --max_border "exclude" \
+    --filter "..."
+
+= Groonga: 7
+
+正規表現対応
+
+= 正規表現
+
+  * 構文はRubyと同じ
+    * エンジンがRubyと同じだから
+  * 一部のパターンは索引を使える
+    * 前方一致：(({\A#{リテラル}}))
+    * 中間一致：(({#{リテラル}}))
+    * 後方一致：(({#{リテラル}\z}))
+
+= 正規表現：使い方
+
+    select \
+      --filter 'content @~ "\\AHello"'
+
+  * 演算子は(({@~}))
+  * エスケープが煩雑なので注意
+
+= Groonga: 8
+
+カスタム\n
+スコア関数対応
+
+= スコア関数
+
+  * 文書がどのくらいクエリーに\n
+    適合しているかの度合いを返す\n
+    関数
+  * これまではTFのみ
+    * TF=単語の出現数
+    * =単語の出現数がスコア
+
+= 新スコア関数
+
+  * (({score_tf_idf}))
+    * TF-IDFベースのスコア関数
+    * 単語の出現数を単語の重要度で補正
+  * (({score_tf_at_most}))
+    * 上限値付きTFベースのスコア関数
+    * スパマー対策ならこれで十分
+
+= スコア関数：使い方
+
+  select Logs \
+    --match_columns \
+      "scorer_tf_at_most(body, 3.0)" \
+    --query "keyword1 keyword2"
+
+(('tag:center'))
+(({match_columns}))で指定
+
+= Groonga: 9
+
+ログ\n
+ローテーション\n
+対応
+
+= ログローテーション
+
+  * 使い方
+    * groongaコマンドの起動オプション
+  * オプション
+    * (({--log-rotate-threshold-size}))
+    * (({--query-log-rotate-threshold-size}))
+
+= Groonga: 10
+
+キャッシュの\n
+最大キーサイズ\n
+増加
+
+= キャッシュのキーサイズ
+
+  * Before
+    * 4KiB
+  * After
+    * 64KiB - 1
+
+= Groonga: 11
+
+(({io_flush}))追加
+
+= (({io_flush}))
+
+  * メモリー上のデータを\n
+    ディスクに書き込むコマンド
+    * 通常はOSに任せている
+  * 目的：クラッシュ対策
+    * UNIX: プロセスが死んでもカーネルが生きていればいずれ書き込まれる
+    * Windows: プロセスが死ぬと書き込まれない
+
+= Groonga: 12
+
+使った索引を\n
+ログ出力
+
+= 使った索引をログ出力
+
+  * チューニングに便利
+    * SQLの(({EXPLAIN}))の不便バージョン\n
+      (('note:サーバーのログを確認しないといけないから'))
+  * ログレベルに注意
+    * デフォルトでは出力されない
+    * (({debug}))にすること
+
+= Groonga: 13
+
+Windows\n
+イベントログ\n
+対応
+
+= Windowsイベントログ
+
+(('tag:center'))
+使い方
+
+  % groonga --use-windows-event-log
+
+= Groonga: 14
+
+スレッド数の\n
+動的変更対応
+
+= スレッド数変更
+
+(('tag:center'))
+最大8スレッドに変更する例
+
+  % curl \
+      'localhost:10041/d/thread_limit' \
+      --get \
+      --data-urlencode 'max=8'
+
+= Groonga: 15
+
+(({column_copy}))追加
+
+= (({column_copy}))
+
+  * カラムの値をコピー
+    * サーバーサイドで実行
+  * 利用例
+    * テーブル・カラム定義変更
+    * 新カラム作成→コピー→
+    * 旧カラム削除→リネーム
+
+= Groonga: 16
+
+Pretty print\n
+対応
+
+= 従来
+
+  % curl 'localhost:10041/d/status'
+  [[0,...],{"alloc_count":248,...}]
+
+= Pretty print
+
+  % curl \
+      'localhost:10041/d/status' \
+      --get \
+      --data-urlencode 'output_pretty=yes'
+  [
+    [
+      0,
+      ...
+    ],
+    {
+      "alloc_count": 248,
+      ...
+    }
+  ]
+
+= Groonga: 17
+
+新コマンド
+
+= 新コマンド
+
+  * (({reindex}))
+    * 既存インデックスを再作成
+  * (({schema}))
+    * スキーマを返す
+  * (({thread_limit}))
+    * 最大スレッド数を動的に変更
+
+= Groonga: 18
+
+新関数
+
+= 新関数
+
+  * (({prefix_rk_search()}))
+    * ローマ字で検索
+    * (({select}))で補完できる
+
+= Groonga: 19
+
+Groonga Admin\n
+進化
+
+= Groonga Admin
+
+  * Groongaの新しい管理画面
+    * 旧：Webからコマンドを実行できる
+    * 新：詳細を知らずに使える
+  * 試せる
+    * (('note:http://packages.groonga.org:10041/'))
+
+= 最新情報：Mroonga
+
+  # image
+  # src = images/mroonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+むるんが\n
+((*M*))ySQL + G((*roonga*))
+
+= Mroonga: 1
+
+    mroonga_boolean_mode_syntax_flags
+
+  * (({IN BOOLEAN MODE}))での構文を変更
+    * スクリプト構文→使える演算子が増加
+
+= スクリプト構文
+
+  # coderay sql
+  SET mroonga_boolean_mode_syntax_flags =
+    "SYNTAX_SCRIPT";
+
+  SELECT * FROM memos
+    WHERE MATCH(title)
+          AGAINST('title @~ ".+roonga"'
+                  IN BOOLEAN MODE);
+
+(('note:正規表現を使う例'))\n
+(('note:他にも関数を使えたり比較演算子を使えたりする'))\n
+(('note:MATCHに指定していないカラムでも検索できる'))
+
+= Mroonga: 2
+
+MariaDB\n
+カスタム\n
+パラメーター\n
+対応
+
+= インデックスパラメーター
+
+  # coderay sql
+
+  CREATE TABLE memos (
+    body text,
+    FULLTEXT INDEX body_index (body)
+      TOKENIZER='TokenMecab'
+      NORMALIZER='NormalizerAuto'
+      TOKEN_FILTERS='TokenFilterStopWord'
+      -- ↑COMMENTに書かなくてよい！
+  ) ENGINE=Mroonga DEFAULT CHARSET=utf8mb4;
+
+= カラムパラメーター
+
+  # coderay sql
+
+  CREATE TABLE tags (
+    name VARCHAR(64) PRIMARY KEY
+  ) ENGINE=Mroonga DEFAULT CHARSET=utf8mb4;
+
+  CREATE TABLE bugs (
+    tag VARCHAR(64) GROONGA_TYPE='tags'
+  ) ENGINE=Mroonga DEFAULT CHARSET=utf8mb4;
+
+= Mroonga: 3
+
+MySQL 5.7対応
+
+= MySQL 5.7対応
+
+  * MySQL 5.7でビルドできる
+  * JSON型対応
+
+= JSON型
+
+  # coderay sql
+
+  CREATE TABLE logs (
+    record JSON
+  ) ENGINE=Mroonga
+    DEFAULT CHARSET=utf8mb4;
+  INSERT INTO logs
+    VALUES ('{"message": "start"}');
+
+= Mroonga: 4
+
+MariaDB 10.1\n
+対応
+
+= 最新情報：Droonga
+
+  # image
+  # src = images/droonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+どゅるんが\n
+((*D*))istributed ((*Groonga*))\n
+(('note:分散対応Groonga'))
+
+= Droonga: 1
+
+ダウンタイム\n
+なしの\n
+ノード追加対応
+
+= 今年のまとめ
+
+  * Groonga：たくさん改良
+  * Mroonga
+    * 使い勝手改良・最新対応
+  * PGroonga: 今年デビュー
+  * Rroonga：最新対応
+  * Droonga：可用性向上
+
+= 今後
+
+= ヒント
+
+  * 実現は保証しない
+    * 実現しようとはするよ！
+  * 実現可能性を高めるには…
+    * 開発に参加\n
+      (('note:コード・ドキュメントを書く・テストする・宣伝する'))
+    * 開発者が開発する時間を増やす\n
+      (('note:他のユーザーをサポート・情報公開・仕事を頼む'))
+
+= 今後：Groonga
+
+  # image
+  # src = images/groonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+ぐるんが
+
+= Groonga: 1
+
+(('tag:center'))
+(('tag:margin-bottom'))
+カラムストアをもっと活かす
+
+  * シーケンシャルサーチを速く！
+  * ソートを速く！
+  * ドリルダウンを速く！
+
+(('tag:center'))
+↓\n
+grn_ts（ぐるんたす）
+
+= Groonga: 2
+
+(('tag:center'))
+(('tag:margin-bottom'))
+mrubyをデフォルト有効
+
+  * プラグインをRubyで書ける
+  * 式を書き換えられる
+  * オプティマイザーを書ける
+
+= Groonga: 3
+
+(('tag:center'))
+(('tag:margin-bottom'))
+プラグインエコシステム
+
+  * プラグイン管理コマンド提供
+    * 例：(({grn plugin install XXX}))
+  * プラグインリポジトリー提供\n
+    (('note:GoのようにGitから直接インストールでもいいかも'))
+  * 対応プラグイン
+    * Rubyで書かれたプラグイン
+
+= Groonga: 4
+
+(('tag:center'))
+(('tag:margin-bottom'))
+位置指定マッチ対応
+
+  * N番目のトークンならマッチ
+    * 例：1番目のトークンは(({hello}))？
+    * マッチする：(({hello world}))
+    * マッチしない：(({hey! hello world}))
+
+= 位置指定マッチ応用例1
+
+(('tag:center'))
+(('tag:margin-bottom'))
+正規表現の前方一致検索
+
+  * Groongaでの構文：(({\A}))
+    * 例：(({\Ahello}))
+  * 実装：
+    * 1番目のトークンかチェック
+
+= 位置指定マッチ応用例2
+
+(('tag:center'))
+(('tag:margin-bottom'))
+ベクターのN番目の要素にマッチ
+
+  # coderay json
+  {
+    "rank": ["Alice", "Bob", "Chris"]
+  }
+  # rank[0] @ "Bob"→マッチしない
+  # rank[1] @ "Bob"→マッチする
+
+= Groonga: 5
+
+(('tag:center'))
+(('tag:margin-bottom'))
+(({select}))で計算結果での\n
+ドリルダウン・ソートに対応
+
+  * 例
+    * 元データ：日時(('note:（2015-11-29 13:30）'))
+    * 計算結果：年月日(('note:（2015-11-29）'))
+    * ドリルダウン：計算結果を使用\n
+      (('note:（2015-11-29: 1件、2015-11-30: 2件）'))
+
+= (({select}))例
+
+  select Logs \
+    --column[access_day].type Time \
+    --column[access_day].source \
+      'time_floor_year(access_time)' \
+    --drilldown access_day
+
+= Groonga: 6
+
+(('tag:center'))
+(('tag:margin-bottom'))
+JSONでのパラメーター指定\n
+(('note:（も使えるようにする）'))
+
+  * メリット
+    * プログラムから指定しやすい\n
+      (('note:ことがあるかもしれない'))
+  * デメリット
+    * クエリーログに残らない
+
+= クエリーストリング
+
+(('tag:center'))
+現行
+
+  % curl \
+      'localhost:10041/d/select' \
+      --get \
+      --data-urlencode 'table=users' \
+      --data-urlencode 'limit=100'
+
+= JSON
+
+  % cat select.json
+  {
+    "table": "users",
+    "limit": "100"
+  }
+  % curl \
+      'localhost:10041/d/select' \
+       --header 'Content-Type: application/json' \
+       --data-binary @select.json
+
+= Groonga: 7
+
+(('tag:center'))
+(('tag:margin-bottom'))
+ドキュメント改善
+
+  * 未ドキュメントな項目を書く
+  * 古いドキュメントを更新
+
+= 今後：Mroonga
+
+  # image
+  # src = images/mroonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+むるんが\n
+((*M*))ySQL + G((*roonga*))
+
+= Mroonga: 1
+
+(('tag:center'))
+(('tag:margin-bottom'))
+ラッパーモードで\n
+ロールバック対応
+
+  * 現状：ロールバック非対応\n
+    (('note:（変更が残ってしまい検索結果に不整合発生）'))
+    * 今後：コミット時にまとめて更新\n
+      (('note:（ロールバックしても変更が残らない）'))
+  * 現状：トランザクション中に\n
+    更新データを検索可能
+    * 今後：検索不可能
+
+= Mroonga: 2
+
+(('tag:center'))
+(('tag:margin-bottom'))
+MariaDBで\n
+テーブルパラメーター対応
+
+  # coderay sql
+
+  CREATE TABLE xxx (
+  ) ENGINE=Mroonga
+    COMMENT='ENGINE "InnoDB"'
+    -- ↑を↓と書ける
+    WRAP ENGINE=InnoDB;
+
+= Mroonga: 3
+
+(('tag:center'))
+(('tag:margin-bottom'))
+generated column対応\n
+(('note:MySQL 5.7で導入。MariaDBでいうvirtual column。'))
+
+  # coderay sql
+
+  CREATE TABLE users (
+    first_name text,
+    last_name text,
+    full_name text AS
+      (CONCAT_WS(' ', first_name, last_name))
+      STORED
+  ) ENGINE=Mroonga;
+
+= Mroonga: 4
+
+(('tag:center'))
+(('tag:margin-bottom'))
+ネイティブパーテション対応\n
+(('note:MySQL 5.7で導入。FULLTEXT INDEXを使えるようになる！'))
+
+  # coderay sql
+
+  CREATE TABLE memos (
+    created_time DATETIME,
+    content text,
+    FULLTEXT INDEX (content)
+  ) ENGINE=Mroonga
+    PARTITION BY RANGE (TO_DAYS(timestamp)) (
+      -- ...
+    );
+
+= Mroonga: 5
+
+(('tag:center'))
+(('tag:margin-bottom'))
+JSONの全文検索対応
+
+  # coderay sql
+
+  CREATE TABLE logs (
+    message JSON,
+    FULLTEXT INDEX (message)
+  ) ENGINE=Mroonga;
+  SELECT * FROM logs
+    WHERE MATCH(message)
+          AGAINST('*D+ error' IN BOOLEAN MODE);
+
+= Mroonga: 6
+
+(('tag:center'))
+(('tag:margin-bottom'))
+同義語展開対応
+
+  # coderay sql
+
+  SELECT * FROM memos
+    WHERE MATCH(content)
+          AGAINST(mroonga_expand_query('*D+ 焼き肉')
+                  IN BOOLEAN MODE);
+  -- → AGAINST('*D+ 焼き肉 OR 焼肉' IN BOOLEAN MDOE)
+  -- 同義語はMroongaのテーブルにして
+  -- SQLで管理できるようにする
+
+= Mroonga: 7
+
+(('tag:center'))
+(('tag:margin-bottom'))
+ドキュメント改善
+
+  * Sphinx→GitHub Pages
+    * Sphinx・reSTはオーバースペック
+    * Markdownで十分
+    * typoを見つけても正しく直せない
+
+= 今後：PGroonga
+
+  # image
+  # src = images/pgroonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+ぴーじーるんが\n
+((*P*))ost((*g*))reSQL + ((*Groonga*))
+
+= PGroonga: 1
+
+(('tag:center'))
+(('tag:margin-bottom'))
+(({text @@ pgroonga.query}))を導入
+
+  # coderay sql
+
+  SET enable_indexscan = off;
+  SET enable_bitmapscan = off;
+  SELECT * FROM WHERE content @@ '全文検索';
+  -- ↑PostgreSQL組み込みの@@が使われる
+  SELECT * FROM
+    WHERE content @@ '全文検索'::pgroonga.query;
+  -- ↑PGroonga提供の@@が使われる
+
+= PGroonga: 2
+
+(('tag:center'))
+(('tag:margin-bottom * 5'))
+もっとGroongaを活かす
+
+  # RT
+  delimiter = [|]
+
+  PGroonga | pg_bigm | Groonga
+
+  (('0.646s')) | (('0.556s')) | ((*0.085s*))
+
+(('note:ヒット数635,792、検索語は2文字'))
+
+(('tag:center'))
+生Groongaは1桁速い！\n
+(('note:詳細：https://github.com/groonga/wikipedia-search/issues/3'))
+
+= PGroonga: 3
+
+(('tag:center'))
+(('tag:margin-bottom'))
+同義語展開対応
+
+  # coderay sql
+  body @@ pgroonga.expand_query('ネジ')
+  -- ↓
+  body @@ 'ネジ OR ねじ OR ボルト'
+
+= PGroonga: 4
+
+(('tag:center'))
+(('tag:margin-bottom'))
+ステミング対応
+
+found/finds→find
+
+  # coderay sql
+  CREATE INDEX index ON entries
+    USING pgroonga (title)
+      WITH (token_filters = 'TokenStem');
+
+= PGroonga: 5
+
+(('tag:center'))
+(('tag:margin-bottom'))
+重み対応
+
+  # coderay sql
+  -- タイトルのほうが本文より10倍重要
+  body @@ ('title * 10 || body', 'ポスグレ')
+
+= PGroonga: 6
+
+(('tag:center'))
+(('tag:margin-bottom'))
+複合主キー対応
+
+  # coderay sql
+  CREATE TABLE t (
+    c1 INT,
+    c2 INT,
+    PRIMARY KEY (c1, c2)
+  );
+  CREATE INDEX index ON t
+    USING pgroonga (c1, c2);
+
+= PGroonga: 7
+
+(('tag:center'))
+(('tag:margin-bottom'))
+(({pg_dump}))の(({WITH}))問題を解消
+
+  # coderay sql
+  CREATE INDEX index ON t
+    USING pgroonga (c)
+      WITH (tokenizer = 'TokenMecab');
+  -- ↓pg_dump: クォートがとれる→小文字に正規化される
+  CREATE INDEX index ON t
+    USING pgroonga (c)
+      WITH (tokenizer = TokenMecab);
+
+= 今後：Rroonga
+
+  # image
+  # src = images/rroonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+るるんが\n
+((*R*))uby + ((*Groonga*))
+
+= Rroonga: 1
+
+(('tag:center'))
+(('tag:margin-bottom'))
+ドキュメント改善
+
+  * Textile→Markdown
+  * 英語化
+  * 説明追加（主にコード例）
+
+= 今後：Droonga
+
+  # image
+  # src = images/droonga-logo.svg
+  # relative_width = 100
+
+(('tag:center'))
+どゅるんが\n
+((*D*))istributed ((*Groonga*))\n
+(('note:分散対応Groonga'))
+
+= Droonga: 1
+
+シャーディング\n
+対応
+
+= Groonga族以外
+
+  * キラーアプリが欲しい
+  * 世界規模で認知されたい
+    * Mroonga・PGroongaをきっかけに\n
+      (('note:MroongaはMariaDBにバンドルされている'))
+  * 本を出したい
+    * 初心者向けのやつ
+
+= まとめ
+
+  * Groonga族は今年も進化した
+  * Groonga族は来年も進化する
+  * 来年はもっと世界規模で\n
+    ユーザーを増やしたい
+
+= おしらせ1
+
+  * Groongaで学ぶ全文検索\n
+    (('note:↑で検索！'))
+    * 隔週金曜の夜開催
+    * 予習復習なしで時間内で\n
+      効率よく全文検索を学ぶ会
+    * 参加者のレベルは問わない
+    * 内容は毎回参加者に合わせて決める
+
+全文検索を学びたい方はどうぞ！
+
+= おしらせ2
+
+MySQLとPostgreSQLと\n
+日本語全文検索\n
+\n
+来年2月9日（肉の日）\n
+DMM.comラボにて