RubyGems - rroonga - Versions diffs - 4.0.6-x86-mingw32 → 4.0.7-x86-mingw32 - Mend

rroonga 4.0.6-x86-mingw32 → 4.0.7-x86-mingw32

Files changed (598) hide show

data/vendor/local/share/doc/groonga/ja/html/reference/commands/table_tokenize.html ADDED Viewed

@@ -0,0 +1,268 @@
+<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN"
+  "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">
+<html xmlns="http://www.w3.org/1999/xhtml">
+  <head>
+    <meta http-equiv="Content-Type" content="text/html; charset=utf-8" />
+    <title>7.3.33. table_tokenize &mdash; Groonga v4.0.8ドキュメント</title>
+    <link rel="stylesheet" href="../../_static/groonga.css" type="text/css" />
+    <link rel="stylesheet" href="../../_static/pygments.css" type="text/css" />
+    <script type="text/javascript">
+      var DOCUMENTATION_OPTIONS = {
+        URL_ROOT:    '../../',
+        VERSION:     '4.0.8',
+        COLLAPSE_INDEX: false,
+        FILE_SUFFIX: '.html',
+        HAS_SOURCE:  true
+      };
+    </script>
+    <script type="text/javascript" src="../../_static/jquery.js"></script>
+    <script type="text/javascript" src="../../_static/underscore.js"></script>
+    <script type="text/javascript" src="../../_static/doctools.js"></script>
+    <script type="text/javascript" src="../../_static/translations.js"></script>
+    <link rel="shortcut icon" href="../../_static/favicon.ico"/>
+    <link rel="top" title="Groonga v4.0.8ドキュメント" href="../../index.html" />
+    <link rel="up" title="7.3. コマンド" href="../command.html" />
+    <link rel="next" title="7.3.34. tokenize" href="tokenize.html" />
+    <link rel="prev" title="7.3.32. table_remove" href="table_remove.html" />
+  </head>
+  <body role="document">
+<div class="header">
+  <h1 class="title">
+    <a id="top-link" href="../../index.html">
+      <span class="project">groonga</span>
+      <span class="separator">-</span>
+      <span class="description">オープンソースのカラムストア機能付き全文検索エンジン</span>
+    </a>
+  </h1>
+  <div class="other-language-links">
+    <ul>
+      <li><a href="../../../../en/html/reference/commands/table_tokenize.html"><img src="../../_static/us.png" alt="English">English page</a></li>
+    </ul>
+  </div>
+</div>
+    <div class="related" role="navigation" aria-label="related navigation">
+      <h3>ナビゲーション</h3>
+      <ul>
+        <li class="right" style="margin-right: 10px">
+          <a href="../../genindex.html" title="総合索引"
+             accesskey="I">索引</a></li>
+        <li class="right" >
+          <a href="tokenize.html" title="7.3.34. tokenize"
+             accesskey="N">次へ</a> |</li>
+        <li class="right" >
+          <a href="table_remove.html" title="7.3.32. table_remove"
+             accesskey="P">前へ</a> |</li>
+        <li><a href="../../index.html">Groonga v4.0.8ドキュメント</a> &raquo;</li>
+          <li><a href="../../reference.html" >7. リファレンスマニュアル</a> &raquo;</li>
+          <li><a href="../command.html" accesskey="U">7.3. コマンド</a> &raquo;</li>
+      </ul>
+    </div>
+    <div class="document">
+      <div class="documentwrapper">
+        <div class="bodywrapper">
+          <div class="body" role="main">
+  <div class="section" id="table-tokenize">
+<h1>7.3.33. <code class="docutils literal"><span class="pre">table_tokenize</span></code><a class="headerlink" href="#table-tokenize" title="このヘッドラインへのパーマリンク">¶</a></h1>
+<div class="section" id="summary">
+<h2>7.3.33.1. 概要<a class="headerlink" href="#summary" title="このヘッドラインへのパーマリンク">¶</a></h2>
+<p><code class="docutils literal"><span class="pre">table_tokenize</span></code> コマンドは指定したテーブルのトークナイザーでテキストをトークナイズします。</p>
+</div>
+<div class="section" id="syntax">
+<h2>7.3.33.2. 構文<a class="headerlink" href="#syntax" title="このヘッドラインへのパーマリンク">¶</a></h2>
+<p><code class="docutils literal"><span class="pre">table_tokenize</span></code> コマンドには必須の引数と省略可能な引数があります。 <code class="docutils literal"><span class="pre">table</span></code> と <code class="docutils literal"><span class="pre">string</span></code> が必須の引数で、他の引数はすべて省略可能です。</p>
+<div class="highlight-none"><div class="highlight"><pre>table_tokenize table
+               string
+               [flags=NONE]
+               [mode=GET]
+</pre></div>
+</div>
+</div>
+<div class="section" id="usage">
+<h2>7.3.33.3. 使い方<a class="headerlink" href="#usage" title="このヘッドラインへのパーマリンク">¶</a></h2>
+<p>以下は簡単な使用例です。</p>
+<p>実行例:</p>
+<div class="highlight-none"><div class="highlight"><pre>register token_filters/stop_word
+# [[0,0.0,0.0],true]
+table_create Terms TABLE_PAT_KEY ShortText \
+  --default_tokenizer TokenBigram \
+  --normalizer NormalizerAuto \
+  --token_filters TokenFilterStopWord
+# [[0,0.0,0.0],true]
+column_create Terms is_stop_word COLUMN_SCALAR Bool
+# [[0,0.0,0.0],true]
+load --table Terms
+[
+{&quot;_key&quot;: &quot;and&quot;, &quot;is_stop_word&quot;: true}
+]
+# [[0,0.0,0.0],1]
+table_tokenize Terms &quot;Hello and Good-bye&quot; --mode GET
+# [
+#  [
+#    0,
+#    0.0,
+#    0.0
+#  ],
+#  [
+#    {
+#      &quot;value&quot;: &quot;hello&quot;,
+#      &quot;position&quot;: 0
+#    },
+#    {
+#      &quot;value&quot;: &quot;good&quot;,
+#      &quot;position&quot;: 2
+#    },
+#    {
+#      &quot;value&quot;: &quot;-&quot;,
+#      &quot;position&quot;: 3
+#    },
+#    {
+#      &quot;value&quot;: &quot;bye&quot;,
+#      &quot;position&quot;: 4
+#    }
+#  ]
+# ]
+</pre></div>
+</div>
+<p><code class="docutils literal"><span class="pre">Terms</span></code> テーブルには、 <code class="docutils literal"><span class="pre">TokenBigram</span></code> トークナイザーと、 <code class="docutils literal"><span class="pre">NormalizerAuto</span></code> ノーマライザーと、 <code class="docutils literal"><span class="pre">TokenFilterStopWord</span></code> トークンフィルターがセットされています。 この例は <code class="docutils literal"><span class="pre">TokenBigram</span></code> トークナイザーで <code class="docutils literal"><span class="pre">&quot;Hello</span> <span class="pre">and</span> <span class="pre">Good-bye&quot;</span></code> をトークナイズしたトークンを返します。トークンは、 <code class="docutils literal"><span class="pre">NormalizerAuto</span></code> ノーマライザーで正規化されています。 <code class="docutils literal"><span class="pre">and</span></code> トークンは、 <code class="docutils literal"><span class="pre">TokenFilterStopWord</span></code> トークンフィルターで除去されています。</p>
+</div>
+<div class="section" id="parameters">
+<h2>7.3.33.4. 引数<a class="headerlink" href="#parameters" title="このヘッドラインへのパーマリンク">¶</a></h2>
+<p>このセクションではすべての引数について説明します。引数はカテゴリわけしています。</p>
+<div class="section" id="required-parameters">
+<h3>7.3.33.4.1. 必須引数<a class="headerlink" href="#required-parameters" title="このヘッドラインへのパーマリンク">¶</a></h3>
+<p>必須引数は二つあります。 <code class="docutils literal"><span class="pre">table</span></code> と <code class="docutils literal"><span class="pre">string</span></code> です。</p>
+<div class="section" id="table">
+<h4>7.3.33.4.1.1. <code class="docutils literal"><span class="pre">table</span></code><a class="headerlink" href="#table" title="このヘッドラインへのパーマリンク">¶</a></h4>
+<p>語彙表テーブルを指定します。 <code class="docutils literal"><span class="pre">table_tokenize</span></code> コマンドは、語彙表テーブルにセットされたトークナイザーとノーマライザーとトークンフィルターを使います。</p>
+</div>
+<div class="section" id="string">
+<h4>7.3.33.4.1.2. <code class="docutils literal"><span class="pre">string</span></code><a class="headerlink" href="#string" title="このヘッドラインへのパーマリンク">¶</a></h4>
+<p>トークナイズしたい文字列を指定します。</p>
+<p>詳細は、 <a class="reference internal" href="tokenize.html"><em>tokenize</em></a> の <a class="reference internal" href="tokenize.html#tokenize-string"><em>string</em></a> オプションを参照してください。</p>
+</div>
+</div>
+<div class="section" id="optional-parameters">
+<h3>7.3.33.4.2. 省略可能引数<a class="headerlink" href="#optional-parameters" title="このヘッドラインへのパーマリンク">¶</a></h3>
+<p>いくつか省略可能な引数があります。</p>
+<div class="section" id="flags">
+<h4>7.3.33.4.2.1. <code class="docutils literal"><span class="pre">flags</span></code><a class="headerlink" href="#flags" title="このヘッドラインへのパーマリンク">¶</a></h4>
+<p>トークナイズ処理をカスタマイズするオプションを指定します。「 <code class="docutils literal"><span class="pre">|</span></code> 」で区切って複数のオプションを指定することができます。</p>
+<p>デフォルト値は <code class="docutils literal"><span class="pre">NONE</span></code> です。</p>
+<p>詳細は、 <a class="reference internal" href="tokenize.html"><em>tokenize</em></a> の <a class="reference internal" href="tokenize.html#tokenize-flags"><em>flags</em></a> オプションを参照してください。</p>
+</div>
+<div class="section" id="mode">
+<h4>7.3.33.4.2.2. <code class="docutils literal"><span class="pre">mode</span></code><a class="headerlink" href="#mode" title="このヘッドラインへのパーマリンク">¶</a></h4>
+<p>トークナイズモードを指定します。</p>
+<p>デフォルト値は <code class="docutils literal"><span class="pre">GET</span></code> です。</p>
+<p>詳細は、 <a class="reference internal" href="tokenize.html"><em>tokenize</em></a> の <a class="reference internal" href="tokenize.html#tokenize-mode"><em>mode</em></a> オプションを参照してください。</p>
+</div>
+</div>
+</div>
+<div class="section" id="return-value">
+<h2>7.3.33.5. 戻り値<a class="headerlink" href="#return-value" title="このヘッドラインへのパーマリンク">¶</a></h2>
+<p><code class="docutils literal"><span class="pre">table_tokenize</span></code> コマンドはトークナイズしたトークンを返します。</p>
+<p>詳細は、 <a class="reference internal" href="tokenize.html"><em>tokenize</em></a> の <a class="reference internal" href="tokenize.html#tokenize-return-value"><em>戻り値</em></a> オプションを参照してください。</p>
+</div>
+<div class="section" id="see-also">
+<h2>7.3.33.6. 参考<a class="headerlink" href="#see-also" title="このヘッドラインへのパーマリンク">¶</a></h2>
+<ul class="simple">
+<li><a class="reference internal" href="../tokenizers.html"><em>Tokenizers</em></a></li>
+<li><a class="reference internal" href="tokenize.html"><em>tokenize</em></a></li>
+</ul>
+</div>
+</div>
+          </div>
+        </div>
+      </div>
+      <div class="sphinxsidebar" role="navigation" aria-label="main navigation">
+        <div class="sphinxsidebarwrapper">
+  <h3><a href="../../index.html">目次</a></h3>
+  <ul>
+<li><a class="reference internal" href="#">7.3.33. <code class="docutils literal"><span class="pre">table_tokenize</span></code></a><ul>
+<li><a class="reference internal" href="#summary">7.3.33.1. 概要</a></li>
+<li><a class="reference internal" href="#syntax">7.3.33.2. 構文</a></li>
+<li><a class="reference internal" href="#usage">7.3.33.3. 使い方</a></li>
+<li><a class="reference internal" href="#parameters">7.3.33.4. 引数</a><ul>
+<li><a class="reference internal" href="#required-parameters">7.3.33.4.1. 必須引数</a><ul>
+<li><a class="reference internal" href="#table">7.3.33.4.1.1. <code class="docutils literal"><span class="pre">table</span></code></a></li>
+<li><a class="reference internal" href="#string">7.3.33.4.1.2. <code class="docutils literal"><span class="pre">string</span></code></a></li>
+</ul>
+</li>
+<li><a class="reference internal" href="#optional-parameters">7.3.33.4.2. 省略可能引数</a><ul>
+<li><a class="reference internal" href="#flags">7.3.33.4.2.1. <code class="docutils literal"><span class="pre">flags</span></code></a></li>
+<li><a class="reference internal" href="#mode">7.3.33.4.2.2. <code class="docutils literal"><span class="pre">mode</span></code></a></li>
+</ul>
+</li>
+</ul>
+</li>
+<li><a class="reference internal" href="#return-value">7.3.33.5. 戻り値</a></li>
+<li><a class="reference internal" href="#see-also">7.3.33.6. 参考</a></li>
+</ul>
+</li>
+</ul>
+  <h4>前のトピックへ</h4>
+  <p class="topless"><a href="table_remove.html"
+                        title="前の章へ">7.3.32. <code class="docutils literal"><span class="pre">table_remove</span></code></a></p>
+  <h4>次のトピックへ</h4>
+  <p class="topless"><a href="tokenize.html"
+                        title="次の章へ">7.3.34. <code class="docutils literal"><span class="pre">tokenize</span></code></a></p>
+  <div role="note" aria-label="source link">
+    <h3>このページ</h3>
+    <ul class="this-page-menu">
+      <li><a href="../../_sources/reference/commands/table_tokenize.txt"
+            rel="nofollow">ソースコードを表示</a></li>
+    </ul>
+   </div>
+<div id="searchbox" style="display: none" role="search">
+  <h3>クイック検索</h3>
+    <form class="search" action="../../search.html" method="get">
+      <input type="text" name="q" />
+      <input type="submit" value="検索" />
+      <input type="hidden" name="check_keywords" value="yes" />
+      <input type="hidden" name="area" value="default" />
+    </form>
+    <p class="searchtip" style="font-size: 90%">
+    モジュール、クラス、または関数名を入力してください
+    </p>
+</div>
+<script type="text/javascript">$('#searchbox').show(0);</script>
+        </div>
+      </div>
+      <div class="clearer"></div>
+    </div>
+    <div class="related" role="navigation" aria-label="related navigation">
+      <h3>ナビゲーション</h3>
+      <ul>
+        <li class="right" style="margin-right: 10px">
+          <a href="../../genindex.html" title="総合索引"
+             >索引</a></li>
+        <li class="right" >
+          <a href="tokenize.html" title="7.3.34. tokenize"
+             >次へ</a> |</li>
+        <li class="right" >
+          <a href="table_remove.html" title="7.3.32. table_remove"
+             >前へ</a> |</li>
+        <li><a href="../../index.html">Groonga v4.0.8ドキュメント</a> &raquo;</li>
+          <li><a href="../../reference.html" >7. リファレンスマニュアル</a> &raquo;</li>
+          <li><a href="../command.html" >7.3. コマンド</a> &raquo;</li>
+      </ul>
+    </div>
+    <div class="footer" role="contentinfo">
+        &copy; Copyright 2009-2014, Brazil, Inc.
+    </div>
+  </body>
+</html>