isomorfeus-ferret 0.12.6 → 0.13.1

Sign up to get free protection for your applications and to get access to all the features.
Files changed (249) hide show
  1. checksums.yaml +4 -4
  2. data/LICENSE +101 -19
  3. data/README.md +85 -16
  4. data/ext/isomorfeus_ferret_ext/bm_bitvector.c +22 -30
  5. data/ext/isomorfeus_ferret_ext/bm_hash.c +6 -12
  6. data/ext/isomorfeus_ferret_ext/bm_micro_string.c +3 -6
  7. data/ext/isomorfeus_ferret_ext/bm_store.c +11 -22
  8. data/ext/isomorfeus_ferret_ext/brotli_common_constants.c +15 -0
  9. data/ext/isomorfeus_ferret_ext/brotli_common_constants.h +200 -0
  10. data/ext/isomorfeus_ferret_ext/brotli_common_context.c +156 -0
  11. data/ext/isomorfeus_ferret_ext/brotli_common_context.h +113 -0
  12. data/ext/isomorfeus_ferret_ext/brotli_common_dictionary.c +5914 -0
  13. data/ext/isomorfeus_ferret_ext/brotli_common_dictionary.h +64 -0
  14. data/ext/isomorfeus_ferret_ext/brotli_common_platform.c +22 -0
  15. data/ext/isomorfeus_ferret_ext/brotli_common_platform.h +594 -0
  16. data/ext/isomorfeus_ferret_ext/brotli_common_transform.c +291 -0
  17. data/ext/isomorfeus_ferret_ext/brotli_common_transform.h +85 -0
  18. data/ext/isomorfeus_ferret_ext/brotli_common_version.h +26 -0
  19. data/ext/isomorfeus_ferret_ext/brotli_dec_bit_reader.c +76 -0
  20. data/ext/isomorfeus_ferret_ext/brotli_dec_bit_reader.h +351 -0
  21. data/ext/isomorfeus_ferret_ext/brotli_dec_decode.c +2608 -0
  22. data/ext/isomorfeus_ferret_ext/brotli_dec_huffman.c +339 -0
  23. data/ext/isomorfeus_ferret_ext/brotli_dec_huffman.h +121 -0
  24. data/ext/isomorfeus_ferret_ext/brotli_dec_prefix.h +732 -0
  25. data/ext/isomorfeus_ferret_ext/brotli_dec_state.c +159 -0
  26. data/ext/isomorfeus_ferret_ext/brotli_dec_state.h +365 -0
  27. data/ext/isomorfeus_ferret_ext/brotli_decode.h +344 -0
  28. data/ext/isomorfeus_ferret_ext/brotli_enc_backward_references.c +145 -0
  29. data/ext/isomorfeus_ferret_ext/brotli_enc_backward_references.h +39 -0
  30. data/ext/isomorfeus_ferret_ext/brotli_enc_backward_references_hq.c +843 -0
  31. data/ext/isomorfeus_ferret_ext/brotli_enc_backward_references_hq.h +95 -0
  32. data/ext/isomorfeus_ferret_ext/brotli_enc_backward_references_inc.h +163 -0
  33. data/ext/isomorfeus_ferret_ext/brotli_enc_bit_cost.c +35 -0
  34. data/ext/isomorfeus_ferret_ext/brotli_enc_bit_cost.h +63 -0
  35. data/ext/isomorfeus_ferret_ext/brotli_enc_bit_cost_inc.h +127 -0
  36. data/ext/isomorfeus_ferret_ext/brotli_enc_block_encoder_inc.h +34 -0
  37. data/ext/isomorfeus_ferret_ext/brotli_enc_block_splitter.c +194 -0
  38. data/ext/isomorfeus_ferret_ext/brotli_enc_block_splitter.h +51 -0
  39. data/ext/isomorfeus_ferret_ext/brotli_enc_block_splitter_inc.h +440 -0
  40. data/ext/isomorfeus_ferret_ext/brotli_enc_brotli_bit_stream.c +1314 -0
  41. data/ext/isomorfeus_ferret_ext/brotli_enc_brotli_bit_stream.h +84 -0
  42. data/ext/isomorfeus_ferret_ext/brotli_enc_cluster.c +56 -0
  43. data/ext/isomorfeus_ferret_ext/brotli_enc_cluster.h +48 -0
  44. data/ext/isomorfeus_ferret_ext/brotli_enc_cluster_inc.h +320 -0
  45. data/ext/isomorfeus_ferret_ext/brotli_enc_command.c +28 -0
  46. data/ext/isomorfeus_ferret_ext/brotli_enc_command.h +190 -0
  47. data/ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment.c +790 -0
  48. data/ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment.h +61 -0
  49. data/ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment_two_pass.c +645 -0
  50. data/ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment_two_pass.h +54 -0
  51. data/ext/isomorfeus_ferret_ext/brotli_enc_dictionary_hash.c +1846 -0
  52. data/ext/isomorfeus_ferret_ext/brotli_enc_dictionary_hash.h +25 -0
  53. data/ext/isomorfeus_ferret_ext/brotli_enc_encode.c +1927 -0
  54. data/ext/isomorfeus_ferret_ext/brotli_enc_encoder_dict.c +33 -0
  55. data/ext/isomorfeus_ferret_ext/brotli_enc_encoder_dict.h +43 -0
  56. data/ext/isomorfeus_ferret_ext/brotli_enc_entropy_encode.c +503 -0
  57. data/ext/isomorfeus_ferret_ext/brotli_enc_entropy_encode.h +122 -0
  58. data/ext/isomorfeus_ferret_ext/brotli_enc_entropy_encode_static.h +539 -0
  59. data/ext/isomorfeus_ferret_ext/brotli_enc_fast_log.c +105 -0
  60. data/ext/isomorfeus_ferret_ext/brotli_enc_fast_log.h +66 -0
  61. data/ext/isomorfeus_ferret_ext/brotli_enc_find_match_length.h +79 -0
  62. data/ext/isomorfeus_ferret_ext/brotli_enc_hash.h +488 -0
  63. data/ext/isomorfeus_ferret_ext/brotli_enc_hash_composite_inc.h +125 -0
  64. data/ext/isomorfeus_ferret_ext/brotli_enc_hash_forgetful_chain_inc.h +293 -0
  65. data/ext/isomorfeus_ferret_ext/brotli_enc_hash_longest_match64_inc.h +267 -0
  66. data/ext/isomorfeus_ferret_ext/brotli_enc_hash_longest_match_inc.h +262 -0
  67. data/ext/isomorfeus_ferret_ext/brotli_enc_hash_longest_match_quickly_inc.h +266 -0
  68. data/ext/isomorfeus_ferret_ext/brotli_enc_hash_rolling_inc.h +212 -0
  69. data/ext/isomorfeus_ferret_ext/brotli_enc_hash_to_binary_tree_inc.h +329 -0
  70. data/ext/isomorfeus_ferret_ext/brotli_enc_histogram.c +100 -0
  71. data/ext/isomorfeus_ferret_ext/brotli_enc_histogram.h +63 -0
  72. data/ext/isomorfeus_ferret_ext/brotli_enc_histogram_inc.h +51 -0
  73. data/ext/isomorfeus_ferret_ext/brotli_enc_literal_cost.c +175 -0
  74. data/ext/isomorfeus_ferret_ext/brotli_enc_literal_cost.h +30 -0
  75. data/ext/isomorfeus_ferret_ext/brotli_enc_memory.c +170 -0
  76. data/ext/isomorfeus_ferret_ext/brotli_enc_memory.h +114 -0
  77. data/ext/isomorfeus_ferret_ext/brotli_enc_metablock.c +663 -0
  78. data/ext/isomorfeus_ferret_ext/brotli_enc_metablock.h +105 -0
  79. data/ext/isomorfeus_ferret_ext/brotli_enc_metablock_inc.h +183 -0
  80. data/ext/isomorfeus_ferret_ext/brotli_enc_params.h +46 -0
  81. data/ext/isomorfeus_ferret_ext/brotli_enc_prefix.h +53 -0
  82. data/ext/isomorfeus_ferret_ext/brotli_enc_quality.h +165 -0
  83. data/ext/isomorfeus_ferret_ext/brotli_enc_ringbuffer.h +167 -0
  84. data/ext/isomorfeus_ferret_ext/brotli_enc_static_dict.c +486 -0
  85. data/ext/isomorfeus_ferret_ext/brotli_enc_static_dict.h +40 -0
  86. data/ext/isomorfeus_ferret_ext/brotli_enc_static_dict_lut.h +5864 -0
  87. data/ext/isomorfeus_ferret_ext/brotli_enc_utf8_util.c +85 -0
  88. data/ext/isomorfeus_ferret_ext/brotli_enc_utf8_util.h +32 -0
  89. data/ext/isomorfeus_ferret_ext/brotli_enc_write_bits.h +87 -0
  90. data/ext/isomorfeus_ferret_ext/brotli_encode.h +448 -0
  91. data/ext/isomorfeus_ferret_ext/brotli_port.h +288 -0
  92. data/ext/isomorfeus_ferret_ext/brotli_types.h +83 -0
  93. data/ext/isomorfeus_ferret_ext/bzlib.c +1572 -0
  94. data/ext/isomorfeus_ferret_ext/bzlib.h +282 -0
  95. data/ext/isomorfeus_ferret_ext/bzlib_blocksort.c +1094 -0
  96. data/ext/isomorfeus_ferret_ext/bzlib_compress.c +672 -0
  97. data/ext/isomorfeus_ferret_ext/bzlib_crctable.c +104 -0
  98. data/ext/isomorfeus_ferret_ext/bzlib_decompress.c +652 -0
  99. data/ext/isomorfeus_ferret_ext/bzlib_huffman.c +205 -0
  100. data/ext/isomorfeus_ferret_ext/bzlib_private.h +509 -0
  101. data/ext/isomorfeus_ferret_ext/bzlib_randtable.c +84 -0
  102. data/ext/isomorfeus_ferret_ext/fio_tmpfile.h +53 -53
  103. data/ext/isomorfeus_ferret_ext/frb_analysis.c +785 -1192
  104. data/ext/isomorfeus_ferret_ext/frb_index.c +513 -464
  105. data/ext/isomorfeus_ferret_ext/frb_qparser.c +48 -60
  106. data/ext/isomorfeus_ferret_ext/frb_search.c +1520 -1002
  107. data/ext/isomorfeus_ferret_ext/frb_store.c +96 -96
  108. data/ext/isomorfeus_ferret_ext/frb_threading.h +0 -1
  109. data/ext/isomorfeus_ferret_ext/frb_utils.c +147 -196
  110. data/ext/isomorfeus_ferret_ext/frt_analysis.c +695 -1090
  111. data/ext/isomorfeus_ferret_ext/frt_analysis.h +174 -170
  112. data/ext/isomorfeus_ferret_ext/frt_array.c +2 -4
  113. data/ext/isomorfeus_ferret_ext/frt_bitvector.c +9 -16
  114. data/ext/isomorfeus_ferret_ext/frt_bitvector.h +32 -81
  115. data/ext/isomorfeus_ferret_ext/frt_document.c +15 -20
  116. data/ext/isomorfeus_ferret_ext/frt_document.h +10 -9
  117. data/ext/isomorfeus_ferret_ext/frt_except.c +5 -12
  118. data/ext/isomorfeus_ferret_ext/frt_field_index.c +3 -3
  119. data/ext/isomorfeus_ferret_ext/frt_field_index.h +6 -7
  120. data/ext/isomorfeus_ferret_ext/frt_filter.c +35 -46
  121. data/ext/isomorfeus_ferret_ext/frt_fs_store.c +2 -0
  122. data/ext/isomorfeus_ferret_ext/frt_global.c +91 -200
  123. data/ext/isomorfeus_ferret_ext/frt_global.h +7 -18
  124. data/ext/isomorfeus_ferret_ext/frt_hash.c +1 -2
  125. data/ext/isomorfeus_ferret_ext/frt_ind.c +32 -35
  126. data/ext/isomorfeus_ferret_ext/frt_ind.h +9 -9
  127. data/ext/isomorfeus_ferret_ext/frt_index.c +714 -384
  128. data/ext/isomorfeus_ferret_ext/frt_index.h +274 -290
  129. data/ext/isomorfeus_ferret_ext/frt_lang.c +0 -2
  130. data/ext/isomorfeus_ferret_ext/frt_mempool.c +1 -2
  131. data/ext/isomorfeus_ferret_ext/frt_multimapper.c +4 -7
  132. data/ext/isomorfeus_ferret_ext/frt_q_boolean.c +68 -91
  133. data/ext/isomorfeus_ferret_ext/frt_q_const_score.c +35 -38
  134. data/ext/isomorfeus_ferret_ext/frt_q_filtered_query.c +53 -72
  135. data/ext/isomorfeus_ferret_ext/frt_q_fuzzy.c +25 -32
  136. data/ext/isomorfeus_ferret_ext/frt_q_match_all.c +21 -23
  137. data/ext/isomorfeus_ferret_ext/frt_q_multi_term.c +66 -103
  138. data/ext/isomorfeus_ferret_ext/frt_q_parser.c +207 -195
  139. data/ext/isomorfeus_ferret_ext/frt_q_phrase.c +20 -16
  140. data/ext/isomorfeus_ferret_ext/frt_q_prefix.c +17 -14
  141. data/ext/isomorfeus_ferret_ext/frt_q_range.c +102 -131
  142. data/ext/isomorfeus_ferret_ext/frt_q_span.c +179 -178
  143. data/ext/isomorfeus_ferret_ext/frt_q_term.c +47 -60
  144. data/ext/isomorfeus_ferret_ext/frt_q_wildcard.c +18 -16
  145. data/ext/isomorfeus_ferret_ext/frt_ram_store.c +46 -84
  146. data/ext/isomorfeus_ferret_ext/frt_search.c +105 -146
  147. data/ext/isomorfeus_ferret_ext/frt_search.h +331 -320
  148. data/ext/isomorfeus_ferret_ext/frt_similarity.c +5 -13
  149. data/ext/isomorfeus_ferret_ext/frt_similarity.h +7 -12
  150. data/ext/isomorfeus_ferret_ext/frt_sort.c +105 -149
  151. data/ext/isomorfeus_ferret_ext/frt_store.c +13 -7
  152. data/ext/isomorfeus_ferret_ext/frt_store.h +10 -2
  153. data/ext/isomorfeus_ferret_ext/frt_threading.h +0 -1
  154. data/ext/isomorfeus_ferret_ext/isomorfeus_ferret.c +22 -112
  155. data/ext/isomorfeus_ferret_ext/isomorfeus_ferret.h +2 -32
  156. data/ext/isomorfeus_ferret_ext/lz4.c +2495 -0
  157. data/ext/isomorfeus_ferret_ext/lz4.h +774 -0
  158. data/ext/isomorfeus_ferret_ext/lz4frame.c +1899 -0
  159. data/ext/isomorfeus_ferret_ext/lz4frame.h +623 -0
  160. data/ext/isomorfeus_ferret_ext/lz4hc.c +1615 -0
  161. data/ext/isomorfeus_ferret_ext/lz4hc.h +413 -0
  162. data/ext/isomorfeus_ferret_ext/lz4xxhash.c +1030 -0
  163. data/ext/isomorfeus_ferret_ext/lz4xxhash.h +328 -0
  164. data/ext/isomorfeus_ferret_ext/stem_modules.h +0 -86
  165. data/ext/isomorfeus_ferret_ext/test.c +0 -17
  166. data/ext/isomorfeus_ferret_ext/test_1710.c +11 -12
  167. data/ext/isomorfeus_ferret_ext/test_analysis.c +590 -583
  168. data/ext/isomorfeus_ferret_ext/test_compound_io.c +1 -1
  169. data/ext/isomorfeus_ferret_ext/test_document.c +19 -15
  170. data/ext/isomorfeus_ferret_ext/test_except.c +1 -2
  171. data/ext/isomorfeus_ferret_ext/test_fields.c +111 -100
  172. data/ext/isomorfeus_ferret_ext/test_file_deleter.c +10 -27
  173. data/ext/isomorfeus_ferret_ext/test_filter.c +11 -8
  174. data/ext/isomorfeus_ferret_ext/test_global.c +0 -46
  175. data/ext/isomorfeus_ferret_ext/test_hash.c +2 -2
  176. data/ext/isomorfeus_ferret_ext/test_hashset.c +1 -1
  177. data/ext/isomorfeus_ferret_ext/test_highlighter.c +15 -11
  178. data/ext/isomorfeus_ferret_ext/test_index.c +373 -363
  179. data/ext/isomorfeus_ferret_ext/test_q_const_score.c +5 -3
  180. data/ext/isomorfeus_ferret_ext/test_q_filtered.c +5 -3
  181. data/ext/isomorfeus_ferret_ext/test_q_fuzzy.c +13 -10
  182. data/ext/isomorfeus_ferret_ext/test_q_parser.c +45 -7
  183. data/ext/isomorfeus_ferret_ext/test_q_span.c +15 -12
  184. data/ext/isomorfeus_ferret_ext/test_ram_store.c +3 -3
  185. data/ext/isomorfeus_ferret_ext/test_search.c +60 -64
  186. data/ext/isomorfeus_ferret_ext/test_segments.c +5 -4
  187. data/ext/isomorfeus_ferret_ext/test_sort.c +17 -14
  188. data/ext/isomorfeus_ferret_ext/test_store.c +2 -0
  189. data/ext/isomorfeus_ferret_ext/test_term.c +3 -1
  190. data/ext/isomorfeus_ferret_ext/test_term_vectors.c +9 -10
  191. data/ext/isomorfeus_ferret_ext/test_test.c +1 -2
  192. data/ext/isomorfeus_ferret_ext/test_threading.c +9 -10
  193. data/ext/isomorfeus_ferret_ext/testhelper.c +1 -2
  194. data/lib/isomorfeus/ferret/version.rb +1 -1
  195. metadata +113 -58
  196. data/ext/isomorfeus_ferret_ext/email.rl +0 -21
  197. data/ext/isomorfeus_ferret_ext/frt_scanner.c +0 -900
  198. data/ext/isomorfeus_ferret_ext/frt_scanner.h +0 -28
  199. data/ext/isomorfeus_ferret_ext/frt_scanner_mb.c +0 -6706
  200. data/ext/isomorfeus_ferret_ext/frt_scanner_utf8.c +0 -4420
  201. data/ext/isomorfeus_ferret_ext/scanner.h +0 -28
  202. data/ext/isomorfeus_ferret_ext/scanner.in +0 -43
  203. data/ext/isomorfeus_ferret_ext/scanner.rl +0 -84
  204. data/ext/isomorfeus_ferret_ext/scanner_mb.rl +0 -200
  205. data/ext/isomorfeus_ferret_ext/scanner_utf8.rl +0 -85
  206. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_basque.c +0 -1167
  207. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_basque.h +0 -6
  208. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_catalan.c +0 -1433
  209. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_catalan.h +0 -6
  210. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_danish.c +0 -301
  211. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_danish.h +0 -6
  212. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_dutch.c +0 -590
  213. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_dutch.h +0 -6
  214. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_english.c +0 -1049
  215. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_english.h +0 -6
  216. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_finnish.c +0 -705
  217. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_finnish.h +0 -6
  218. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_french.c +0 -1239
  219. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_french.h +0 -6
  220. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_german.c +0 -477
  221. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_german.h +0 -6
  222. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_hungarian.c +0 -1217
  223. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_hungarian.h +0 -7
  224. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_indonesian.c +0 -394
  225. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_indonesian.h +0 -6
  226. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_irish.c +0 -457
  227. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_irish.h +0 -6
  228. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_italian.c +0 -1009
  229. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_italian.h +0 -6
  230. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_norwegian.c +0 -259
  231. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_norwegian.h +0 -6
  232. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_porter.c +0 -704
  233. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_porter.h +0 -6
  234. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_portuguese.c +0 -948
  235. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_portuguese.h +0 -6
  236. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_spanish.c +0 -1028
  237. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_spanish.h +0 -6
  238. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_swedish.c +0 -275
  239. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_1_swedish.h +0 -6
  240. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_2_hungarian.c +0 -849
  241. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_2_hungarian.h +0 -6
  242. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_2_romanian.c +0 -952
  243. data/ext/isomorfeus_ferret_ext/stem_ISO_8859_2_romanian.h +0 -6
  244. data/ext/isomorfeus_ferret_ext/stem_KOI8_R_russian.c +0 -669
  245. data/ext/isomorfeus_ferret_ext/stem_KOI8_R_russian.h +0 -6
  246. data/ext/isomorfeus_ferret_ext/stem_modules.txt +0 -63
  247. data/ext/isomorfeus_ferret_ext/uchar-ucs4.rl +0 -1854
  248. data/ext/isomorfeus_ferret_ext/uchar-utf8.rl +0 -1999
  249. data/ext/isomorfeus_ferret_ext/url.rl +0 -27
metadata CHANGED
@@ -1,14 +1,14 @@
1
1
  --- !ruby/object:Gem::Specification
2
2
  name: isomorfeus-ferret
3
3
  version: !ruby/object:Gem::Version
4
- version: 0.12.6
4
+ version: 0.13.1
5
5
  platform: ruby
6
6
  authors:
7
7
  - Jan Biedermann
8
8
  autorequire:
9
9
  bindir: bin
10
10
  cert_chain: []
11
- date: 2022-02-11 00:00:00.000000000 Z
11
+ date: 2022-04-16 00:00:00.000000000 Z
12
12
  dependencies:
13
13
  - !ruby/object:Gem::Dependency
14
14
  name: rake
@@ -69,7 +69,100 @@ files:
69
69
  - ext/isomorfeus_ferret_ext/bm_hash.c
70
70
  - ext/isomorfeus_ferret_ext/bm_micro_string.c
71
71
  - ext/isomorfeus_ferret_ext/bm_store.c
72
- - ext/isomorfeus_ferret_ext/email.rl
72
+ - ext/isomorfeus_ferret_ext/brotli_common_constants.c
73
+ - ext/isomorfeus_ferret_ext/brotli_common_constants.h
74
+ - ext/isomorfeus_ferret_ext/brotli_common_context.c
75
+ - ext/isomorfeus_ferret_ext/brotli_common_context.h
76
+ - ext/isomorfeus_ferret_ext/brotli_common_dictionary.c
77
+ - ext/isomorfeus_ferret_ext/brotli_common_dictionary.h
78
+ - ext/isomorfeus_ferret_ext/brotli_common_platform.c
79
+ - ext/isomorfeus_ferret_ext/brotli_common_platform.h
80
+ - ext/isomorfeus_ferret_ext/brotli_common_transform.c
81
+ - ext/isomorfeus_ferret_ext/brotli_common_transform.h
82
+ - ext/isomorfeus_ferret_ext/brotli_common_version.h
83
+ - ext/isomorfeus_ferret_ext/brotli_dec_bit_reader.c
84
+ - ext/isomorfeus_ferret_ext/brotli_dec_bit_reader.h
85
+ - ext/isomorfeus_ferret_ext/brotli_dec_decode.c
86
+ - ext/isomorfeus_ferret_ext/brotli_dec_huffman.c
87
+ - ext/isomorfeus_ferret_ext/brotli_dec_huffman.h
88
+ - ext/isomorfeus_ferret_ext/brotli_dec_prefix.h
89
+ - ext/isomorfeus_ferret_ext/brotli_dec_state.c
90
+ - ext/isomorfeus_ferret_ext/brotli_dec_state.h
91
+ - ext/isomorfeus_ferret_ext/brotli_decode.h
92
+ - ext/isomorfeus_ferret_ext/brotli_enc_backward_references.c
93
+ - ext/isomorfeus_ferret_ext/brotli_enc_backward_references.h
94
+ - ext/isomorfeus_ferret_ext/brotli_enc_backward_references_hq.c
95
+ - ext/isomorfeus_ferret_ext/brotli_enc_backward_references_hq.h
96
+ - ext/isomorfeus_ferret_ext/brotli_enc_backward_references_inc.h
97
+ - ext/isomorfeus_ferret_ext/brotli_enc_bit_cost.c
98
+ - ext/isomorfeus_ferret_ext/brotli_enc_bit_cost.h
99
+ - ext/isomorfeus_ferret_ext/brotli_enc_bit_cost_inc.h
100
+ - ext/isomorfeus_ferret_ext/brotli_enc_block_encoder_inc.h
101
+ - ext/isomorfeus_ferret_ext/brotli_enc_block_splitter.c
102
+ - ext/isomorfeus_ferret_ext/brotli_enc_block_splitter.h
103
+ - ext/isomorfeus_ferret_ext/brotli_enc_block_splitter_inc.h
104
+ - ext/isomorfeus_ferret_ext/brotli_enc_brotli_bit_stream.c
105
+ - ext/isomorfeus_ferret_ext/brotli_enc_brotli_bit_stream.h
106
+ - ext/isomorfeus_ferret_ext/brotli_enc_cluster.c
107
+ - ext/isomorfeus_ferret_ext/brotli_enc_cluster.h
108
+ - ext/isomorfeus_ferret_ext/brotli_enc_cluster_inc.h
109
+ - ext/isomorfeus_ferret_ext/brotli_enc_command.c
110
+ - ext/isomorfeus_ferret_ext/brotli_enc_command.h
111
+ - ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment.c
112
+ - ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment.h
113
+ - ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment_two_pass.c
114
+ - ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment_two_pass.h
115
+ - ext/isomorfeus_ferret_ext/brotli_enc_dictionary_hash.c
116
+ - ext/isomorfeus_ferret_ext/brotli_enc_dictionary_hash.h
117
+ - ext/isomorfeus_ferret_ext/brotli_enc_encode.c
118
+ - ext/isomorfeus_ferret_ext/brotli_enc_encoder_dict.c
119
+ - ext/isomorfeus_ferret_ext/brotli_enc_encoder_dict.h
120
+ - ext/isomorfeus_ferret_ext/brotli_enc_entropy_encode.c
121
+ - ext/isomorfeus_ferret_ext/brotli_enc_entropy_encode.h
122
+ - ext/isomorfeus_ferret_ext/brotli_enc_entropy_encode_static.h
123
+ - ext/isomorfeus_ferret_ext/brotli_enc_fast_log.c
124
+ - ext/isomorfeus_ferret_ext/brotli_enc_fast_log.h
125
+ - ext/isomorfeus_ferret_ext/brotli_enc_find_match_length.h
126
+ - ext/isomorfeus_ferret_ext/brotli_enc_hash.h
127
+ - ext/isomorfeus_ferret_ext/brotli_enc_hash_composite_inc.h
128
+ - ext/isomorfeus_ferret_ext/brotli_enc_hash_forgetful_chain_inc.h
129
+ - ext/isomorfeus_ferret_ext/brotli_enc_hash_longest_match64_inc.h
130
+ - ext/isomorfeus_ferret_ext/brotli_enc_hash_longest_match_inc.h
131
+ - ext/isomorfeus_ferret_ext/brotli_enc_hash_longest_match_quickly_inc.h
132
+ - ext/isomorfeus_ferret_ext/brotli_enc_hash_rolling_inc.h
133
+ - ext/isomorfeus_ferret_ext/brotli_enc_hash_to_binary_tree_inc.h
134
+ - ext/isomorfeus_ferret_ext/brotli_enc_histogram.c
135
+ - ext/isomorfeus_ferret_ext/brotli_enc_histogram.h
136
+ - ext/isomorfeus_ferret_ext/brotli_enc_histogram_inc.h
137
+ - ext/isomorfeus_ferret_ext/brotli_enc_literal_cost.c
138
+ - ext/isomorfeus_ferret_ext/brotli_enc_literal_cost.h
139
+ - ext/isomorfeus_ferret_ext/brotli_enc_memory.c
140
+ - ext/isomorfeus_ferret_ext/brotli_enc_memory.h
141
+ - ext/isomorfeus_ferret_ext/brotli_enc_metablock.c
142
+ - ext/isomorfeus_ferret_ext/brotli_enc_metablock.h
143
+ - ext/isomorfeus_ferret_ext/brotli_enc_metablock_inc.h
144
+ - ext/isomorfeus_ferret_ext/brotli_enc_params.h
145
+ - ext/isomorfeus_ferret_ext/brotli_enc_prefix.h
146
+ - ext/isomorfeus_ferret_ext/brotli_enc_quality.h
147
+ - ext/isomorfeus_ferret_ext/brotli_enc_ringbuffer.h
148
+ - ext/isomorfeus_ferret_ext/brotli_enc_static_dict.c
149
+ - ext/isomorfeus_ferret_ext/brotli_enc_static_dict.h
150
+ - ext/isomorfeus_ferret_ext/brotli_enc_static_dict_lut.h
151
+ - ext/isomorfeus_ferret_ext/brotli_enc_utf8_util.c
152
+ - ext/isomorfeus_ferret_ext/brotli_enc_utf8_util.h
153
+ - ext/isomorfeus_ferret_ext/brotli_enc_write_bits.h
154
+ - ext/isomorfeus_ferret_ext/brotli_encode.h
155
+ - ext/isomorfeus_ferret_ext/brotli_port.h
156
+ - ext/isomorfeus_ferret_ext/brotli_types.h
157
+ - ext/isomorfeus_ferret_ext/bzlib.c
158
+ - ext/isomorfeus_ferret_ext/bzlib.h
159
+ - ext/isomorfeus_ferret_ext/bzlib_blocksort.c
160
+ - ext/isomorfeus_ferret_ext/bzlib_compress.c
161
+ - ext/isomorfeus_ferret_ext/bzlib_crctable.c
162
+ - ext/isomorfeus_ferret_ext/bzlib_decompress.c
163
+ - ext/isomorfeus_ferret_ext/bzlib_huffman.c
164
+ - ext/isomorfeus_ferret_ext/bzlib_private.h
165
+ - ext/isomorfeus_ferret_ext/bzlib_randtable.c
73
166
  - ext/isomorfeus_ferret_ext/extconf.rb
74
167
  - ext/isomorfeus_ferret_ext/fio_tmpfile.h
75
168
  - ext/isomorfeus_ferret_ext/frb_analysis.c
@@ -133,10 +226,6 @@ files:
133
226
  - ext/isomorfeus_ferret_ext/frt_q_term.c
134
227
  - ext/isomorfeus_ferret_ext/frt_q_wildcard.c
135
228
  - ext/isomorfeus_ferret_ext/frt_ram_store.c
136
- - ext/isomorfeus_ferret_ext/frt_scanner.c
137
- - ext/isomorfeus_ferret_ext/frt_scanner.h
138
- - ext/isomorfeus_ferret_ext/frt_scanner_mb.c
139
- - ext/isomorfeus_ferret_ext/frt_scanner_utf8.c
140
229
  - ext/isomorfeus_ferret_ext/frt_search.c
141
230
  - ext/isomorfeus_ferret_ext/frt_search.h
142
231
  - ext/isomorfeus_ferret_ext/frt_similarity.c
@@ -152,51 +241,14 @@ files:
152
241
  - ext/isomorfeus_ferret_ext/isomorfeus_ferret.h
153
242
  - ext/isomorfeus_ferret_ext/libstemmer.c
154
243
  - ext/isomorfeus_ferret_ext/libstemmer.h
155
- - ext/isomorfeus_ferret_ext/scanner.h
156
- - ext/isomorfeus_ferret_ext/scanner.in
157
- - ext/isomorfeus_ferret_ext/scanner.rl
158
- - ext/isomorfeus_ferret_ext/scanner_mb.rl
159
- - ext/isomorfeus_ferret_ext/scanner_utf8.rl
160
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_basque.c
161
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_basque.h
162
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_catalan.c
163
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_catalan.h
164
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_danish.c
165
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_danish.h
166
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_dutch.c
167
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_dutch.h
168
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_english.c
169
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_english.h
170
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_finnish.c
171
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_finnish.h
172
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_french.c
173
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_french.h
174
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_german.c
175
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_german.h
176
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_hungarian.c
177
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_hungarian.h
178
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_indonesian.c
179
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_indonesian.h
180
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_irish.c
181
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_irish.h
182
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_italian.c
183
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_italian.h
184
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_norwegian.c
185
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_norwegian.h
186
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_porter.c
187
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_porter.h
188
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_portuguese.c
189
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_portuguese.h
190
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_spanish.c
191
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_spanish.h
192
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_swedish.c
193
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_swedish.h
194
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_2_hungarian.c
195
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_2_hungarian.h
196
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_2_romanian.c
197
- - ext/isomorfeus_ferret_ext/stem_ISO_8859_2_romanian.h
198
- - ext/isomorfeus_ferret_ext/stem_KOI8_R_russian.c
199
- - ext/isomorfeus_ferret_ext/stem_KOI8_R_russian.h
244
+ - ext/isomorfeus_ferret_ext/lz4.c
245
+ - ext/isomorfeus_ferret_ext/lz4.h
246
+ - ext/isomorfeus_ferret_ext/lz4frame.c
247
+ - ext/isomorfeus_ferret_ext/lz4frame.h
248
+ - ext/isomorfeus_ferret_ext/lz4hc.c
249
+ - ext/isomorfeus_ferret_ext/lz4hc.h
250
+ - ext/isomorfeus_ferret_ext/lz4xxhash.c
251
+ - ext/isomorfeus_ferret_ext/lz4xxhash.h
200
252
  - ext/isomorfeus_ferret_ext/stem_UTF_8_arabic.c
201
253
  - ext/isomorfeus_ferret_ext/stem_UTF_8_arabic.h
202
254
  - ext/isomorfeus_ferret_ext/stem_UTF_8_armenian.c
@@ -259,7 +311,6 @@ files:
259
311
  - ext/isomorfeus_ferret_ext/stem_api.h
260
312
  - ext/isomorfeus_ferret_ext/stem_header.h
261
313
  - ext/isomorfeus_ferret_ext/stem_modules.h
262
- - ext/isomorfeus_ferret_ext/stem_modules.txt
263
314
  - ext/isomorfeus_ferret_ext/stem_utilities.c
264
315
  - ext/isomorfeus_ferret_ext/test.c
265
316
  - ext/isomorfeus_ferret_ext/test.h
@@ -303,9 +354,6 @@ files:
303
354
  - ext/isomorfeus_ferret_ext/testhelper.c
304
355
  - ext/isomorfeus_ferret_ext/testhelper.h
305
356
  - ext/isomorfeus_ferret_ext/tests_all.h
306
- - ext/isomorfeus_ferret_ext/uchar-ucs4.rl
307
- - ext/isomorfeus_ferret_ext/uchar-utf8.rl
308
- - ext/isomorfeus_ferret_ext/url.rl
309
357
  - ext/isomorfeus_ferret_ext/word_list.h
310
358
  - lib/isomorfeus-ferret.rb
311
359
  - lib/isomorfeus/ferret/document.rb
@@ -321,7 +369,13 @@ licenses:
321
369
  metadata:
322
370
  github_repo: ssh://github.com/isomorfeus/gems
323
371
  source_code_uri: https://github.com/isomorfeus/isomorfeus-ferret
324
- post_install_message:
372
+ post_install_message: |2+
373
+
374
+ isomorfeus-ferret 0.13:
375
+ Breaking change:
376
+ To support Ruby string encodings, die index file format has changed.
377
+ Indexes created with previous versions < 0.13 must be recreated with 0.13!
378
+
325
379
  rdoc_options: []
326
380
  require_paths:
327
381
  - lib
@@ -336,8 +390,9 @@ required_rubygems_version: !ruby/object:Gem::Requirement
336
390
  - !ruby/object:Gem::Version
337
391
  version: '0'
338
392
  requirements: []
339
- rubygems_version: 3.3.3
393
+ rubygems_version: 3.3.7
340
394
  signing_key:
341
395
  specification_version: 4
342
396
  summary: Indexed document store for Isomorfeus.
343
397
  test_files: []
398
+ ...
@@ -1,21 +0,0 @@
1
- #// email.rl -*-C-*-
2
- %%{
3
- machine Email;
4
-
5
- #// RFC 2822 - matching email addresses
6
- NO_WS_CTL = ( 1..8 | 11 | 12 | 14..31 | 127 );
7
- ASCII = 1..127;
8
- atext = [a-zA-Z0-9!#$%&\'*+\-/=?^_`{|}~];
9
- qtext = ( NO_WS_CTL | 33 | 35..91 | 93..126 );
10
- dtext = ( NO_WS_CTL | 33..90 | 94..126 );
11
- dot_atom = atext+ ('.' atext+)*;
12
- text = ( 1..9 | 11 | 12 | 14..127 );
13
- quoted_pair = '\\' text;
14
- quoted_string = '"' ( qtext | quoted_pair )* '"';
15
- domain_literal = '[' (dtext | quoted_pair)* ']';
16
-
17
- local_part = dot_atom | quoted_string;
18
- domain = dot_atom | domain_literal;
19
-
20
- email = local_part '@' domain;
21
- }%%