isomorfeus-ferret 0.12.4 → 0.12.7

data/ext/isomorfeus_ferret_ext/test_fields.c

@@ -2,10 +2,10 @@
 #include "test.h"
 
 #define do_field_prop_test(tc, fi, name, boost, is_stored,\
-                           is_indexed, is_tokenized, omit_norms,\
+                           is_compressed, is_indexed, is_tokenized, omit_norms,\
                            store_term_vector, store_positions, store_offsets)\
         field_prop_test(tc, __LINE__, fi, name, boost, is_stored,\
-                        is_indexed, is_tokenized, omit_norms,\
+                        is_compressed, is_indexed, is_tokenized, omit_norms,\
                         store_term_vector, store_positions, store_offsets)
 #define T 1
 #define F 0
@@ -16,6 +16,7 @@ void field_prop_test(TestCase *tc,
                      FrtSymbol name,
                      float boost,
                      bool is_stored,
+                     bool is_compressed,
                      bool is_indexed,
                      bool is_tokenized,
                      bool omit_norms,
@@ -26,6 +27,7 @@ void field_prop_test(TestCase *tc,
     tst_ptr_equal(line_num, tc, (void *)name, (void *)fi->name);
     tst_flt_equal(line_num, tc, boost, fi->boost);
     tst_int_equal(line_num, tc, is_stored,          fi_is_stored(fi));
+    tst_int_equal(line_num, tc, is_compressed,      fi_is_compressed(fi));
     tst_int_equal(line_num, tc, is_indexed,         fi_is_indexed(fi));
     tst_int_equal(line_num, tc, is_tokenized,       fi_is_tokenized(fi));
     tst_int_equal(line_num, tc, omit_norms,         fi_omit_norms(fi));
@@ -45,17 +47,20 @@ static void test_fi_new(TestCase *tc, void *data)
     FrtFieldInfo *fi;
     (void)data; /* suppress unused argument warning */
     fi = frt_fi_new(rb_intern("name"), FRT_STORE_NO, FRT_INDEX_NO, FRT_TERM_VECTOR_NO);
-    do_field_prop_test(tc, fi, rb_intern("name"), 1.0, F, F, F, F, F, F, F);
+    do_field_prop_test(tc, fi, rb_intern("name"), 1.0, F, F, F, F, F, F, F, F);
     frt_fi_deref(fi);
     fi = frt_fi_new(rb_intern("name"), FRT_STORE_YES, FRT_INDEX_YES, FRT_TERM_VECTOR_YES);
-    do_field_prop_test(tc, fi, rb_intern("name"), 1.0, T, T, T, F, T, F, F);
+    do_field_prop_test(tc, fi, rb_intern("name"), 1.0, T, F, T, T, F, T, F, F);
+    frt_fi_deref(fi);
+    fi = frt_fi_new(rb_intern("name"), FRT_STORE_COMPRESS, FRT_INDEX_UNTOKENIZED, FRT_TERM_VECTOR_WITH_POSITIONS);
+    do_field_prop_test(tc, fi, rb_intern("name"), 1.0, T, T, T, F, F, T, T, F);
     frt_fi_deref(fi);
     fi = frt_fi_new(rb_intern("name"), FRT_STORE_NO, FRT_INDEX_YES_OMIT_NORMS, FRT_TERM_VECTOR_WITH_OFFSETS);
-    do_field_prop_test(tc, fi, rb_intern("name"), 1.0, F, T, T, T, T, F, T);
+    do_field_prop_test(tc, fi, rb_intern("name"), 1.0, F, F, T, T, T, T, F, T);
     frt_fi_deref(fi);
     fi = frt_fi_new(rb_intern("name"), FRT_STORE_NO, FRT_INDEX_UNTOKENIZED_OMIT_NORMS, FRT_TERM_VECTOR_WITH_POSITIONS_OFFSETS);
     fi->boost = 1000.0;
-    do_field_prop_test(tc, fi, rb_intern("name"), 1000.0, F, T, F, T, T, T, T);
+    do_field_prop_test(tc, fi, rb_intern("name"), 1000.0, F, F, T, F, T, T, T, T);
     frt_fi_deref(fi);
 }
 
@@ -75,7 +80,7 @@ static void test_fis_basic(TestCase *tc, void *data)
     fis = frt_fis_new(FRT_STORE_NO, FRT_INDEX_NO, FRT_TERM_VECTOR_NO);
     frt_fis_add_field(fis, frt_fi_new(rb_intern("FFFFFFFF"), FRT_STORE_NO, FRT_INDEX_NO, FRT_TERM_VECTOR_NO));
     frt_fis_add_field(fis, frt_fi_new(rb_intern("TFTTFTFF"), FRT_STORE_YES, FRT_INDEX_YES, FRT_TERM_VECTOR_YES));
-    frt_fis_add_field(fis, frt_fi_new(rb_intern("TTTFFTTF"), FRT_STORE_YES, FRT_INDEX_UNTOKENIZED, FRT_TERM_VECTOR_WITH_POSITIONS));
+    frt_fis_add_field(fis, frt_fi_new(rb_intern("TTTFFTTF"), FRT_STORE_COMPRESS, FRT_INDEX_UNTOKENIZED, FRT_TERM_VECTOR_WITH_POSITIONS));
     frt_fis_add_field(fis, frt_fi_new(rb_intern("FFTTTTFT"), FRT_STORE_NO, FRT_INDEX_YES_OMIT_NORMS, FRT_TERM_VECTOR_WITH_OFFSETS));
     frt_fis_add_field(fis, frt_fi_new(rb_intern("FFTFTTTT"), FRT_STORE_NO, FRT_INDEX_UNTOKENIZED_OMIT_NORMS, FRT_TERM_VECTOR_WITH_POSITIONS_OFFSETS));
 
@@ -113,11 +118,11 @@ static void test_fis_basic(TestCase *tc, void *data)
     fis->fields[3]->boost = 4.0;
     fis->fields[4]->boost = 5.0;
 
-    do_field_prop_test(tc, fis->fields[0], rb_intern("FFFFFFFF"), 1.0, F, F, F, F, F, F, F);
-    do_field_prop_test(tc, fis->fields[1], rb_intern("TFTTFTFF"), 2.0, T, T, T, F, T, F, F);
-    do_field_prop_test(tc, fis->fields[2], rb_intern("TTTFFTTF"), 3.0, T, T, F, F, T, T, F);
-    do_field_prop_test(tc, fis->fields[3], rb_intern("FFTTTTFT"), 4.0, F, T, T, T, T, F, T);
-    do_field_prop_test(tc, fis->fields[4], rb_intern("FFTFTTTT"), 5.0, F, T, F, T, T, T, T);
+    do_field_prop_test(tc, fis->fields[0], rb_intern("FFFFFFFF"), 1.0, F, F, F, F, F, F, F, F);
+    do_field_prop_test(tc, fis->fields[1], rb_intern("TFTTFTFF"), 2.0, T, F, T, T, F, T, F, F);
+    do_field_prop_test(tc, fis->fields[2], rb_intern("TTTFFTTF"), 3.0, T, T, T, F, F, T, T, F);
+    do_field_prop_test(tc, fis->fields[3], rb_intern("FFTTTTFT"), 4.0, F, F, T, T, T, T, F, T);
+    do_field_prop_test(tc, fis->fields[4], rb_intern("FFTFTTTT"), 5.0, F, F, T, F, T, T, T, T);
 
     frt_fis_deref(fis);
 }
@@ -128,26 +133,26 @@ static void test_fis_with_default(TestCase *tc, void *data)
     (void)data; /* suppress unused argument warning */
 
     fis = frt_fis_new(FRT_STORE_NO, FRT_INDEX_NO, FRT_TERM_VECTOR_NO);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, F, F, F, F, F, F, F);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("dave")), rb_intern("dave"), 1.0, F, F, F, F, F, F, F);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("wert")), rb_intern("wert"), 1.0, F, F, F, F, F, F, F);
-    do_field_prop_test(tc, fis->fields[0], rb_intern("name"), 1.0, F, F, F, F, F, F, F);
-    do_field_prop_test(tc, fis->fields[1], rb_intern("dave"), 1.0, F, F, F, F, F, F, F);
-    do_field_prop_test(tc, fis->fields[2], rb_intern("wert"), 1.0, F, F, F, F, F, F, F);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, F, F, F, F, F, F, F, F);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("dave")), rb_intern("dave"), 1.0, F, F, F, F, F, F, F, F);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("wert")), rb_intern("wert"), 1.0, F, F, F, F, F, F, F, F);
+    do_field_prop_test(tc, fis->fields[0], rb_intern("name"), 1.0, F, F, F, F, F, F, F, F);
+    do_field_prop_test(tc, fis->fields[1], rb_intern("dave"), 1.0, F, F, F, F, F, F, F, F);
+    do_field_prop_test(tc, fis->fields[2], rb_intern("wert"), 1.0, F, F, F, F, F, F, F, F);
     Apnull(frt_fis_get_field(fis, rb_intern("random")));
     frt_fis_deref(fis);
 
     fis = frt_fis_new(FRT_STORE_YES, FRT_INDEX_YES, FRT_TERM_VECTOR_YES);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, T, T, T, F, T, F, F);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, T, F, T, T, F, T, F, F);
     frt_fis_deref(fis);
-    fis = frt_fis_new(FRT_STORE_YES, FRT_INDEX_UNTOKENIZED, FRT_TERM_VECTOR_WITH_POSITIONS);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, T, T, F, F, T, T, F);
+    fis = frt_fis_new(FRT_STORE_COMPRESS, FRT_INDEX_UNTOKENIZED, FRT_TERM_VECTOR_WITH_POSITIONS);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, T, T, T, F, F, T, T, F);
     frt_fis_deref(fis);
     fis = frt_fis_new(FRT_STORE_NO, FRT_INDEX_YES_OMIT_NORMS, FRT_TERM_VECTOR_WITH_OFFSETS);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, F, T, T, T, T, F, T);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, F, F, T, T, T, T, F, T);
     frt_fis_deref(fis);
     fis = frt_fis_new(FRT_STORE_NO, FRT_INDEX_UNTOKENIZED_OMIT_NORMS, FRT_TERM_VECTOR_WITH_POSITIONS_OFFSETS);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, F, T, F, T, T, T, T);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("name")), rb_intern("name"), 1.0, F, F, T, F, T, T, T, T);
     frt_fis_deref(fis);
 }
 
@@ -164,22 +169,23 @@ static void test_fis_rw(TestCase *tc, void *data)
                   FRT_TERM_VECTOR_WITH_POSITIONS_OFFSETS);
     frt_fis_add_field(fis, frt_fi_new(rb_intern("FFFFFFFF"), FRT_STORE_NO, FRT_INDEX_NO, FRT_TERM_VECTOR_NO));
     frt_fis_add_field(fis, frt_fi_new(rb_intern("TFTTFTFF"), FRT_STORE_YES, FRT_INDEX_YES, FRT_TERM_VECTOR_YES));
+    frt_fis_add_field(fis, frt_fi_new(rb_intern("TTTFFTTF"), FRT_STORE_COMPRESS, FRT_INDEX_UNTOKENIZED, FRT_TERM_VECTOR_WITH_POSITIONS));
     frt_fis_add_field(fis, frt_fi_new(rb_intern("FFTTTTFT"), FRT_STORE_NO, FRT_INDEX_YES_OMIT_NORMS, FRT_TERM_VECTOR_WITH_OFFSETS));
     frt_fis_add_field(fis, frt_fi_new(rb_intern("FFTFTTTT"), FRT_STORE_NO, FRT_INDEX_UNTOKENIZED_OMIT_NORMS, FRT_TERM_VECTOR_WITH_POSITIONS_OFFSETS));
-    fis->fields[0]->boost = 2.0;
-    fis->fields[1]->boost = 3.0;
-    fis->fields[2]->boost = 4.0;
-    fis->fields[3]->boost = 5.0;
+    fis->fields[1]->boost = 2.0;
+    fis->fields[2]->boost = 3.0;
+    fis->fields[3]->boost = 4.0;
+    fis->fields[4]->boost = 5.0;
     os = store->new_output(store, "fields");
     frt_fis_write(fis, os);
     frt_os_close(os);
 
     /* these fields won't be saved be will added again later */
-    Aiequal(4, fis->size);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("new_field")), rb_intern("new_field"), 1.0, T, T, F, T, T, T, T);
     Aiequal(5, fis->size);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("another")), rb_intern("another"), 1.0, T, T, F, T, T, T, T);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("new_field")), rb_intern("new_field"), 1.0, T, F, T, F, T, T, T, T);
     Aiequal(6, fis->size);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("another")), rb_intern("another"), 1.0, T, F, T, F, T, T, T, T);
+    Aiequal(7, fis->size);
 
     frt_fis_deref(fis);
 
@@ -190,15 +196,16 @@ static void test_fis_rw(TestCase *tc, void *data)
     Aiequal(FRT_INDEX_UNTOKENIZED_OMIT_NORMS, fis->index);
     Aiequal(FRT_TERM_VECTOR_WITH_POSITIONS_OFFSETS, fis->term_vector);
 
-    do_field_prop_test(tc, fis->fields[0], rb_intern("FFFFFFFF"), 2.0, F, F, F, F, F, F, F);
-    do_field_prop_test(tc, fis->fields[1], rb_intern("TFTTFTFF"), 3.0, T, T, T, F, T, F, F);
-    do_field_prop_test(tc, fis->fields[2], rb_intern("FFTTTTFT"), 4.0, F, T, T, T, T, F, T);
-    do_field_prop_test(tc, fis->fields[3], rb_intern("FFTFTTTT"), 5.0, F, T, F, T, T, T, T);
-    Aiequal(4, fis->size);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("new_field")), rb_intern("new_field"), 1.0, T, T, F, T, T, T, T);
+    do_field_prop_test(tc, fis->fields[0], rb_intern("FFFFFFFF"), 1.0, F, F, F, F, F, F, F, F);
+    do_field_prop_test(tc, fis->fields[1], rb_intern("TFTTFTFF"), 2.0, T, F, T, T, F, T, F, F);
+    do_field_prop_test(tc, fis->fields[2], rb_intern("TTTFFTTF"), 3.0, T, T, T, F, F, T, T, F);
+    do_field_prop_test(tc, fis->fields[3], rb_intern("FFTTTTFT"), 4.0, F, F, T, T, T, T, F, T);
+    do_field_prop_test(tc, fis->fields[4], rb_intern("FFTFTTTT"), 5.0, F, F, T, F, T, T, T, T);
     Aiequal(5, fis->size);
-    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("another")), rb_intern("another"), 1.0, T, T, F, T, T, T, T);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("new_field")), rb_intern("new_field"), 1.0, T, F, T, F, T, T, T, T);
     Aiequal(6, fis->size);
+    do_field_prop_test(tc, frt_fis_get_or_add_field(fis, rb_intern("another")), rb_intern("another"), 1.0, T, F, T, F, T, T, T, T);
+    Aiequal(7, fis->size);
     str = frt_fis_to_s(fis);
     Asequal("default:\n"
             "  store: :yes\n"
@@ -206,15 +213,20 @@ static void test_fis_rw(TestCase *tc, void *data)
             "  term_vector: :with_positions_offsets\n"
             "fields:\n"
             "  FFFFFFFF:\n"
-            "    boost: 2.000000\n"
+            "    boost: 1.000000\n"
             "    store: :no\n"
             "    index: :no\n"
             "    term_vector: :no\n"
             "  TFTTFTFF:\n"
-            "    boost: 3.000000\n"
+            "    boost: 2.000000\n"
             "    store: :yes\n"
             "    index: :yes\n"
             "    term_vector: :yes\n"
+            "  TTTFFTTF:\n"
+            "    boost: 3.000000\n"
+            "    store: :compressed\n"
+            "    index: :untokenized\n"
+            "    term_vector: :with_positions\n"
             "  FFTTTTFT:\n"
             "    boost: 4.000000\n"
             "    store: :no\n"
@@ -302,7 +314,7 @@ static FrtFieldInfos *prepare_fis()
     frt_fis_add_field(fis, frt_fi_new(rb_intern("ignored"), FRT_STORE_NO, FRT_INDEX_NO, FRT_TERM_VECTOR_NO));
     frt_fis_add_field(fis, frt_fi_new(rb_intern("unstored"), FRT_STORE_NO, FRT_INDEX_YES, FRT_TERM_VECTOR_WITH_POSITIONS_OFFSETS));
     frt_fis_add_field(fis, frt_fi_new(rb_intern("stored"), FRT_STORE_YES, FRT_INDEX_YES, FRT_TERM_VECTOR_YES));
-    frt_fis_add_field(fis, frt_fi_new(rb_intern("stored_array"), FRT_STORE_YES, FRT_INDEX_UNTOKENIZED, FRT_TERM_VECTOR_NO));
+    frt_fis_add_field(fis, frt_fi_new(rb_intern("stored_array"), FRT_STORE_COMPRESS, FRT_INDEX_UNTOKENIZED, FRT_TERM_VECTOR_NO));
     return fis;
 }
 
@@ -327,8 +339,8 @@ static void test_fields_rw_single(TestCase *tc, void *data)
    frt_doc_destroy(doc);
 
     Aiequal(6, fis->size);
-    do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern("binary")), rb_intern("binary"), 1.0, T, T, T, F, F, F, F);
-    do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern("array")), rb_intern("array"), 1.0, T, T, T, F, F, F, F);
+    do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern("binary")), rb_intern("binary"), 1.0, T, F, T, T, F, F, F, F);
+    do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern("array")), rb_intern("array"), 1.0, T, F, T, T, F, F, F, F);
 
     fr = frt_fr_open(store, "_0", fis);
     doc = frt_fr_get_doc(fr, 0);
@@ -401,12 +413,12 @@ static void test_fields_rw_multi(TestCase *tc, void *data)
     frt_fw_close(fw);
 
     Aiequal(106, fis->size);
-    do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern("binary")), rb_intern("binary"), 1.0, T, T, T, F, F, F, F);
-    do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern("array")), rb_intern("array"), 1.0, T, T, T, F, F, F, F);
+    do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern("binary")), rb_intern("binary"), 1.0, T, F, T, T, F, F, F, F);
+    do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern("array")), rb_intern("array"), 1.0, T, F, T, T, F, F, F, F);
     for (i = 0; i < 100; i++) {
         char buf[100];
         sprintf(buf, "<<%d>>", i);
-        do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern(buf)), rb_intern(buf), 1.0, T, T, T, F, F, F, F);
+        do_field_prop_test(tc, frt_fis_get_field(fis, rb_intern(buf)), rb_intern(buf), 1.0, T, F, T, T, F, F, F, F);
     }
 
     fr = frt_fr_open(store, "_as3", fis);

data/ext/isomorfeus_ferret_ext/test_index.c

@@ -1365,7 +1365,7 @@ static ReaderTestEnvironment *reader_test_env_new(int type)
                                                   FRT_TERM_VECTOR_NO));
                     } else if (compressed_field == df->name) {
                         frt_fis_add_field(fis, frt_fi_new(compressed_field,
-                                                  FRT_STORE_YES,
+                                                  FRT_STORE_COMPRESS,
                                                   FRT_INDEX_YES,
                                                   FRT_TERM_VECTOR_NO));
                     }
@@ -1428,6 +1428,8 @@ static void write_ir_test_docs(FrtStore *store)
                               FRT_TERM_VECTOR_NO));
     frt_fis_add_field(fis, frt_fi_new(text, FRT_STORE_NO, FRT_INDEX_YES,
                               FRT_TERM_VECTOR_NO));
+    frt_fis_add_field(fis, frt_fi_new(compressed_field, FRT_STORE_COMPRESS, FRT_INDEX_YES,
+                              FRT_TERM_VECTOR_NO));
     frt_index_create(store, fis);
     frt_fis_deref(fis);
     config.max_buffered_docs = 5;
@@ -2123,6 +2125,7 @@ static void test_ir_multivalue_fields(TestCase *tc, void *data)
 
     fi = frt_fis_get_field(iw->fis, tag);
     Aiequal(true, fi_is_stored(fi));
+    Aiequal(false, fi_is_compressed(fi));
     Aiequal(true, fi_is_indexed(fi));
     Aiequal(true, fi_is_tokenized(fi));
     Aiequal(true, fi_has_norms(fi));

data/ext/isomorfeus_ferret_ext/test_search.c

@@ -556,7 +556,6 @@ static void test_phrase_query(TestCase *tc, void *data)
     check_to_s(tc, phq, field, "\"\"");
     check_to_s(tc, phq, (FrtSymbol)NULL, "field:\"\"");
 
-
     frt_phq_add_term(phq, "quick", 1);
     frt_phq_add_term(phq, "brown", 1);
     frt_phq_add_term(phq, "fox", 1);

data/lib/isomorfeus/ferret/version.rb

@@ -1,5 +1,5 @@
 module Isomorfeus
   module Ferret
-    VERSION = '0.12.4'
+    VERSION = '0.12.7'
   end
 end

metadata

@@ -1,14 +1,14 @@
 --- !ruby/object:Gem::Specification
 name: isomorfeus-ferret
 version: !ruby/object:Gem::Version
-  version: 0.12.4
+  version: 0.12.7
 platform: ruby
 authors:
 - Jan Biedermann
 autorequire:
 bindir: bin
 cert_chain: []
-date: 2022-02-08 00:00:00.000000000 Z
+date: 2022-03-14 00:00:00.000000000 Z
 dependencies:
 - !ruby/object:Gem::Dependency
   name: rake
@@ -69,6 +69,91 @@ files:
 - ext/isomorfeus_ferret_ext/bm_hash.c
 - ext/isomorfeus_ferret_ext/bm_micro_string.c
 - ext/isomorfeus_ferret_ext/bm_store.c
+- ext/isomorfeus_ferret_ext/brotli_common_constants.c
+- ext/isomorfeus_ferret_ext/brotli_common_constants.h
+- ext/isomorfeus_ferret_ext/brotli_common_context.c
+- ext/isomorfeus_ferret_ext/brotli_common_context.h
+- ext/isomorfeus_ferret_ext/brotli_common_dictionary.c
+- ext/isomorfeus_ferret_ext/brotli_common_dictionary.h
+- ext/isomorfeus_ferret_ext/brotli_common_platform.c
+- ext/isomorfeus_ferret_ext/brotli_common_platform.h
+- ext/isomorfeus_ferret_ext/brotli_common_transform.c
+- ext/isomorfeus_ferret_ext/brotli_common_transform.h
+- ext/isomorfeus_ferret_ext/brotli_common_version.h
+- ext/isomorfeus_ferret_ext/brotli_dec_bit_reader.c
+- ext/isomorfeus_ferret_ext/brotli_dec_bit_reader.h
+- ext/isomorfeus_ferret_ext/brotli_dec_decode.c
+- ext/isomorfeus_ferret_ext/brotli_dec_huffman.c
+- ext/isomorfeus_ferret_ext/brotli_dec_huffman.h
+- ext/isomorfeus_ferret_ext/brotli_dec_prefix.h
+- ext/isomorfeus_ferret_ext/brotli_dec_state.c
+- ext/isomorfeus_ferret_ext/brotli_dec_state.h
+- ext/isomorfeus_ferret_ext/brotli_decode.h
+- ext/isomorfeus_ferret_ext/brotli_enc_backward_references.c
+- ext/isomorfeus_ferret_ext/brotli_enc_backward_references.h
+- ext/isomorfeus_ferret_ext/brotli_enc_backward_references_hq.c
+- ext/isomorfeus_ferret_ext/brotli_enc_backward_references_hq.h
+- ext/isomorfeus_ferret_ext/brotli_enc_backward_references_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_bit_cost.c
+- ext/isomorfeus_ferret_ext/brotli_enc_bit_cost.h
+- ext/isomorfeus_ferret_ext/brotli_enc_bit_cost_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_block_encoder_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_block_splitter.c
+- ext/isomorfeus_ferret_ext/brotli_enc_block_splitter.h
+- ext/isomorfeus_ferret_ext/brotli_enc_block_splitter_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_brotli_bit_stream.c
+- ext/isomorfeus_ferret_ext/brotli_enc_brotli_bit_stream.h
+- ext/isomorfeus_ferret_ext/brotli_enc_cluster.c
+- ext/isomorfeus_ferret_ext/brotli_enc_cluster.h
+- ext/isomorfeus_ferret_ext/brotli_enc_cluster_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_command.c
+- ext/isomorfeus_ferret_ext/brotli_enc_command.h
+- ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment.c
+- ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment.h
+- ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment_two_pass.c
+- ext/isomorfeus_ferret_ext/brotli_enc_compress_fragment_two_pass.h
+- ext/isomorfeus_ferret_ext/brotli_enc_dictionary_hash.c
+- ext/isomorfeus_ferret_ext/brotli_enc_dictionary_hash.h
+- ext/isomorfeus_ferret_ext/brotli_enc_encode.c
+- ext/isomorfeus_ferret_ext/brotli_enc_encoder_dict.c
+- ext/isomorfeus_ferret_ext/brotli_enc_encoder_dict.h
+- ext/isomorfeus_ferret_ext/brotli_enc_entropy_encode.c
+- ext/isomorfeus_ferret_ext/brotli_enc_entropy_encode.h
+- ext/isomorfeus_ferret_ext/brotli_enc_entropy_encode_static.h
+- ext/isomorfeus_ferret_ext/brotli_enc_fast_log.c
+- ext/isomorfeus_ferret_ext/brotli_enc_fast_log.h
+- ext/isomorfeus_ferret_ext/brotli_enc_find_match_length.h
+- ext/isomorfeus_ferret_ext/brotli_enc_hash.h
+- ext/isomorfeus_ferret_ext/brotli_enc_hash_composite_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_hash_forgetful_chain_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_hash_longest_match64_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_hash_longest_match_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_hash_longest_match_quickly_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_hash_rolling_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_hash_to_binary_tree_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_histogram.c
+- ext/isomorfeus_ferret_ext/brotli_enc_histogram.h
+- ext/isomorfeus_ferret_ext/brotli_enc_histogram_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_literal_cost.c
+- ext/isomorfeus_ferret_ext/brotli_enc_literal_cost.h
+- ext/isomorfeus_ferret_ext/brotli_enc_memory.c
+- ext/isomorfeus_ferret_ext/brotli_enc_memory.h
+- ext/isomorfeus_ferret_ext/brotli_enc_metablock.c
+- ext/isomorfeus_ferret_ext/brotli_enc_metablock.h
+- ext/isomorfeus_ferret_ext/brotli_enc_metablock_inc.h
+- ext/isomorfeus_ferret_ext/brotli_enc_params.h
+- ext/isomorfeus_ferret_ext/brotli_enc_prefix.h
+- ext/isomorfeus_ferret_ext/brotli_enc_quality.h
+- ext/isomorfeus_ferret_ext/brotli_enc_ringbuffer.h
+- ext/isomorfeus_ferret_ext/brotli_enc_static_dict.c
+- ext/isomorfeus_ferret_ext/brotli_enc_static_dict.h
+- ext/isomorfeus_ferret_ext/brotli_enc_static_dict_lut.h
+- ext/isomorfeus_ferret_ext/brotli_enc_utf8_util.c
+- ext/isomorfeus_ferret_ext/brotli_enc_utf8_util.h
+- ext/isomorfeus_ferret_ext/brotli_enc_write_bits.h
+- ext/isomorfeus_ferret_ext/brotli_encode.h
+- ext/isomorfeus_ferret_ext/brotli_port.h
+- ext/isomorfeus_ferret_ext/brotli_types.h
 - ext/isomorfeus_ferret_ext/email.rl
 - ext/isomorfeus_ferret_ext/extconf.rb
 - ext/isomorfeus_ferret_ext/fio_tmpfile.h
@@ -152,12 +237,15 @@ files:
 - ext/isomorfeus_ferret_ext/isomorfeus_ferret.h
 - ext/isomorfeus_ferret_ext/libstemmer.c
 - ext/isomorfeus_ferret_ext/libstemmer.h
-- ext/isomorfeus_ferret_ext/q_parser.y
 - ext/isomorfeus_ferret_ext/scanner.h
 - ext/isomorfeus_ferret_ext/scanner.in
 - ext/isomorfeus_ferret_ext/scanner.rl
 - ext/isomorfeus_ferret_ext/scanner_mb.rl
 - ext/isomorfeus_ferret_ext/scanner_utf8.rl
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_1_basque.c
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_1_basque.h
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_1_catalan.c
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_1_catalan.h
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_danish.c
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_danish.h
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_dutch.c
@@ -172,6 +260,10 @@ files:
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_german.h
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_hungarian.c
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_hungarian.h
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_1_indonesian.c
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_1_indonesian.h
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_1_irish.c
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_1_irish.h
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_italian.c
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_italian.h
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_norwegian.c
@@ -184,10 +276,20 @@ files:
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_spanish.h
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_swedish.c
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_1_swedish.h
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_2_hungarian.c
+- ext/isomorfeus_ferret_ext/stem_ISO_8859_2_hungarian.h
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_2_romanian.c
 - ext/isomorfeus_ferret_ext/stem_ISO_8859_2_romanian.h
 - ext/isomorfeus_ferret_ext/stem_KOI8_R_russian.c
 - ext/isomorfeus_ferret_ext/stem_KOI8_R_russian.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_arabic.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_arabic.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_armenian.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_armenian.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_basque.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_basque.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_catalan.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_catalan.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_danish.c
 - ext/isomorfeus_ferret_ext/stem_UTF_8_danish.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_dutch.c
@@ -200,10 +302,22 @@ files:
 - ext/isomorfeus_ferret_ext/stem_UTF_8_french.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_german.c
 - ext/isomorfeus_ferret_ext/stem_UTF_8_german.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_greek.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_greek.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_hindi.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_hindi.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_hungarian.c
 - ext/isomorfeus_ferret_ext/stem_UTF_8_hungarian.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_indonesian.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_indonesian.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_irish.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_irish.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_italian.c
 - ext/isomorfeus_ferret_ext/stem_UTF_8_italian.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_lithuanian.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_lithuanian.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_nepali.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_nepali.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_norwegian.c
 - ext/isomorfeus_ferret_ext/stem_UTF_8_norwegian.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_porter.c
@@ -214,12 +328,18 @@ files:
 - ext/isomorfeus_ferret_ext/stem_UTF_8_romanian.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_russian.c
 - ext/isomorfeus_ferret_ext/stem_UTF_8_russian.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_serbian.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_serbian.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_spanish.c
 - ext/isomorfeus_ferret_ext/stem_UTF_8_spanish.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_swedish.c
 - ext/isomorfeus_ferret_ext/stem_UTF_8_swedish.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_tamil.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_tamil.h
 - ext/isomorfeus_ferret_ext/stem_UTF_8_turkish.c
 - ext/isomorfeus_ferret_ext/stem_UTF_8_turkish.h
+- ext/isomorfeus_ferret_ext/stem_UTF_8_yiddish.c
+- ext/isomorfeus_ferret_ext/stem_UTF_8_yiddish.h
 - ext/isomorfeus_ferret_ext/stem_api.c
 - ext/isomorfeus_ferret_ext/stem_api.h
 - ext/isomorfeus_ferret_ext/stem_header.h
@@ -280,7 +400,7 @@ files:
 - lib/isomorfeus/ferret/monitor.rb
 - lib/isomorfeus/ferret/stdlib_patches.rb
 - lib/isomorfeus/ferret/version.rb
-homepage: http://isomorfeus.com
+homepage: https://isomorfeus.com
 licenses:
 - MIT
 metadata:
@@ -301,7 +421,7 @@ required_rubygems_version: !ruby/object:Gem::Requirement
     - !ruby/object:Gem::Version
       version: '0'
 requirements: []
-rubygems_version: 3.3.3
+rubygems_version: 3.3.7
 signing_key:
 specification_version: 4
 summary: Indexed document store for Isomorfeus.