stemmers 0.0.1

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (74) hide show
  1. checksums.yaml +7 -0
  2. data/.rubocop.yml +13 -0
  3. data/CHANGELOG.md +5 -0
  4. data/CODE_OF_CONDUCT.md +132 -0
  5. data/Cargo.lock +547 -0
  6. data/Cargo.toml +7 -0
  7. data/LICENSE.txt +21 -0
  8. data/README.md +113 -0
  9. data/Rakefile +23 -0
  10. data/ext/stemmers/Cargo.toml +16 -0
  11. data/ext/stemmers/extconf.rb +6 -0
  12. data/ext/stemmers/src/lib.rs +105 -0
  13. data/lib/stemmers/stopwords/af.json +53 -0
  14. data/lib/stemmers/stopwords/ar.json +482 -0
  15. data/lib/stemmers/stopwords/bg.json +261 -0
  16. data/lib/stemmers/stopwords/bn.json +400 -0
  17. data/lib/stemmers/stopwords/br.json +1205 -0
  18. data/lib/stemmers/stopwords/ca.json +280 -0
  19. data/lib/stemmers/stopwords/cs.json +425 -0
  20. data/lib/stemmers/stopwords/da.json +172 -0
  21. data/lib/stemmers/stopwords/de.json +622 -0
  22. data/lib/stemmers/stopwords/el.json +849 -0
  23. data/lib/stemmers/stopwords/en.json +1300 -0
  24. data/lib/stemmers/stopwords/eo.json +175 -0
  25. data/lib/stemmers/stopwords/es.json +734 -0
  26. data/lib/stemmers/stopwords/et.json +37 -0
  27. data/lib/stemmers/stopwords/eu.json +100 -0
  28. data/lib/stemmers/stopwords/fa.json +801 -0
  29. data/lib/stemmers/stopwords/fi.json +849 -0
  30. data/lib/stemmers/stopwords/fr.json +693 -0
  31. data/lib/stemmers/stopwords/ga.json +111 -0
  32. data/lib/stemmers/stopwords/gl.json +162 -0
  33. data/lib/stemmers/stopwords/gu.json +226 -0
  34. data/lib/stemmers/stopwords/ha.json +41 -0
  35. data/lib/stemmers/stopwords/he.json +196 -0
  36. data/lib/stemmers/stopwords/hi.json +227 -0
  37. data/lib/stemmers/stopwords/hr.json +181 -0
  38. data/lib/stemmers/stopwords/hu.json +791 -0
  39. data/lib/stemmers/stopwords/hy.json +47 -0
  40. data/lib/stemmers/stopwords/id.json +760 -0
  41. data/lib/stemmers/stopwords/it.json +634 -0
  42. data/lib/stemmers/stopwords/ja.json +136 -0
  43. data/lib/stemmers/stopwords/ko.json +681 -0
  44. data/lib/stemmers/stopwords/ku.json +64 -0
  45. data/lib/stemmers/stopwords/la.json +51 -0
  46. data/lib/stemmers/stopwords/lt.json +476 -0
  47. data/lib/stemmers/stopwords/lv.json +163 -0
  48. data/lib/stemmers/stopwords/mr.json +101 -0
  49. data/lib/stemmers/stopwords/ms.json +477 -0
  50. data/lib/stemmers/stopwords/nl.json +415 -0
  51. data/lib/stemmers/stopwords/no.json +223 -0
  52. data/lib/stemmers/stopwords/pl.json +331 -0
  53. data/lib/stemmers/stopwords/pt.json +562 -0
  54. data/lib/stemmers/stopwords/ro.json +436 -0
  55. data/lib/stemmers/stopwords/ru.json +561 -0
  56. data/lib/stemmers/stopwords/sk.json +420 -0
  57. data/lib/stemmers/stopwords/sl.json +448 -0
  58. data/lib/stemmers/stopwords/so.json +32 -0
  59. data/lib/stemmers/stopwords/st.json +33 -0
  60. data/lib/stemmers/stopwords/sv.json +420 -0
  61. data/lib/stemmers/stopwords/sw.json +76 -0
  62. data/lib/stemmers/stopwords/th.json +118 -0
  63. data/lib/stemmers/stopwords/tl.json +149 -0
  64. data/lib/stemmers/stopwords/tr.json +506 -0
  65. data/lib/stemmers/stopwords/uk.json +75 -0
  66. data/lib/stemmers/stopwords/ur.json +519 -0
  67. data/lib/stemmers/stopwords/vi.json +647 -0
  68. data/lib/stemmers/stopwords/yo.json +62 -0
  69. data/lib/stemmers/stopwords/zh.json +796 -0
  70. data/lib/stemmers/stopwords/zu.json +31 -0
  71. data/lib/stemmers/version.rb +5 -0
  72. data/lib/stemmers.rb +91 -0
  73. data/sig/stemmers.rbs +4 -0
  74. metadata +131 -0
@@ -0,0 +1,280 @@
1
+ [
2
+ "a",
3
+ "abans",
4
+ "ací",
5
+ "ah",
6
+ "així",
7
+ "això",
8
+ "al",
9
+ "aleshores",
10
+ "algun",
11
+ "alguna",
12
+ "algunes",
13
+ "alguns",
14
+ "alhora",
15
+ "allà",
16
+ "allí",
17
+ "allò",
18
+ "als",
19
+ "altra",
20
+ "altre",
21
+ "altres",
22
+ "amb",
23
+ "ambdues",
24
+ "ambdós",
25
+ "anar",
26
+ "ans",
27
+ "apa",
28
+ "aquell",
29
+ "aquella",
30
+ "aquelles",
31
+ "aquells",
32
+ "aquest",
33
+ "aquesta",
34
+ "aquestes",
35
+ "aquests",
36
+ "aquí",
37
+ "baix",
38
+ "bastant",
39
+ "bé",
40
+ "cada",
41
+ "cadascuna",
42
+ "cadascunes",
43
+ "cadascuns",
44
+ "cadascú",
45
+ "com",
46
+ "consegueixo",
47
+ "conseguim",
48
+ "conseguir",
49
+ "consigueix",
50
+ "consigueixen",
51
+ "consigueixes",
52
+ "contra",
53
+ "d'un",
54
+ "d'una",
55
+ "d'unes",
56
+ "d'uns",
57
+ "dalt",
58
+ "de",
59
+ "del",
60
+ "dels",
61
+ "des",
62
+ "des de",
63
+ "després",
64
+ "dins",
65
+ "dintre",
66
+ "donat",
67
+ "doncs",
68
+ "durant",
69
+ "e",
70
+ "eh",
71
+ "el",
72
+ "elles",
73
+ "ells",
74
+ "els",
75
+ "em",
76
+ "en",
77
+ "encara",
78
+ "ens",
79
+ "entre",
80
+ "era",
81
+ "erem",
82
+ "eren",
83
+ "eres",
84
+ "es",
85
+ "esta",
86
+ "estan",
87
+ "estat",
88
+ "estava",
89
+ "estaven",
90
+ "estem",
91
+ "esteu",
92
+ "estic",
93
+ "està",
94
+ "estàvem",
95
+ "estàveu",
96
+ "et",
97
+ "etc",
98
+ "ets",
99
+ "fa",
100
+ "faig",
101
+ "fan",
102
+ "fas",
103
+ "fem",
104
+ "fer",
105
+ "feu",
106
+ "fi",
107
+ "fins",
108
+ "fora",
109
+ "gairebé",
110
+ "ha",
111
+ "han",
112
+ "has",
113
+ "haver",
114
+ "havia",
115
+ "he",
116
+ "hem",
117
+ "heu",
118
+ "hi",
119
+ "ho",
120
+ "i",
121
+ "igual",
122
+ "iguals",
123
+ "inclòs",
124
+ "ja",
125
+ "jo",
126
+ "l'hi",
127
+ "la",
128
+ "les",
129
+ "li",
130
+ "li'n",
131
+ "llarg",
132
+ "llavors",
133
+ "m'he",
134
+ "ma",
135
+ "mal",
136
+ "malgrat",
137
+ "mateix",
138
+ "mateixa",
139
+ "mateixes",
140
+ "mateixos",
141
+ "me",
142
+ "mentre",
143
+ "meu",
144
+ "meus",
145
+ "meva",
146
+ "meves",
147
+ "mode",
148
+ "molt",
149
+ "molta",
150
+ "moltes",
151
+ "molts",
152
+ "mon",
153
+ "mons",
154
+ "més",
155
+ "n'he",
156
+ "n'hi",
157
+ "ne",
158
+ "ni",
159
+ "no",
160
+ "nogensmenys",
161
+ "només",
162
+ "nosaltres",
163
+ "nostra",
164
+ "nostre",
165
+ "nostres",
166
+ "o",
167
+ "oh",
168
+ "oi",
169
+ "on",
170
+ "pas",
171
+ "pel",
172
+ "pels",
173
+ "per",
174
+ "per que",
175
+ "perquè",
176
+ "però",
177
+ "poc",
178
+ "poca",
179
+ "pocs",
180
+ "podem",
181
+ "poden",
182
+ "poder",
183
+ "podeu",
184
+ "poques",
185
+ "potser",
186
+ "primer",
187
+ "propi",
188
+ "puc",
189
+ "qual",
190
+ "quals",
191
+ "quan",
192
+ "quant",
193
+ "que",
194
+ "quelcom",
195
+ "qui",
196
+ "quin",
197
+ "quina",
198
+ "quines",
199
+ "quins",
200
+ "què",
201
+ "s'ha",
202
+ "s'han",
203
+ "sa",
204
+ "sabem",
205
+ "saben",
206
+ "saber",
207
+ "sabeu",
208
+ "sap",
209
+ "saps",
210
+ "semblant",
211
+ "semblants",
212
+ "sense",
213
+ "ser",
214
+ "ses",
215
+ "seu",
216
+ "seus",
217
+ "seva",
218
+ "seves",
219
+ "si",
220
+ "sobre",
221
+ "sobretot",
222
+ "soc",
223
+ "solament",
224
+ "sols",
225
+ "som",
226
+ "son",
227
+ "sons",
228
+ "sota",
229
+ "sou",
230
+ "sóc",
231
+ "són",
232
+ "t'ha",
233
+ "t'han",
234
+ "t'he",
235
+ "ta",
236
+ "tal",
237
+ "també",
238
+ "tampoc",
239
+ "tan",
240
+ "tant",
241
+ "tanta",
242
+ "tantes",
243
+ "te",
244
+ "tene",
245
+ "tenim",
246
+ "tenir",
247
+ "teniu",
248
+ "teu",
249
+ "teus",
250
+ "teva",
251
+ "teves",
252
+ "tinc",
253
+ "ton",
254
+ "tons",
255
+ "tot",
256
+ "tota",
257
+ "totes",
258
+ "tots",
259
+ "un",
260
+ "una",
261
+ "unes",
262
+ "uns",
263
+ "us",
264
+ "va",
265
+ "vaig",
266
+ "vam",
267
+ "van",
268
+ "vas",
269
+ "veu",
270
+ "vosaltres",
271
+ "vostra",
272
+ "vostre",
273
+ "vostres",
274
+ "érem",
275
+ "éreu",
276
+ "és",
277
+ "éssent",
278
+ "últim",
279
+ "ús"
280
+ ]
@@ -0,0 +1,425 @@
1
+ [
2
+ "a",
3
+ "aby",
4
+ "ahoj",
5
+ "aj",
6
+ "ale",
7
+ "anebo",
8
+ "ani",
9
+ "aniž",
10
+ "ano",
11
+ "asi",
12
+ "aspoň",
13
+ "atd",
14
+ "atp",
15
+ "az",
16
+ "ačkoli",
17
+ "až",
18
+ "bez",
19
+ "beze",
20
+ "blízko",
21
+ "bohužel",
22
+ "brzo",
23
+ "bude",
24
+ "budem",
25
+ "budeme",
26
+ "budes",
27
+ "budete",
28
+ "budeš",
29
+ "budou",
30
+ "budu",
31
+ "by",
32
+ "byl",
33
+ "byla",
34
+ "byli",
35
+ "bylo",
36
+ "byly",
37
+ "bys",
38
+ "byt",
39
+ "být",
40
+ "během",
41
+ "chce",
42
+ "chceme",
43
+ "chcete",
44
+ "chceš",
45
+ "chci",
46
+ "chtít",
47
+ "chtějí",
48
+ "chut'",
49
+ "chuti",
50
+ "ci",
51
+ "clanek",
52
+ "clanku",
53
+ "clanky",
54
+ "co",
55
+ "coz",
56
+ "což",
57
+ "cz",
58
+ "daleko",
59
+ "dalsi",
60
+ "další",
61
+ "den",
62
+ "deset",
63
+ "design",
64
+ "devatenáct",
65
+ "devět",
66
+ "dnes",
67
+ "do",
68
+ "dobrý",
69
+ "docela",
70
+ "dva",
71
+ "dvacet",
72
+ "dvanáct",
73
+ "dvě",
74
+ "dál",
75
+ "dále",
76
+ "děkovat",
77
+ "děkujeme",
78
+ "děkuji",
79
+ "email",
80
+ "ho",
81
+ "hodně",
82
+ "i",
83
+ "jak",
84
+ "jakmile",
85
+ "jako",
86
+ "jakož",
87
+ "jde",
88
+ "je",
89
+ "jeden",
90
+ "jedenáct",
91
+ "jedna",
92
+ "jedno",
93
+ "jednou",
94
+ "jedou",
95
+ "jeho",
96
+ "jehož",
97
+ "jej",
98
+ "jeji",
99
+ "jejich",
100
+ "její",
101
+ "jelikož",
102
+ "jemu",
103
+ "jen",
104
+ "jenom",
105
+ "jenž",
106
+ "jeste",
107
+ "jestli",
108
+ "jestliže",
109
+ "ještě",
110
+ "jež",
111
+ "ji",
112
+ "jich",
113
+ "jimi",
114
+ "jinak",
115
+ "jine",
116
+ "jiné",
117
+ "jiz",
118
+ "již",
119
+ "jsem",
120
+ "jses",
121
+ "jseš",
122
+ "jsi",
123
+ "jsme",
124
+ "jsou",
125
+ "jste",
126
+ "já",
127
+ "jí",
128
+ "jím",
129
+ "jíž",
130
+ "jšte",
131
+ "k",
132
+ "kam",
133
+ "každý",
134
+ "kde",
135
+ "kdo",
136
+ "kdy",
137
+ "kdyz",
138
+ "když",
139
+ "ke",
140
+ "kolik",
141
+ "kromě",
142
+ "ktera",
143
+ "ktere",
144
+ "kteri",
145
+ "kterou",
146
+ "ktery",
147
+ "která",
148
+ "které",
149
+ "který",
150
+ "kteři",
151
+ "kteří",
152
+ "ku",
153
+ "kvůli",
154
+ "ma",
155
+ "mají",
156
+ "mate",
157
+ "me",
158
+ "mezi",
159
+ "mi",
160
+ "mit",
161
+ "mne",
162
+ "mnou",
163
+ "mně",
164
+ "moc",
165
+ "mohl",
166
+ "mohou",
167
+ "moje",
168
+ "moji",
169
+ "možná",
170
+ "muj",
171
+ "musí",
172
+ "muze",
173
+ "my",
174
+ "má",
175
+ "málo",
176
+ "mám",
177
+ "máme",
178
+ "máte",
179
+ "máš",
180
+ "mé",
181
+ "mí",
182
+ "mít",
183
+ "mě",
184
+ "můj",
185
+ "může",
186
+ "na",
187
+ "nad",
188
+ "nade",
189
+ "nam",
190
+ "napiste",
191
+ "napište",
192
+ "naproti",
193
+ "nas",
194
+ "nasi",
195
+ "načež",
196
+ "naše",
197
+ "naši",
198
+ "ne",
199
+ "nebo",
200
+ "nebyl",
201
+ "nebyla",
202
+ "nebyli",
203
+ "nebyly",
204
+ "nechť",
205
+ "nedělají",
206
+ "nedělá",
207
+ "nedělám",
208
+ "neděláme",
209
+ "neděláte",
210
+ "neděláš",
211
+ "neg",
212
+ "nejsi",
213
+ "nejsou",
214
+ "nemají",
215
+ "nemáme",
216
+ "nemáte",
217
+ "neměl",
218
+ "neni",
219
+ "není",
220
+ "nestačí",
221
+ "nevadí",
222
+ "nez",
223
+ "než",
224
+ "nic",
225
+ "nich",
226
+ "nimi",
227
+ "nove",
228
+ "novy",
229
+ "nové",
230
+ "nový",
231
+ "nula",
232
+ "ná",
233
+ "nám",
234
+ "námi",
235
+ "nás",
236
+ "náš",
237
+ "ní",
238
+ "ním",
239
+ "ně",
240
+ "něco",
241
+ "nějak",
242
+ "někde",
243
+ "někdo",
244
+ "němu",
245
+ "němuž",
246
+ "o",
247
+ "od",
248
+ "ode",
249
+ "on",
250
+ "ona",
251
+ "oni",
252
+ "ono",
253
+ "ony",
254
+ "osm",
255
+ "osmnáct",
256
+ "pak",
257
+ "patnáct",
258
+ "po",
259
+ "pod",
260
+ "podle",
261
+ "pokud",
262
+ "potom",
263
+ "pouze",
264
+ "pozdě",
265
+ "pořád",
266
+ "prave",
267
+ "pravé",
268
+ "pred",
269
+ "pres",
270
+ "pri",
271
+ "pro",
272
+ "proc",
273
+ "prostě",
274
+ "prosím",
275
+ "proti",
276
+ "proto",
277
+ "protoze",
278
+ "protože",
279
+ "proč",
280
+ "prvni",
281
+ "první",
282
+ "práve",
283
+ "pta",
284
+ "pět",
285
+ "před",
286
+ "přede",
287
+ "přes",
288
+ "přese",
289
+ "při",
290
+ "přičemž",
291
+ "re",
292
+ "rovně",
293
+ "s",
294
+ "se",
295
+ "sedm",
296
+ "sedmnáct",
297
+ "si",
298
+ "sice",
299
+ "skoro",
300
+ "smí",
301
+ "smějí",
302
+ "snad",
303
+ "spolu",
304
+ "sta",
305
+ "sto",
306
+ "strana",
307
+ "sté",
308
+ "sve",
309
+ "svych",
310
+ "svym",
311
+ "svymi",
312
+ "své",
313
+ "svých",
314
+ "svým",
315
+ "svými",
316
+ "svůj",
317
+ "ta",
318
+ "tady",
319
+ "tak",
320
+ "take",
321
+ "takhle",
322
+ "taky",
323
+ "takze",
324
+ "také",
325
+ "takže",
326
+ "tam",
327
+ "tamhle",
328
+ "tamhleto",
329
+ "tamto",
330
+ "tato",
331
+ "te",
332
+ "tebe",
333
+ "tebou",
334
+ "ted'",
335
+ "tedy",
336
+ "tema",
337
+ "ten",
338
+ "tento",
339
+ "teto",
340
+ "ti",
341
+ "tim",
342
+ "timto",
343
+ "tipy",
344
+ "tisíc",
345
+ "tisíce",
346
+ "to",
347
+ "tobě",
348
+ "tohle",
349
+ "toho",
350
+ "tohoto",
351
+ "tom",
352
+ "tomto",
353
+ "tomu",
354
+ "tomuto",
355
+ "toto",
356
+ "trošku",
357
+ "tu",
358
+ "tuto",
359
+ "tvoje",
360
+ "tvá",
361
+ "tvé",
362
+ "tvůj",
363
+ "ty",
364
+ "tyto",
365
+ "téma",
366
+ "této",
367
+ "tím",
368
+ "tímto",
369
+ "tě",
370
+ "těm",
371
+ "těma",
372
+ "těmu",
373
+ "třeba",
374
+ "tři",
375
+ "třináct",
376
+ "u",
377
+ "určitě",
378
+ "uz",
379
+ "už",
380
+ "v",
381
+ "vam",
382
+ "vas",
383
+ "vase",
384
+ "vaše",
385
+ "vaši",
386
+ "ve",
387
+ "vedle",
388
+ "večer",
389
+ "vice",
390
+ "vlastně",
391
+ "vsak",
392
+ "vy",
393
+ "vám",
394
+ "vámi",
395
+ "vás",
396
+ "váš",
397
+ "více",
398
+ "však",
399
+ "všechen",
400
+ "všechno",
401
+ "všichni",
402
+ "vůbec",
403
+ "vždy",
404
+ "z",
405
+ "za",
406
+ "zatímco",
407
+ "zač",
408
+ "zda",
409
+ "zde",
410
+ "ze",
411
+ "zpet",
412
+ "zpravy",
413
+ "zprávy",
414
+ "zpět",
415
+ "čau",
416
+ "či",
417
+ "článek",
418
+ "článku",
419
+ "články",
420
+ "čtrnáct",
421
+ "čtyři",
422
+ "šest",
423
+ "šestnáct",
424
+ "že"
425
+ ]