stemmers 0.0.1

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (74) hide show
  1. checksums.yaml +7 -0
  2. data/.rubocop.yml +13 -0
  3. data/CHANGELOG.md +5 -0
  4. data/CODE_OF_CONDUCT.md +132 -0
  5. data/Cargo.lock +547 -0
  6. data/Cargo.toml +7 -0
  7. data/LICENSE.txt +21 -0
  8. data/README.md +113 -0
  9. data/Rakefile +23 -0
  10. data/ext/stemmers/Cargo.toml +16 -0
  11. data/ext/stemmers/extconf.rb +6 -0
  12. data/ext/stemmers/src/lib.rs +105 -0
  13. data/lib/stemmers/stopwords/af.json +53 -0
  14. data/lib/stemmers/stopwords/ar.json +482 -0
  15. data/lib/stemmers/stopwords/bg.json +261 -0
  16. data/lib/stemmers/stopwords/bn.json +400 -0
  17. data/lib/stemmers/stopwords/br.json +1205 -0
  18. data/lib/stemmers/stopwords/ca.json +280 -0
  19. data/lib/stemmers/stopwords/cs.json +425 -0
  20. data/lib/stemmers/stopwords/da.json +172 -0
  21. data/lib/stemmers/stopwords/de.json +622 -0
  22. data/lib/stemmers/stopwords/el.json +849 -0
  23. data/lib/stemmers/stopwords/en.json +1300 -0
  24. data/lib/stemmers/stopwords/eo.json +175 -0
  25. data/lib/stemmers/stopwords/es.json +734 -0
  26. data/lib/stemmers/stopwords/et.json +37 -0
  27. data/lib/stemmers/stopwords/eu.json +100 -0
  28. data/lib/stemmers/stopwords/fa.json +801 -0
  29. data/lib/stemmers/stopwords/fi.json +849 -0
  30. data/lib/stemmers/stopwords/fr.json +693 -0
  31. data/lib/stemmers/stopwords/ga.json +111 -0
  32. data/lib/stemmers/stopwords/gl.json +162 -0
  33. data/lib/stemmers/stopwords/gu.json +226 -0
  34. data/lib/stemmers/stopwords/ha.json +41 -0
  35. data/lib/stemmers/stopwords/he.json +196 -0
  36. data/lib/stemmers/stopwords/hi.json +227 -0
  37. data/lib/stemmers/stopwords/hr.json +181 -0
  38. data/lib/stemmers/stopwords/hu.json +791 -0
  39. data/lib/stemmers/stopwords/hy.json +47 -0
  40. data/lib/stemmers/stopwords/id.json +760 -0
  41. data/lib/stemmers/stopwords/it.json +634 -0
  42. data/lib/stemmers/stopwords/ja.json +136 -0
  43. data/lib/stemmers/stopwords/ko.json +681 -0
  44. data/lib/stemmers/stopwords/ku.json +64 -0
  45. data/lib/stemmers/stopwords/la.json +51 -0
  46. data/lib/stemmers/stopwords/lt.json +476 -0
  47. data/lib/stemmers/stopwords/lv.json +163 -0
  48. data/lib/stemmers/stopwords/mr.json +101 -0
  49. data/lib/stemmers/stopwords/ms.json +477 -0
  50. data/lib/stemmers/stopwords/nl.json +415 -0
  51. data/lib/stemmers/stopwords/no.json +223 -0
  52. data/lib/stemmers/stopwords/pl.json +331 -0
  53. data/lib/stemmers/stopwords/pt.json +562 -0
  54. data/lib/stemmers/stopwords/ro.json +436 -0
  55. data/lib/stemmers/stopwords/ru.json +561 -0
  56. data/lib/stemmers/stopwords/sk.json +420 -0
  57. data/lib/stemmers/stopwords/sl.json +448 -0
  58. data/lib/stemmers/stopwords/so.json +32 -0
  59. data/lib/stemmers/stopwords/st.json +33 -0
  60. data/lib/stemmers/stopwords/sv.json +420 -0
  61. data/lib/stemmers/stopwords/sw.json +76 -0
  62. data/lib/stemmers/stopwords/th.json +118 -0
  63. data/lib/stemmers/stopwords/tl.json +149 -0
  64. data/lib/stemmers/stopwords/tr.json +506 -0
  65. data/lib/stemmers/stopwords/uk.json +75 -0
  66. data/lib/stemmers/stopwords/ur.json +519 -0
  67. data/lib/stemmers/stopwords/vi.json +647 -0
  68. data/lib/stemmers/stopwords/yo.json +62 -0
  69. data/lib/stemmers/stopwords/zh.json +796 -0
  70. data/lib/stemmers/stopwords/zu.json +31 -0
  71. data/lib/stemmers/version.rb +5 -0
  72. data/lib/stemmers.rb +91 -0
  73. data/sig/stemmers.rbs +4 -0
  74. metadata +131 -0
@@ -0,0 +1,791 @@
1
+ [
2
+ "a",
3
+ "abba",
4
+ "abban",
5
+ "abból",
6
+ "addig",
7
+ "ahhoz",
8
+ "ahogy",
9
+ "ahol",
10
+ "aki",
11
+ "akik",
12
+ "akkor",
13
+ "akár",
14
+ "alapján",
15
+ "alatt",
16
+ "alatta",
17
+ "alattad",
18
+ "alattam",
19
+ "alattatok",
20
+ "alattuk",
21
+ "alattunk",
22
+ "alá",
23
+ "alád",
24
+ "alájuk",
25
+ "alám",
26
+ "alánk",
27
+ "alátok",
28
+ "alól",
29
+ "alóla",
30
+ "alólad",
31
+ "alólam",
32
+ "alólatok",
33
+ "alóluk",
34
+ "alólunk",
35
+ "amely",
36
+ "amelybol",
37
+ "amelyek",
38
+ "amelyekben",
39
+ "amelyeket",
40
+ "amelyet",
41
+ "amelyik",
42
+ "amelynek",
43
+ "ami",
44
+ "amikor",
45
+ "amit",
46
+ "amolyan",
47
+ "amott",
48
+ "amíg",
49
+ "annak",
50
+ "annál",
51
+ "arra",
52
+ "arról",
53
+ "attól",
54
+ "az",
55
+ "aznap",
56
+ "azok",
57
+ "azokat",
58
+ "azokba",
59
+ "azokban",
60
+ "azokból",
61
+ "azokhoz",
62
+ "azokig",
63
+ "azokkal",
64
+ "azokká",
65
+ "azoknak",
66
+ "azoknál",
67
+ "azokon",
68
+ "azokra",
69
+ "azokról",
70
+ "azoktól",
71
+ "azokért",
72
+ "azon",
73
+ "azonban",
74
+ "azonnal",
75
+ "azt",
76
+ "aztán",
77
+ "azután",
78
+ "azzal",
79
+ "azzá",
80
+ "azért",
81
+ "bal",
82
+ "balra",
83
+ "ban",
84
+ "be",
85
+ "belé",
86
+ "beléd",
87
+ "beléjük",
88
+ "belém",
89
+ "belénk",
90
+ "belétek",
91
+ "belül",
92
+ "belőle",
93
+ "belőled",
94
+ "belőlem",
95
+ "belőletek",
96
+ "belőlük",
97
+ "belőlünk",
98
+ "ben",
99
+ "benne",
100
+ "benned",
101
+ "bennem",
102
+ "bennetek",
103
+ "bennük",
104
+ "bennünk",
105
+ "bár",
106
+ "bárcsak",
107
+ "bármilyen",
108
+ "búcsú",
109
+ "cikk",
110
+ "cikkek",
111
+ "cikkeket",
112
+ "csak",
113
+ "csakhogy",
114
+ "csupán",
115
+ "de",
116
+ "dehogy",
117
+ "e",
118
+ "ebbe",
119
+ "ebben",
120
+ "ebből",
121
+ "eddig",
122
+ "egy",
123
+ "egyebek",
124
+ "egyebet",
125
+ "egyedül",
126
+ "egyelőre",
127
+ "egyes",
128
+ "egyet",
129
+ "egyetlen",
130
+ "egyik",
131
+ "egymás",
132
+ "egyre",
133
+ "egyszerre",
134
+ "egyéb",
135
+ "együtt",
136
+ "egész",
137
+ "egészen",
138
+ "ehhez",
139
+ "ekkor",
140
+ "el",
141
+ "eleinte",
142
+ "ellen",
143
+ "ellenes",
144
+ "elleni",
145
+ "ellenére",
146
+ "elmondta",
147
+ "elsõ",
148
+ "első",
149
+ "elsők",
150
+ "elsősorban",
151
+ "elsőt",
152
+ "elé",
153
+ "eléd",
154
+ "elég",
155
+ "eléjük",
156
+ "elém",
157
+ "elénk",
158
+ "elétek",
159
+ "elõ",
160
+ "elõször",
161
+ "elõtt",
162
+ "elő",
163
+ "előbb",
164
+ "elől",
165
+ "előle",
166
+ "előled",
167
+ "előlem",
168
+ "előletek",
169
+ "előlük",
170
+ "előlünk",
171
+ "először",
172
+ "előtt",
173
+ "előtte",
174
+ "előtted",
175
+ "előttem",
176
+ "előttetek",
177
+ "előttük",
178
+ "előttünk",
179
+ "előző",
180
+ "emilyen",
181
+ "engem",
182
+ "ennek",
183
+ "ennyi",
184
+ "ennél",
185
+ "enyém",
186
+ "erre",
187
+ "erről",
188
+ "esetben",
189
+ "ettől",
190
+ "ez",
191
+ "ezek",
192
+ "ezekbe",
193
+ "ezekben",
194
+ "ezekből",
195
+ "ezeken",
196
+ "ezeket",
197
+ "ezekhez",
198
+ "ezekig",
199
+ "ezekkel",
200
+ "ezekké",
201
+ "ezeknek",
202
+ "ezeknél",
203
+ "ezekre",
204
+ "ezekről",
205
+ "ezektől",
206
+ "ezekért",
207
+ "ezen",
208
+ "ezentúl",
209
+ "ezer",
210
+ "ezret",
211
+ "ezt",
212
+ "ezután",
213
+ "ezzel",
214
+ "ezzé",
215
+ "ezért",
216
+ "fel",
217
+ "fele",
218
+ "felek",
219
+ "felet",
220
+ "felett",
221
+ "felé",
222
+ "fent",
223
+ "fenti",
224
+ "fél",
225
+ "fölé",
226
+ "gyakran",
227
+ "ha",
228
+ "halló",
229
+ "hamar",
230
+ "hanem",
231
+ "harmadik",
232
+ "harmadikat",
233
+ "harminc",
234
+ "hat",
235
+ "hatodik",
236
+ "hatodikat",
237
+ "hatot",
238
+ "hatvan",
239
+ "helyett",
240
+ "hetedik",
241
+ "hetediket",
242
+ "hetet",
243
+ "hetven",
244
+ "hirtelen",
245
+ "hiszen",
246
+ "hiába",
247
+ "hogy",
248
+ "hogyan",
249
+ "hol",
250
+ "holnap",
251
+ "holnapot",
252
+ "honnan",
253
+ "hova",
254
+ "hozzá",
255
+ "hozzád",
256
+ "hozzájuk",
257
+ "hozzám",
258
+ "hozzánk",
259
+ "hozzátok",
260
+ "hurrá",
261
+ "huszadik",
262
+ "hány",
263
+ "hányszor",
264
+ "hármat",
265
+ "három",
266
+ "hát",
267
+ "hátha",
268
+ "hátulsó",
269
+ "hét",
270
+ "húsz",
271
+ "ide",
272
+ "ide-оda",
273
+ "idén",
274
+ "igazán",
275
+ "igen",
276
+ "ill",
277
+ "ill.",
278
+ "illetve",
279
+ "ilyen",
280
+ "ilyenkor",
281
+ "immár",
282
+ "inkább",
283
+ "is",
284
+ "ismét",
285
+ "ison",
286
+ "itt",
287
+ "jelenleg",
288
+ "jobban",
289
+ "jobbra",
290
+ "jó",
291
+ "jól",
292
+ "jólesik",
293
+ "jóval",
294
+ "jövőre",
295
+ "kell",
296
+ "kellene",
297
+ "kellett",
298
+ "kelljen",
299
+ "keressünk",
300
+ "keresztül",
301
+ "ketten",
302
+ "kettő",
303
+ "kettőt",
304
+ "kevés",
305
+ "ki",
306
+ "kiben",
307
+ "kiből",
308
+ "kicsit",
309
+ "kicsoda",
310
+ "kihez",
311
+ "kik",
312
+ "kikbe",
313
+ "kikben",
314
+ "kikből",
315
+ "kiken",
316
+ "kiket",
317
+ "kikhez",
318
+ "kikkel",
319
+ "kikké",
320
+ "kiknek",
321
+ "kiknél",
322
+ "kikre",
323
+ "kikről",
324
+ "kiktől",
325
+ "kikért",
326
+ "kilenc",
327
+ "kilencedik",
328
+ "kilencediket",
329
+ "kilencet",
330
+ "kilencven",
331
+ "kin",
332
+ "kinek",
333
+ "kinél",
334
+ "kire",
335
+ "kiről",
336
+ "kit",
337
+ "kitől",
338
+ "kivel",
339
+ "kivé",
340
+ "kié",
341
+ "kiért",
342
+ "korábban",
343
+ "képest",
344
+ "kérem",
345
+ "kérlek",
346
+ "kész",
347
+ "késő",
348
+ "később",
349
+ "későn",
350
+ "két",
351
+ "kétszer",
352
+ "kívül",
353
+ "körül",
354
+ "köszönhetően",
355
+ "köszönöm",
356
+ "közben",
357
+ "közel",
358
+ "közepesen",
359
+ "közepén",
360
+ "közé",
361
+ "között",
362
+ "közül",
363
+ "külön",
364
+ "különben",
365
+ "különböző",
366
+ "különbözőbb",
367
+ "különbözőek",
368
+ "lassan",
369
+ "le",
370
+ "legalább",
371
+ "legyen",
372
+ "lehet",
373
+ "lehetetlen",
374
+ "lehetett",
375
+ "lehetőleg",
376
+ "lehetőség",
377
+ "lenne",
378
+ "lenni",
379
+ "lennék",
380
+ "lennének",
381
+ "lesz",
382
+ "leszek",
383
+ "lesznek",
384
+ "leszünk",
385
+ "lett",
386
+ "lettek",
387
+ "lettem",
388
+ "lettünk",
389
+ "lévő",
390
+ "ma",
391
+ "maga",
392
+ "magad",
393
+ "magam",
394
+ "magatokat",
395
+ "magukat",
396
+ "magunkat",
397
+ "magát",
398
+ "mai",
399
+ "majd",
400
+ "majdnem",
401
+ "manapság",
402
+ "meg",
403
+ "megcsinál",
404
+ "megcsinálnak",
405
+ "megint",
406
+ "megvan",
407
+ "mellett",
408
+ "mellette",
409
+ "melletted",
410
+ "mellettem",
411
+ "mellettetek",
412
+ "mellettük",
413
+ "mellettünk",
414
+ "mellé",
415
+ "melléd",
416
+ "melléjük",
417
+ "mellém",
418
+ "mellénk",
419
+ "mellétek",
420
+ "mellől",
421
+ "mellőle",
422
+ "mellőled",
423
+ "mellőlem",
424
+ "mellőletek",
425
+ "mellőlük",
426
+ "mellőlünk",
427
+ "mely",
428
+ "melyek",
429
+ "melyik",
430
+ "mennyi",
431
+ "mert",
432
+ "mi",
433
+ "miatt",
434
+ "miatta",
435
+ "miattad",
436
+ "miattam",
437
+ "miattatok",
438
+ "miattuk",
439
+ "miattunk",
440
+ "mibe",
441
+ "miben",
442
+ "miből",
443
+ "mihez",
444
+ "mik",
445
+ "mikbe",
446
+ "mikben",
447
+ "mikből",
448
+ "miken",
449
+ "miket",
450
+ "mikhez",
451
+ "mikkel",
452
+ "mikké",
453
+ "miknek",
454
+ "miknél",
455
+ "mikor",
456
+ "mikre",
457
+ "mikről",
458
+ "miktől",
459
+ "mikért",
460
+ "milyen",
461
+ "min",
462
+ "mind",
463
+ "mindegyik",
464
+ "mindegyiket",
465
+ "minden",
466
+ "mindenesetre",
467
+ "mindenki",
468
+ "mindent",
469
+ "mindenütt",
470
+ "mindig",
471
+ "mindketten",
472
+ "minek",
473
+ "minket",
474
+ "mint",
475
+ "mintha",
476
+ "minél",
477
+ "mire",
478
+ "miről",
479
+ "mit",
480
+ "mitől",
481
+ "mivel",
482
+ "mivé",
483
+ "miért",
484
+ "mondta",
485
+ "most",
486
+ "mostanáig",
487
+ "már",
488
+ "más",
489
+ "másik",
490
+ "másikat",
491
+ "másnap",
492
+ "második",
493
+ "másodszor",
494
+ "mások",
495
+ "másokat",
496
+ "mást",
497
+ "még",
498
+ "mégis",
499
+ "míg",
500
+ "mögé",
501
+ "mögéd",
502
+ "mögéjük",
503
+ "mögém",
504
+ "mögénk",
505
+ "mögétek",
506
+ "mögött",
507
+ "mögötte",
508
+ "mögötted",
509
+ "mögöttem",
510
+ "mögöttetek",
511
+ "mögöttük",
512
+ "mögöttünk",
513
+ "mögül",
514
+ "mögüle",
515
+ "mögüled",
516
+ "mögülem",
517
+ "mögületek",
518
+ "mögülük",
519
+ "mögülünk",
520
+ "múltkor",
521
+ "múlva",
522
+ "na",
523
+ "nagy",
524
+ "nagyobb",
525
+ "nagyon",
526
+ "naponta",
527
+ "napot",
528
+ "ne",
529
+ "negyedik",
530
+ "negyediket",
531
+ "negyven",
532
+ "neked",
533
+ "nekem",
534
+ "neki",
535
+ "nekik",
536
+ "nektek",
537
+ "nekünk",
538
+ "nem",
539
+ "nemcsak",
540
+ "nemrég",
541
+ "nincs",
542
+ "nyolc",
543
+ "nyolcadik",
544
+ "nyolcadikat",
545
+ "nyolcat",
546
+ "nyolcvan",
547
+ "nála",
548
+ "nálad",
549
+ "nálam",
550
+ "nálatok",
551
+ "náluk",
552
+ "nálunk",
553
+ "négy",
554
+ "négyet",
555
+ "néha",
556
+ "néhány",
557
+ "nélkül",
558
+ "o",
559
+ "oda",
560
+ "ok",
561
+ "olyan",
562
+ "onnan",
563
+ "ott",
564
+ "pedig",
565
+ "persze",
566
+ "pár",
567
+ "például",
568
+ "rajta",
569
+ "rajtad",
570
+ "rajtam",
571
+ "rajtatok",
572
+ "rajtuk",
573
+ "rajtunk",
574
+ "rendben",
575
+ "rosszul",
576
+ "rá",
577
+ "rád",
578
+ "rájuk",
579
+ "rám",
580
+ "ránk",
581
+ "rátok",
582
+ "régen",
583
+ "régóta",
584
+ "részére",
585
+ "róla",
586
+ "rólad",
587
+ "rólam",
588
+ "rólatok",
589
+ "róluk",
590
+ "rólunk",
591
+ "rögtön",
592
+ "s",
593
+ "saját",
594
+ "se",
595
+ "sem",
596
+ "semmi",
597
+ "semmilyen",
598
+ "semmiség",
599
+ "senki",
600
+ "soha",
601
+ "sok",
602
+ "sokan",
603
+ "sokat",
604
+ "sokkal",
605
+ "sokszor",
606
+ "sokáig",
607
+ "során",
608
+ "stb.",
609
+ "szemben",
610
+ "szerbusz",
611
+ "szerint",
612
+ "szerinte",
613
+ "szerinted",
614
+ "szerintem",
615
+ "szerintetek",
616
+ "szerintük",
617
+ "szerintünk",
618
+ "szervusz",
619
+ "szinte",
620
+ "számára",
621
+ "száz",
622
+ "századik",
623
+ "százat",
624
+ "szépen",
625
+ "szét",
626
+ "szíves",
627
+ "szívesen",
628
+ "szíveskedjék",
629
+ "sőt",
630
+ "talán",
631
+ "tavaly",
632
+ "te",
633
+ "tegnap",
634
+ "tegnapelőtt",
635
+ "tehát",
636
+ "tele",
637
+ "teljes",
638
+ "tessék",
639
+ "ti",
640
+ "tied",
641
+ "titeket",
642
+ "tizedik",
643
+ "tizediket",
644
+ "tizenegy",
645
+ "tizenegyedik",
646
+ "tizenhat",
647
+ "tizenhárom",
648
+ "tizenhét",
649
+ "tizenkettedik",
650
+ "tizenkettő",
651
+ "tizenkilenc",
652
+ "tizenkét",
653
+ "tizennyolc",
654
+ "tizennégy",
655
+ "tizenöt",
656
+ "tizet",
657
+ "tovább",
658
+ "további",
659
+ "továbbá",
660
+ "távol",
661
+ "téged",
662
+ "tényleg",
663
+ "tíz",
664
+ "több",
665
+ "többi",
666
+ "többször",
667
+ "túl",
668
+ "tőle",
669
+ "tőled",
670
+ "tőlem",
671
+ "tőletek",
672
+ "tőlük",
673
+ "tőlünk",
674
+ "ugyanakkor",
675
+ "ugyanez",
676
+ "ugyanis",
677
+ "ugye",
678
+ "urak",
679
+ "uram",
680
+ "urat",
681
+ "utoljára",
682
+ "utolsó",
683
+ "után",
684
+ "utána",
685
+ "vagy",
686
+ "vagyis",
687
+ "vagyok",
688
+ "vagytok",
689
+ "vagyunk",
690
+ "vajon",
691
+ "valahol",
692
+ "valaki",
693
+ "valakit",
694
+ "valamelyik",
695
+ "valami",
696
+ "valamint",
697
+ "való",
698
+ "van",
699
+ "vannak",
700
+ "vele",
701
+ "veled",
702
+ "velem",
703
+ "veletek",
704
+ "velük",
705
+ "velünk",
706
+ "vissza",
707
+ "viszlát",
708
+ "viszont",
709
+ "viszontlátásra",
710
+ "volna",
711
+ "volnának",
712
+ "volnék",
713
+ "volt",
714
+ "voltak",
715
+ "voltam",
716
+ "voltunk",
717
+ "végre",
718
+ "végén",
719
+ "végül",
720
+ "által",
721
+ "általában",
722
+ "ám",
723
+ "át",
724
+ "éljen",
725
+ "én",
726
+ "éppen",
727
+ "érte",
728
+ "érted",
729
+ "értem",
730
+ "értetek",
731
+ "értük",
732
+ "értünk",
733
+ "és",
734
+ "év",
735
+ "évben",
736
+ "éve",
737
+ "évek",
738
+ "éves",
739
+ "évi",
740
+ "évvel",
741
+ "így",
742
+ "óta",
743
+ "õ",
744
+ "õk",
745
+ "õket",
746
+ "ön",
747
+ "önbe",
748
+ "önben",
749
+ "önből",
750
+ "önhöz",
751
+ "önnek",
752
+ "önnel",
753
+ "önnél",
754
+ "önre",
755
+ "önről",
756
+ "önt",
757
+ "öntől",
758
+ "önért",
759
+ "önök",
760
+ "önökbe",
761
+ "önökben",
762
+ "önökből",
763
+ "önöket",
764
+ "önökhöz",
765
+ "önökkel",
766
+ "önöknek",
767
+ "önöknél",
768
+ "önökre",
769
+ "önökről",
770
+ "önöktől",
771
+ "önökért",
772
+ "önökön",
773
+ "önön",
774
+ "össze",
775
+ "öt",
776
+ "ötven",
777
+ "ötödik",
778
+ "ötödiket",
779
+ "ötöt",
780
+ "úgy",
781
+ "úgyis",
782
+ "úgynevezett",
783
+ "új",
784
+ "újabb",
785
+ "újra",
786
+ "úr",
787
+ "ő",
788
+ "ők",
789
+ "őket",
790
+ "őt"
791
+ ]