stemmers 0.0.1

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (74) hide show
  1. checksums.yaml +7 -0
  2. data/.rubocop.yml +13 -0
  3. data/CHANGELOG.md +5 -0
  4. data/CODE_OF_CONDUCT.md +132 -0
  5. data/Cargo.lock +547 -0
  6. data/Cargo.toml +7 -0
  7. data/LICENSE.txt +21 -0
  8. data/README.md +113 -0
  9. data/Rakefile +23 -0
  10. data/ext/stemmers/Cargo.toml +16 -0
  11. data/ext/stemmers/extconf.rb +6 -0
  12. data/ext/stemmers/src/lib.rs +105 -0
  13. data/lib/stemmers/stopwords/af.json +53 -0
  14. data/lib/stemmers/stopwords/ar.json +482 -0
  15. data/lib/stemmers/stopwords/bg.json +261 -0
  16. data/lib/stemmers/stopwords/bn.json +400 -0
  17. data/lib/stemmers/stopwords/br.json +1205 -0
  18. data/lib/stemmers/stopwords/ca.json +280 -0
  19. data/lib/stemmers/stopwords/cs.json +425 -0
  20. data/lib/stemmers/stopwords/da.json +172 -0
  21. data/lib/stemmers/stopwords/de.json +622 -0
  22. data/lib/stemmers/stopwords/el.json +849 -0
  23. data/lib/stemmers/stopwords/en.json +1300 -0
  24. data/lib/stemmers/stopwords/eo.json +175 -0
  25. data/lib/stemmers/stopwords/es.json +734 -0
  26. data/lib/stemmers/stopwords/et.json +37 -0
  27. data/lib/stemmers/stopwords/eu.json +100 -0
  28. data/lib/stemmers/stopwords/fa.json +801 -0
  29. data/lib/stemmers/stopwords/fi.json +849 -0
  30. data/lib/stemmers/stopwords/fr.json +693 -0
  31. data/lib/stemmers/stopwords/ga.json +111 -0
  32. data/lib/stemmers/stopwords/gl.json +162 -0
  33. data/lib/stemmers/stopwords/gu.json +226 -0
  34. data/lib/stemmers/stopwords/ha.json +41 -0
  35. data/lib/stemmers/stopwords/he.json +196 -0
  36. data/lib/stemmers/stopwords/hi.json +227 -0
  37. data/lib/stemmers/stopwords/hr.json +181 -0
  38. data/lib/stemmers/stopwords/hu.json +791 -0
  39. data/lib/stemmers/stopwords/hy.json +47 -0
  40. data/lib/stemmers/stopwords/id.json +760 -0
  41. data/lib/stemmers/stopwords/it.json +634 -0
  42. data/lib/stemmers/stopwords/ja.json +136 -0
  43. data/lib/stemmers/stopwords/ko.json +681 -0
  44. data/lib/stemmers/stopwords/ku.json +64 -0
  45. data/lib/stemmers/stopwords/la.json +51 -0
  46. data/lib/stemmers/stopwords/lt.json +476 -0
  47. data/lib/stemmers/stopwords/lv.json +163 -0
  48. data/lib/stemmers/stopwords/mr.json +101 -0
  49. data/lib/stemmers/stopwords/ms.json +477 -0
  50. data/lib/stemmers/stopwords/nl.json +415 -0
  51. data/lib/stemmers/stopwords/no.json +223 -0
  52. data/lib/stemmers/stopwords/pl.json +331 -0
  53. data/lib/stemmers/stopwords/pt.json +562 -0
  54. data/lib/stemmers/stopwords/ro.json +436 -0
  55. data/lib/stemmers/stopwords/ru.json +561 -0
  56. data/lib/stemmers/stopwords/sk.json +420 -0
  57. data/lib/stemmers/stopwords/sl.json +448 -0
  58. data/lib/stemmers/stopwords/so.json +32 -0
  59. data/lib/stemmers/stopwords/st.json +33 -0
  60. data/lib/stemmers/stopwords/sv.json +420 -0
  61. data/lib/stemmers/stopwords/sw.json +76 -0
  62. data/lib/stemmers/stopwords/th.json +118 -0
  63. data/lib/stemmers/stopwords/tl.json +149 -0
  64. data/lib/stemmers/stopwords/tr.json +506 -0
  65. data/lib/stemmers/stopwords/uk.json +75 -0
  66. data/lib/stemmers/stopwords/ur.json +519 -0
  67. data/lib/stemmers/stopwords/vi.json +647 -0
  68. data/lib/stemmers/stopwords/yo.json +62 -0
  69. data/lib/stemmers/stopwords/zh.json +796 -0
  70. data/lib/stemmers/stopwords/zu.json +31 -0
  71. data/lib/stemmers/version.rb +5 -0
  72. data/lib/stemmers.rb +91 -0
  73. data/sig/stemmers.rbs +4 -0
  74. metadata +131 -0
@@ -0,0 +1,796 @@
1
+ [
2
+ "、",
3
+ "。",
4
+ "〈",
5
+ "〉",
6
+ "《",
7
+ "》",
8
+ "一",
9
+ "一个",
10
+ "一些",
11
+ "一何",
12
+ "一切",
13
+ "一则",
14
+ "一方面",
15
+ "一旦",
16
+ "一来",
17
+ "一样",
18
+ "一种",
19
+ "一般",
20
+ "一转眼",
21
+ "七",
22
+ "万一",
23
+ "三",
24
+ "上",
25
+ "上下",
26
+ "下",
27
+ "不",
28
+ "不仅",
29
+ "不但",
30
+ "不光",
31
+ "不单",
32
+ "不只",
33
+ "不外乎",
34
+ "不如",
35
+ "不妨",
36
+ "不尽",
37
+ "不尽然",
38
+ "不得",
39
+ "不怕",
40
+ "不惟",
41
+ "不成",
42
+ "不拘",
43
+ "不料",
44
+ "不是",
45
+ "不比",
46
+ "不然",
47
+ "不特",
48
+ "不独",
49
+ "不管",
50
+ "不至于",
51
+ "不若",
52
+ "不论",
53
+ "不过",
54
+ "不问",
55
+ "与",
56
+ "与其",
57
+ "与其说",
58
+ "与否",
59
+ "与此同时",
60
+ "且",
61
+ "且不说",
62
+ "且说",
63
+ "两者",
64
+ "个",
65
+ "个别",
66
+ "中",
67
+ "临",
68
+ "为",
69
+ "为了",
70
+ "为什么",
71
+ "为何",
72
+ "为止",
73
+ "为此",
74
+ "为着",
75
+ "乃",
76
+ "乃至",
77
+ "乃至于",
78
+ "么",
79
+ "之",
80
+ "之一",
81
+ "之所以",
82
+ "之类",
83
+ "乌乎",
84
+ "乎",
85
+ "乘",
86
+ "九",
87
+ "也",
88
+ "也好",
89
+ "也罢",
90
+ "了",
91
+ "二",
92
+ "二来",
93
+ "于",
94
+ "于是",
95
+ "于是乎",
96
+ "云云",
97
+ "云尔",
98
+ "五",
99
+ "些",
100
+ "亦",
101
+ "人",
102
+ "人们",
103
+ "人家",
104
+ "什",
105
+ "什么",
106
+ "什么样",
107
+ "今",
108
+ "介于",
109
+ "仍",
110
+ "仍旧",
111
+ "从",
112
+ "从此",
113
+ "从而",
114
+ "他",
115
+ "他人",
116
+ "他们",
117
+ "他们们",
118
+ "以",
119
+ "以上",
120
+ "以为",
121
+ "以便",
122
+ "以免",
123
+ "以及",
124
+ "以故",
125
+ "以期",
126
+ "以来",
127
+ "以至",
128
+ "以至于",
129
+ "以致",
130
+ "们",
131
+ "任",
132
+ "任何",
133
+ "任凭",
134
+ "会",
135
+ "似的",
136
+ "但",
137
+ "但凡",
138
+ "但是",
139
+ "何",
140
+ "何以",
141
+ "何况",
142
+ "何处",
143
+ "何时",
144
+ "余外",
145
+ "作为",
146
+ "你",
147
+ "你们",
148
+ "使",
149
+ "使得",
150
+ "例如",
151
+ "依",
152
+ "依据",
153
+ "依照",
154
+ "便于",
155
+ "俺",
156
+ "俺们",
157
+ "倘",
158
+ "倘使",
159
+ "倘或",
160
+ "倘然",
161
+ "倘若",
162
+ "借",
163
+ "借傥然",
164
+ "假使",
165
+ "假如",
166
+ "假若",
167
+ "做",
168
+ "像",
169
+ "儿",
170
+ "先不先",
171
+ "光",
172
+ "光是",
173
+ "全体",
174
+ "全部",
175
+ "八",
176
+ "六",
177
+ "兮",
178
+ "共",
179
+ "关于",
180
+ "关于具体地说",
181
+ "其",
182
+ "其一",
183
+ "其中",
184
+ "其二",
185
+ "其他",
186
+ "其余",
187
+ "其它",
188
+ "其次",
189
+ "具体地说",
190
+ "具体说来",
191
+ "兼之",
192
+ "内",
193
+ "再",
194
+ "再其次",
195
+ "再则",
196
+ "再有",
197
+ "再者",
198
+ "再者说",
199
+ "再说",
200
+ "冒",
201
+ "冲",
202
+ "况且",
203
+ "几",
204
+ "几时",
205
+ "凡",
206
+ "凡是",
207
+ "凭",
208
+ "凭借",
209
+ "出于",
210
+ "出来",
211
+ "分",
212
+ "分别",
213
+ "则",
214
+ "则甚",
215
+ "别",
216
+ "别人",
217
+ "别处",
218
+ "别是",
219
+ "别的",
220
+ "别管",
221
+ "别说",
222
+ "到",
223
+ "前后",
224
+ "前此",
225
+ "前者",
226
+ "加之",
227
+ "加以",
228
+ "区",
229
+ "即",
230
+ "即令",
231
+ "即使",
232
+ "即便",
233
+ "即如",
234
+ "即或",
235
+ "即若",
236
+ "却",
237
+ "去",
238
+ "又",
239
+ "又及",
240
+ "及",
241
+ "及其",
242
+ "及至",
243
+ "反之",
244
+ "反而",
245
+ "反过来",
246
+ "反过来说",
247
+ "受到",
248
+ "另",
249
+ "另一方面",
250
+ "另外",
251
+ "另悉",
252
+ "只",
253
+ "只当",
254
+ "只怕",
255
+ "只是",
256
+ "只有",
257
+ "只消",
258
+ "只要",
259
+ "只限",
260
+ "叫",
261
+ "叮咚",
262
+ "可",
263
+ "可以",
264
+ "可是",
265
+ "可见",
266
+ "各",
267
+ "各个",
268
+ "各位",
269
+ "各种",
270
+ "各自",
271
+ "同",
272
+ "同时",
273
+ "后",
274
+ "后者",
275
+ "向",
276
+ "向使",
277
+ "向着",
278
+ "吓",
279
+ "吗",
280
+ "否则",
281
+ "吧",
282
+ "吧哒",
283
+ "含",
284
+ "吱",
285
+ "呀",
286
+ "呃",
287
+ "呕",
288
+ "呗",
289
+ "呜",
290
+ "呜呼",
291
+ "呢",
292
+ "呵",
293
+ "呵呵",
294
+ "呸",
295
+ "呼哧",
296
+ "咋",
297
+ "和",
298
+ "咚",
299
+ "咦",
300
+ "咧",
301
+ "咱",
302
+ "咱们",
303
+ "咳",
304
+ "哇",
305
+ "哈",
306
+ "哈哈",
307
+ "哉",
308
+ "哎",
309
+ "哎呀",
310
+ "哎哟",
311
+ "哗",
312
+ "哟",
313
+ "哦",
314
+ "哩",
315
+ "哪",
316
+ "哪个",
317
+ "哪些",
318
+ "哪儿",
319
+ "哪天",
320
+ "哪年",
321
+ "哪怕",
322
+ "哪样",
323
+ "哪边",
324
+ "哪里",
325
+ "哼",
326
+ "哼唷",
327
+ "唉",
328
+ "唯有",
329
+ "啊",
330
+ "啐",
331
+ "啥",
332
+ "啦",
333
+ "啪达",
334
+ "啷当",
335
+ "喂",
336
+ "喏",
337
+ "喔唷",
338
+ "喽",
339
+ "嗡",
340
+ "嗡嗡",
341
+ "嗬",
342
+ "嗯",
343
+ "嗳",
344
+ "嘎",
345
+ "嘎登",
346
+ "嘘",
347
+ "嘛",
348
+ "嘻",
349
+ "嘿",
350
+ "嘿嘿",
351
+ "四",
352
+ "因",
353
+ "因为",
354
+ "因了",
355
+ "因此",
356
+ "因着",
357
+ "因而",
358
+ "固然",
359
+ "在",
360
+ "在下",
361
+ "在于",
362
+ "地",
363
+ "基于",
364
+ "处在",
365
+ "多",
366
+ "多么",
367
+ "多少",
368
+ "大",
369
+ "大家",
370
+ "她",
371
+ "她们",
372
+ "好",
373
+ "如",
374
+ "如上",
375
+ "如上所述",
376
+ "如下",
377
+ "如何",
378
+ "如其",
379
+ "如同",
380
+ "如是",
381
+ "如果",
382
+ "如此",
383
+ "如若",
384
+ "始而",
385
+ "孰料",
386
+ "孰知",
387
+ "宁",
388
+ "宁可",
389
+ "宁愿",
390
+ "宁肯",
391
+ "它",
392
+ "它们",
393
+ "对",
394
+ "对于",
395
+ "对待",
396
+ "对方",
397
+ "对比",
398
+ "将",
399
+ "小",
400
+ "尔",
401
+ "尔后",
402
+ "尔尔",
403
+ "尚且",
404
+ "就",
405
+ "就是",
406
+ "就是了",
407
+ "就是说",
408
+ "就算",
409
+ "就要",
410
+ "尽",
411
+ "尽管",
412
+ "尽管如此",
413
+ "岂但",
414
+ "己",
415
+ "已",
416
+ "已矣",
417
+ "巴",
418
+ "巴巴",
419
+ "年",
420
+ "并",
421
+ "并且",
422
+ "庶乎",
423
+ "庶几",
424
+ "开外",
425
+ "开始",
426
+ "归",
427
+ "归齐",
428
+ "当",
429
+ "当地",
430
+ "当然",
431
+ "当着",
432
+ "彼",
433
+ "彼时",
434
+ "彼此",
435
+ "往",
436
+ "待",
437
+ "很",
438
+ "得",
439
+ "得了",
440
+ "怎",
441
+ "怎么",
442
+ "怎么办",
443
+ "怎么样",
444
+ "怎奈",
445
+ "怎样",
446
+ "总之",
447
+ "总的来看",
448
+ "总的来说",
449
+ "总的说来",
450
+ "总而言之",
451
+ "恰恰相反",
452
+ "您",
453
+ "惟其",
454
+ "慢说",
455
+ "我",
456
+ "我们",
457
+ "或",
458
+ "或则",
459
+ "或是",
460
+ "或曰",
461
+ "或者",
462
+ "截至",
463
+ "所",
464
+ "所以",
465
+ "所在",
466
+ "所幸",
467
+ "所有",
468
+ "才",
469
+ "才能",
470
+ "打",
471
+ "打从",
472
+ "把",
473
+ "抑或",
474
+ "拿",
475
+ "按",
476
+ "按照",
477
+ "换句话说",
478
+ "换言之",
479
+ "据",
480
+ "据此",
481
+ "接着",
482
+ "故",
483
+ "故此",
484
+ "故而",
485
+ "旁人",
486
+ "无",
487
+ "无宁",
488
+ "无论",
489
+ "既",
490
+ "既往",
491
+ "既是",
492
+ "既然",
493
+ "日",
494
+ "时",
495
+ "时候",
496
+ "是",
497
+ "是以",
498
+ "是的",
499
+ "更",
500
+ "曾",
501
+ "替",
502
+ "替代",
503
+ "最",
504
+ "月",
505
+ "有",
506
+ "有些",
507
+ "有关",
508
+ "有及",
509
+ "有时",
510
+ "有的",
511
+ "望",
512
+ "朝",
513
+ "朝着",
514
+ "本",
515
+ "本人",
516
+ "本地",
517
+ "本着",
518
+ "本身",
519
+ "来",
520
+ "来着",
521
+ "来自",
522
+ "来说",
523
+ "极了",
524
+ "果然",
525
+ "果真",
526
+ "某",
527
+ "某个",
528
+ "某些",
529
+ "某某",
530
+ "根据",
531
+ "欤",
532
+ "正值",
533
+ "正如",
534
+ "正巧",
535
+ "正是",
536
+ "此",
537
+ "此地",
538
+ "此处",
539
+ "此外",
540
+ "此时",
541
+ "此次",
542
+ "此间",
543
+ "毋宁",
544
+ "每",
545
+ "每当",
546
+ "比",
547
+ "比及",
548
+ "比如",
549
+ "比方",
550
+ "没奈何",
551
+ "沿",
552
+ "沿着",
553
+ "漫说",
554
+ "点",
555
+ "焉",
556
+ "然则",
557
+ "然后",
558
+ "然而",
559
+ "照",
560
+ "照着",
561
+ "犹且",
562
+ "犹自",
563
+ "甚且",
564
+ "甚么",
565
+ "甚或",
566
+ "甚而",
567
+ "甚至",
568
+ "甚至于",
569
+ "用",
570
+ "用来",
571
+ "由",
572
+ "由于",
573
+ "由是",
574
+ "由此",
575
+ "由此可见",
576
+ "的",
577
+ "的确",
578
+ "的话",
579
+ "直到",
580
+ "相对而言",
581
+ "省得",
582
+ "看",
583
+ "眨眼",
584
+ "着",
585
+ "着呢",
586
+ "矣",
587
+ "矣乎",
588
+ "矣哉",
589
+ "离",
590
+ "秒",
591
+ "称",
592
+ "竟而",
593
+ "第",
594
+ "等",
595
+ "等到",
596
+ "等等",
597
+ "简言之",
598
+ "管",
599
+ "类如",
600
+ "紧接着",
601
+ "纵",
602
+ "纵令",
603
+ "纵使",
604
+ "纵然",
605
+ "经",
606
+ "经过",
607
+ "结果",
608
+ "给",
609
+ "继之",
610
+ "继后",
611
+ "继而",
612
+ "综上所述",
613
+ "罢了",
614
+ "者",
615
+ "而",
616
+ "而且",
617
+ "而况",
618
+ "而后",
619
+ "而外",
620
+ "而已",
621
+ "而是",
622
+ "而言",
623
+ "能",
624
+ "能否",
625
+ "腾",
626
+ "自",
627
+ "自个儿",
628
+ "自从",
629
+ "自各儿",
630
+ "自后",
631
+ "自家",
632
+ "自己",
633
+ "自打",
634
+ "自身",
635
+ "至",
636
+ "至于",
637
+ "至今",
638
+ "至若",
639
+ "致",
640
+ "般的",
641
+ "若",
642
+ "若夫",
643
+ "若是",
644
+ "若果",
645
+ "若非",
646
+ "莫不然",
647
+ "莫如",
648
+ "莫若",
649
+ "虽",
650
+ "虽则",
651
+ "虽然",
652
+ "虽说",
653
+ "被",
654
+ "要",
655
+ "要不",
656
+ "要不是",
657
+ "要不然",
658
+ "要么",
659
+ "要是",
660
+ "譬喻",
661
+ "譬如",
662
+ "让",
663
+ "许多",
664
+ "论",
665
+ "设使",
666
+ "设或",
667
+ "设若",
668
+ "诚如",
669
+ "诚然",
670
+ "该",
671
+ "说",
672
+ "说来",
673
+ "请",
674
+ "诸",
675
+ "诸位",
676
+ "诸如",
677
+ "谁",
678
+ "谁人",
679
+ "谁料",
680
+ "谁知",
681
+ "贼死",
682
+ "赖以",
683
+ "赶",
684
+ "起",
685
+ "起见",
686
+ "趁",
687
+ "趁着",
688
+ "越是",
689
+ "距",
690
+ "跟",
691
+ "较",
692
+ "较之",
693
+ "边",
694
+ "过",
695
+ "还",
696
+ "还是",
697
+ "还有",
698
+ "还要",
699
+ "这",
700
+ "这一来",
701
+ "这个",
702
+ "这么",
703
+ "这么些",
704
+ "这么样",
705
+ "这么点儿",
706
+ "这些",
707
+ "这会儿",
708
+ "这儿",
709
+ "这就是说",
710
+ "这时",
711
+ "这样",
712
+ "这次",
713
+ "这般",
714
+ "这边",
715
+ "这里",
716
+ "进而",
717
+ "连",
718
+ "连同",
719
+ "逐步",
720
+ "通过",
721
+ "遵循",
722
+ "遵照",
723
+ "那",
724
+ "那个",
725
+ "那么",
726
+ "那么些",
727
+ "那么样",
728
+ "那些",
729
+ "那会儿",
730
+ "那儿",
731
+ "那时",
732
+ "那样",
733
+ "那般",
734
+ "那边",
735
+ "那里",
736
+ "都",
737
+ "鄙人",
738
+ "鉴于",
739
+ "针对",
740
+ "阿",
741
+ "除",
742
+ "除了",
743
+ "除外",
744
+ "除开",
745
+ "除此之外",
746
+ "除非",
747
+ "随",
748
+ "随后",
749
+ "随时",
750
+ "随着",
751
+ "难道说",
752
+ "零",
753
+ "非",
754
+ "非但",
755
+ "非徒",
756
+ "非特",
757
+ "非独",
758
+ "靠",
759
+ "顺",
760
+ "顺着",
761
+ "首先",
762
+ "︿",
763
+ "!",
764
+ "#",
765
+ "$",
766
+ "%",
767
+ "&",
768
+ "(",
769
+ ")",
770
+ "*",
771
+ "+",
772
+ ",",
773
+ "0",
774
+ "1",
775
+ "2",
776
+ "3",
777
+ "4",
778
+ "5",
779
+ "6",
780
+ "7",
781
+ "8",
782
+ "9",
783
+ ":",
784
+ ";",
785
+ "<",
786
+ ">",
787
+ "?",
788
+ "@",
789
+ "[",
790
+ "]",
791
+ "{",
792
+ "|",
793
+ "}",
794
+ "~",
795
+ "¥"
796
+ ]