keyphrase 0.1.3 → 0.2.0

Sign up to get free protection for your applications and to get access to all the features.
Files changed (75) hide show
  1. checksums.yaml +4 -4
  2. data/README.md +5 -4
  3. data/lib/keyphrase/stoplist/afr.rb +14 -0
  4. data/lib/keyphrase/stoplist/aka.rb +10 -0
  5. data/lib/keyphrase/stoplist/amh.rb +10 -0
  6. data/lib/keyphrase/stoplist/ara.rb +490 -0
  7. data/lib/keyphrase/stoplist/aze.rb +175 -0
  8. data/lib/keyphrase/stoplist/bel.rb +11 -0
  9. data/lib/keyphrase/stoplist/ben.rb +408 -0
  10. data/lib/keyphrase/stoplist/bul.rb +528 -0
  11. data/lib/keyphrase/stoplist/cat.rb +711 -0
  12. data/lib/keyphrase/stoplist/ces.rb +560 -0
  13. data/lib/keyphrase/stoplist/cmn.rb +1119 -0
  14. data/lib/keyphrase/stoplist/dan.rb +25 -0
  15. data/lib/keyphrase/stoplist/deu.rb +631 -0
  16. data/lib/keyphrase/stoplist/ell.rb +275 -0
  17. data/lib/keyphrase/stoplist/eng.rb +2 -589
  18. data/lib/keyphrase/stoplist/epo.rb +183 -0
  19. data/lib/keyphrase/stoplist/est.rb +13 -0
  20. data/lib/keyphrase/stoplist/fin.rb +857 -0
  21. data/lib/keyphrase/stoplist/fra.rb +699 -0
  22. data/lib/keyphrase/stoplist/guj.rb +234 -0
  23. data/lib/keyphrase/stoplist/heb.rb +204 -0
  24. data/lib/keyphrase/stoplist/hin.rb +235 -0
  25. data/lib/keyphrase/stoplist/hrv.rb +25 -0
  26. data/lib/keyphrase/stoplist/hun.rb +1195 -0
  27. data/lib/keyphrase/stoplist/hye.rb +55 -0
  28. data/lib/keyphrase/stoplist/ind.rb +768 -0
  29. data/lib/keyphrase/stoplist/ita.rb +670 -0
  30. data/lib/keyphrase/stoplist/jav.rb +10 -0
  31. data/lib/keyphrase/stoplist/jpn.rb +144 -0
  32. data/lib/keyphrase/stoplist/kan.rb +92 -0
  33. data/lib/keyphrase/stoplist/kat.rb +383 -0
  34. data/lib/keyphrase/stoplist/khm.rb +245 -0
  35. data/lib/keyphrase/stoplist/kor.rb +610 -0
  36. data/lib/keyphrase/stoplist/lat.rb +14 -0
  37. data/lib/keyphrase/stoplist/lav.rb +171 -0
  38. data/lib/keyphrase/stoplist/lit.rb +484 -0
  39. data/lib/keyphrase/stoplist/mal.rb +11 -0
  40. data/lib/keyphrase/stoplist/mar.rb +109 -0
  41. data/lib/keyphrase/stoplist/mkd.rb +11 -0
  42. data/lib/keyphrase/stoplist/mya.rb +285 -0
  43. data/lib/keyphrase/stoplist/nep.rb +265 -0
  44. data/lib/keyphrase/stoplist/nld.rb +423 -0
  45. data/lib/keyphrase/stoplist/nob.rb +186 -0
  46. data/lib/keyphrase/stoplist/ori.rb +11 -0
  47. data/lib/keyphrase/stoplist/pan.rb +473 -0
  48. data/lib/keyphrase/stoplist/pes.rb +801 -0
  49. data/lib/keyphrase/stoplist/pol.rb +338 -0
  50. data/lib/keyphrase/stoplist/por.rb +570 -0
  51. data/lib/keyphrase/stoplist/ron.rb +444 -0
  52. data/lib/keyphrase/stoplist/rus.rb +569 -0
  53. data/lib/keyphrase/stoplist/sin.rb +10 -0
  54. data/lib/keyphrase/stoplist/slk.rb +428 -0
  55. data/lib/keyphrase/stoplist/slv.rb +456 -0
  56. data/lib/keyphrase/stoplist/sna.rb +11 -0
  57. data/lib/keyphrase/stoplist/spa.rb +731 -0
  58. data/lib/keyphrase/stoplist/srp.rb +11 -0
  59. data/lib/keyphrase/stoplist/swe.rb +428 -0
  60. data/lib/keyphrase/stoplist/tam.rb +135 -0
  61. data/lib/keyphrase/stoplist/tel.rb +10 -0
  62. data/lib/keyphrase/stoplist/tgl.rb +157 -0
  63. data/lib/keyphrase/stoplist/tha.rb +125 -0
  64. data/lib/keyphrase/stoplist/tuk.rb +11 -0
  65. data/lib/keyphrase/stoplist/tur.rb +514 -0
  66. data/lib/keyphrase/stoplist/ukr.rb +38 -0
  67. data/lib/keyphrase/stoplist/urd.rb +527 -0
  68. data/lib/keyphrase/stoplist/uzb.rb +10 -0
  69. data/lib/keyphrase/stoplist/vie.rb +655 -0
  70. data/lib/keyphrase/stoplist/yid.rb +204 -0
  71. data/lib/keyphrase/stoplist/zul.rb +39 -0
  72. data/lib/keyphrase/stoplist.rb +13 -10
  73. data/lib/keyphrase/version.rb +1 -1
  74. data/lib/keyphrase.rb +20 -12
  75. metadata +71 -3
@@ -0,0 +1,670 @@
1
+ class Keyphrase
2
+ module Stoplist
3
+ class Ita
4
+ def self.stopwords
5
+ @@stopwords ||= [
6
+ "a",
7
+ "abbastanza",
8
+ "abbia",
9
+ "abbiamo",
10
+ "abbiano",
11
+ "abbiate",
12
+ "accidenti",
13
+ "ad",
14
+ "adesso",
15
+ "affinche",
16
+ "agl",
17
+ "agli",
18
+ "ahime",
19
+ "ahimã¨",
20
+ "ahimè",
21
+ "ai",
22
+ "al",
23
+ "alcuna",
24
+ "alcuni",
25
+ "alcuno",
26
+ "all",
27
+ "alla",
28
+ "alle",
29
+ "allo",
30
+ "allora",
31
+ "altre",
32
+ "altri",
33
+ "altrimenti",
34
+ "altro",
35
+ "altrove",
36
+ "altrui",
37
+ "anche",
38
+ "ancora",
39
+ "anni",
40
+ "anno",
41
+ "ansa",
42
+ "anticipo",
43
+ "assai",
44
+ "attesa",
45
+ "attraverso",
46
+ "avanti",
47
+ "avemmo",
48
+ "avendo",
49
+ "avente",
50
+ "aver",
51
+ "avere",
52
+ "averlo",
53
+ "avesse",
54
+ "avessero",
55
+ "avessi",
56
+ "avessimo",
57
+ "aveste",
58
+ "avesti",
59
+ "avete",
60
+ "aveva",
61
+ "avevamo",
62
+ "avevano",
63
+ "avevate",
64
+ "avevi",
65
+ "avevo",
66
+ "avrai",
67
+ "avranno",
68
+ "avrebbe",
69
+ "avrebbero",
70
+ "avrei",
71
+ "avremmo",
72
+ "avremo",
73
+ "avreste",
74
+ "avresti",
75
+ "avrete",
76
+ "avrà",
77
+ "avrò",
78
+ "avuta",
79
+ "avute",
80
+ "avuti",
81
+ "avuto",
82
+ "basta",
83
+ "ben",
84
+ "bene",
85
+ "benissimo",
86
+ "berlusconi",
87
+ "brava",
88
+ "bravo",
89
+ "buono",
90
+ "c",
91
+ "casa",
92
+ "caso",
93
+ "cento",
94
+ "certa",
95
+ "certe",
96
+ "certi",
97
+ "certo",
98
+ "che",
99
+ "chi",
100
+ "chicchessia",
101
+ "chiunque",
102
+ "ci",
103
+ "ciascuna",
104
+ "ciascuno",
105
+ "cima",
106
+ "cinque",
107
+ "cio",
108
+ "cioe",
109
+ "cioã¨",
110
+ "cioè",
111
+ "circa",
112
+ "citta",
113
+ "città",
114
+ "cittã",
115
+ "ciã²",
116
+ "ciò",
117
+ "co",
118
+ "codesta",
119
+ "codesti",
120
+ "codesto",
121
+ "cogli",
122
+ "coi",
123
+ "col",
124
+ "colei",
125
+ "coll",
126
+ "coloro",
127
+ "colui",
128
+ "come",
129
+ "cominci",
130
+ "comprare",
131
+ "comunque",
132
+ "con",
133
+ "concernente",
134
+ "conciliarsi",
135
+ "conclusione",
136
+ "consecutivi",
137
+ "consecutivo",
138
+ "consiglio",
139
+ "contro",
140
+ "cortesia",
141
+ "cos",
142
+ "cosa",
143
+ "cosi",
144
+ "cosã¬",
145
+ "così",
146
+ "cui",
147
+ "d",
148
+ "da",
149
+ "dagl",
150
+ "dagli",
151
+ "dai",
152
+ "dal",
153
+ "dall",
154
+ "dalla",
155
+ "dalle",
156
+ "dallo",
157
+ "dappertutto",
158
+ "davanti",
159
+ "degl",
160
+ "degli",
161
+ "dei",
162
+ "del",
163
+ "dell",
164
+ "della",
165
+ "delle",
166
+ "dello",
167
+ "dentro",
168
+ "detto",
169
+ "deve",
170
+ "devo",
171
+ "di",
172
+ "dice",
173
+ "dietro",
174
+ "dire",
175
+ "dirimpetto",
176
+ "diventa",
177
+ "diventare",
178
+ "diventato",
179
+ "dopo",
180
+ "doppio",
181
+ "dov",
182
+ "dove",
183
+ "dovra",
184
+ "dovrà",
185
+ "dovrã",
186
+ "dovunque",
187
+ "due",
188
+ "dunque",
189
+ "durante",
190
+ "e",
191
+ "ebbe",
192
+ "ebbero",
193
+ "ebbi",
194
+ "ecc",
195
+ "ecco",
196
+ "ed",
197
+ "effettivamente",
198
+ "egli",
199
+ "ella",
200
+ "entrambi",
201
+ "eppure",
202
+ "era",
203
+ "erano",
204
+ "eravamo",
205
+ "eravate",
206
+ "eri",
207
+ "ero",
208
+ "esempio",
209
+ "esse",
210
+ "essendo",
211
+ "esser",
212
+ "essere",
213
+ "essi",
214
+ "ex",
215
+ "fa",
216
+ "faccia",
217
+ "facciamo",
218
+ "facciano",
219
+ "facciate",
220
+ "faccio",
221
+ "facemmo",
222
+ "facendo",
223
+ "facesse",
224
+ "facessero",
225
+ "facessi",
226
+ "facessimo",
227
+ "faceste",
228
+ "facesti",
229
+ "faceva",
230
+ "facevamo",
231
+ "facevano",
232
+ "facevate",
233
+ "facevi",
234
+ "facevo",
235
+ "fai",
236
+ "fanno",
237
+ "farai",
238
+ "faranno",
239
+ "fare",
240
+ "farebbe",
241
+ "farebbero",
242
+ "farei",
243
+ "faremmo",
244
+ "faremo",
245
+ "fareste",
246
+ "faresti",
247
+ "farete",
248
+ "farà",
249
+ "farò",
250
+ "fatto",
251
+ "favore",
252
+ "fece",
253
+ "fecero",
254
+ "feci",
255
+ "fin",
256
+ "finalmente",
257
+ "finche",
258
+ "fine",
259
+ "fino",
260
+ "forse",
261
+ "forza",
262
+ "fosse",
263
+ "fossero",
264
+ "fossi",
265
+ "fossimo",
266
+ "foste",
267
+ "fosti",
268
+ "fra",
269
+ "frattempo",
270
+ "fu",
271
+ "fui",
272
+ "fummo",
273
+ "fuori",
274
+ "furono",
275
+ "futuro",
276
+ "generale",
277
+ "gente",
278
+ "gia",
279
+ "giacche",
280
+ "giorni",
281
+ "giorno",
282
+ "giu",
283
+ "già",
284
+ "giã",
285
+ "gli",
286
+ "gliela",
287
+ "gliele",
288
+ "glieli",
289
+ "glielo",
290
+ "gliene",
291
+ "governo",
292
+ "grande",
293
+ "grazie",
294
+ "gruppo",
295
+ "ha",
296
+ "haha",
297
+ "hai",
298
+ "hanno",
299
+ "ho",
300
+ "i",
301
+ "ie",
302
+ "ieri",
303
+ "il",
304
+ "improvviso",
305
+ "in",
306
+ "inc",
307
+ "indietro",
308
+ "infatti",
309
+ "inoltre",
310
+ "insieme",
311
+ "intanto",
312
+ "intorno",
313
+ "invece",
314
+ "io",
315
+ "l",
316
+ "la",
317
+ "lasciato",
318
+ "lato",
319
+ "lavoro",
320
+ "le",
321
+ "lei",
322
+ "li",
323
+ "lo",
324
+ "lontano",
325
+ "loro",
326
+ "lui",
327
+ "lungo",
328
+ "luogo",
329
+ "là",
330
+ "lã",
331
+ "ma",
332
+ "macche",
333
+ "magari",
334
+ "maggior",
335
+ "mai",
336
+ "male",
337
+ "malgrado",
338
+ "malissimo",
339
+ "mancanza",
340
+ "marche",
341
+ "me",
342
+ "medesimo",
343
+ "mediante",
344
+ "meglio",
345
+ "meno",
346
+ "mentre",
347
+ "mesi",
348
+ "mezzo",
349
+ "mi",
350
+ "mia",
351
+ "mie",
352
+ "miei",
353
+ "mila",
354
+ "miliardi",
355
+ "milioni",
356
+ "minimi",
357
+ "ministro",
358
+ "mio",
359
+ "modo",
360
+ "molta",
361
+ "molti",
362
+ "moltissimo",
363
+ "molto",
364
+ "momento",
365
+ "mondo",
366
+ "mosto",
367
+ "nazionale",
368
+ "ne",
369
+ "negl",
370
+ "negli",
371
+ "nei",
372
+ "nel",
373
+ "nell",
374
+ "nella",
375
+ "nelle",
376
+ "nello",
377
+ "nemmeno",
378
+ "neppure",
379
+ "nessun",
380
+ "nessuna",
381
+ "nessuno",
382
+ "niente",
383
+ "no",
384
+ "noi",
385
+ "nome",
386
+ "non",
387
+ "nondimeno",
388
+ "nonostante",
389
+ "nonsia",
390
+ "nostra",
391
+ "nostre",
392
+ "nostri",
393
+ "nostro",
394
+ "novanta",
395
+ "nove",
396
+ "nulla",
397
+ "nuovi",
398
+ "nuovo",
399
+ "o",
400
+ "od",
401
+ "oggi",
402
+ "ogni",
403
+ "ognuna",
404
+ "ognuno",
405
+ "oltre",
406
+ "oppure",
407
+ "ora",
408
+ "ore",
409
+ "osi",
410
+ "ossia",
411
+ "ottanta",
412
+ "otto",
413
+ "paese",
414
+ "parecchi",
415
+ "parecchie",
416
+ "parecchio",
417
+ "parte",
418
+ "partendo",
419
+ "peccato",
420
+ "peggio",
421
+ "per",
422
+ "perche",
423
+ "perchã¨",
424
+ "perchè",
425
+ "perché",
426
+ "percio",
427
+ "perciã²",
428
+ "perciò",
429
+ "perfino",
430
+ "pero",
431
+ "persino",
432
+ "persone",
433
+ "perã²",
434
+ "però",
435
+ "piedi",
436
+ "pieno",
437
+ "piglia",
438
+ "piu",
439
+ "piuttosto",
440
+ "piã¹",
441
+ "più",
442
+ "po",
443
+ "pochissimo",
444
+ "poco",
445
+ "poi",
446
+ "poiche",
447
+ "possa",
448
+ "possedere",
449
+ "posteriore",
450
+ "posto",
451
+ "potrebbe",
452
+ "preferibilmente",
453
+ "presa",
454
+ "press",
455
+ "prima",
456
+ "primo",
457
+ "principalmente",
458
+ "probabilmente",
459
+ "promesso",
460
+ "proprio",
461
+ "puo",
462
+ "pure",
463
+ "purtroppo",
464
+ "puã²",
465
+ "può",
466
+ "qua",
467
+ "qualche",
468
+ "qualcosa",
469
+ "qualcuna",
470
+ "qualcuno",
471
+ "quale",
472
+ "quali",
473
+ "qualunque",
474
+ "quando",
475
+ "quanta",
476
+ "quante",
477
+ "quanti",
478
+ "quanto",
479
+ "quantunque",
480
+ "quarto",
481
+ "quasi",
482
+ "quattro",
483
+ "quel",
484
+ "quella",
485
+ "quelle",
486
+ "quelli",
487
+ "quello",
488
+ "quest",
489
+ "questa",
490
+ "queste",
491
+ "questi",
492
+ "questo",
493
+ "qui",
494
+ "quindi",
495
+ "quinto",
496
+ "realmente",
497
+ "recente",
498
+ "recentemente",
499
+ "registrazione",
500
+ "relativo",
501
+ "riecco",
502
+ "rispetto",
503
+ "salvo",
504
+ "sara",
505
+ "sarai",
506
+ "saranno",
507
+ "sarebbe",
508
+ "sarebbero",
509
+ "sarei",
510
+ "saremmo",
511
+ "saremo",
512
+ "sareste",
513
+ "saresti",
514
+ "sarete",
515
+ "sarà",
516
+ "sarã",
517
+ "sarò",
518
+ "scola",
519
+ "scopo",
520
+ "scorso",
521
+ "se",
522
+ "secondo",
523
+ "seguente",
524
+ "seguito",
525
+ "sei",
526
+ "sembra",
527
+ "sembrare",
528
+ "sembrato",
529
+ "sembrava",
530
+ "sembri",
531
+ "sempre",
532
+ "senza",
533
+ "sette",
534
+ "si",
535
+ "sia",
536
+ "siamo",
537
+ "siano",
538
+ "siate",
539
+ "siete",
540
+ "sig",
541
+ "solito",
542
+ "solo",
543
+ "soltanto",
544
+ "sono",
545
+ "sopra",
546
+ "soprattutto",
547
+ "sotto",
548
+ "spesso",
549
+ "srl",
550
+ "sta",
551
+ "stai",
552
+ "stando",
553
+ "stanno",
554
+ "starai",
555
+ "staranno",
556
+ "starebbe",
557
+ "starebbero",
558
+ "starei",
559
+ "staremmo",
560
+ "staremo",
561
+ "stareste",
562
+ "staresti",
563
+ "starete",
564
+ "starà",
565
+ "starò",
566
+ "stata",
567
+ "state",
568
+ "stati",
569
+ "stato",
570
+ "stava",
571
+ "stavamo",
572
+ "stavano",
573
+ "stavate",
574
+ "stavi",
575
+ "stavo",
576
+ "stemmo",
577
+ "stessa",
578
+ "stesse",
579
+ "stessero",
580
+ "stessi",
581
+ "stessimo",
582
+ "stesso",
583
+ "steste",
584
+ "stesti",
585
+ "stette",
586
+ "stettero",
587
+ "stetti",
588
+ "stia",
589
+ "stiamo",
590
+ "stiano",
591
+ "stiate",
592
+ "sto",
593
+ "su",
594
+ "sua",
595
+ "subito",
596
+ "successivamente",
597
+ "successivo",
598
+ "sue",
599
+ "sugl",
600
+ "sugli",
601
+ "sui",
602
+ "sul",
603
+ "sull",
604
+ "sulla",
605
+ "sulle",
606
+ "sullo",
607
+ "suo",
608
+ "suoi",
609
+ "tale",
610
+ "tali",
611
+ "talvolta",
612
+ "tanto",
613
+ "te",
614
+ "tempo",
615
+ "terzo",
616
+ "th",
617
+ "ti",
618
+ "titolo",
619
+ "torino",
620
+ "tra",
621
+ "tranne",
622
+ "tre",
623
+ "trenta",
624
+ "triplo",
625
+ "troppo",
626
+ "trovato",
627
+ "tu",
628
+ "tua",
629
+ "tue",
630
+ "tuo",
631
+ "tuoi",
632
+ "tutta",
633
+ "tuttavia",
634
+ "tutte",
635
+ "tutti",
636
+ "tutto",
637
+ "uguali",
638
+ "ulteriore",
639
+ "ultimo",
640
+ "un",
641
+ "una",
642
+ "uno",
643
+ "uomo",
644
+ "va",
645
+ "vai",
646
+ "vale",
647
+ "vari",
648
+ "varia",
649
+ "varie",
650
+ "vario",
651
+ "verso",
652
+ "vi",
653
+ "via",
654
+ "vicino",
655
+ "visto",
656
+ "vita",
657
+ "voi",
658
+ "volta",
659
+ "volte",
660
+ "vostra",
661
+ "vostre",
662
+ "vostri",
663
+ "vostro",
664
+ "ã¨",
665
+ "è",
666
+ ]
667
+ end
668
+ end
669
+ end
670
+ end
@@ -0,0 +1,10 @@
1
+ class Keyphrase
2
+ module Stoplist
3
+ class Jav
4
+ def self.stopwords
5
+ @@stopwords ||= [
6
+ ]
7
+ end
8
+ end
9
+ end
10
+ end