rsemantic 0.1.4 → 0.2.0
Sign up to get free protection for your applications and to get access to all the features.
- data/README.md +6 -3
- data/TODO.txt +5 -2
- data/lib/semantic/parser.rb +5 -3
- data/lib/semantic/transform/tf_idf_transform.rb +2 -5
- data/lib/semantic/vector_space/builder.rb +1 -1
- data/lib/semantic/vector_space/model.rb +9 -3
- data/lib/semantic/version.rb +2 -2
- data/lib/tasks/rspec.rake +5 -1
- data/resources/ar.stop +162 -0
- data/resources/ca.stop +124 -0
- data/resources/cs.stop +136 -0
- data/resources/da.stop +99 -0
- data/resources/de.stop +996 -0
- data/resources/el.stop +77 -0
- data/resources/{english.stop → en.stop} +0 -0
- data/resources/es.stop +176 -0
- data/resources/fi.stop +747 -0
- data/resources/fr.stop +124 -0
- data/resources/hu.stop +33 -0
- data/resources/id.stop +329 -0
- data/resources/it.stop +132 -0
- data/resources/ja.stop +44 -0
- data/resources/nl.stop +46 -0
- data/resources/no.stop +117 -0
- data/resources/pl.stop +138 -0
- data/resources/pt.stop +145 -0
- data/resources/ru.stop +421 -0
- data/resources/sv.stop +386 -0
- data/resources/tr.stop +112 -0
- metadata +24 -4
data/resources/pt.stop
ADDED
|
@@ -0,0 +1,145 @@
|
|
|
1
|
+
último
|
|
2
|
+
é
|
|
3
|
+
acerca
|
|
4
|
+
agora
|
|
5
|
+
algmas
|
|
6
|
+
alguns
|
|
7
|
+
ali
|
|
8
|
+
ambos
|
|
9
|
+
antes
|
|
10
|
+
apontar
|
|
11
|
+
aquela
|
|
12
|
+
aquelas
|
|
13
|
+
aquele
|
|
14
|
+
aqueles
|
|
15
|
+
aqui
|
|
16
|
+
atrás
|
|
17
|
+
bem
|
|
18
|
+
bom
|
|
19
|
+
cada
|
|
20
|
+
caminho
|
|
21
|
+
cima
|
|
22
|
+
com
|
|
23
|
+
como
|
|
24
|
+
comprido
|
|
25
|
+
conhecido
|
|
26
|
+
corrente
|
|
27
|
+
das
|
|
28
|
+
debaixo
|
|
29
|
+
dentro
|
|
30
|
+
desde
|
|
31
|
+
desligado
|
|
32
|
+
deve
|
|
33
|
+
devem
|
|
34
|
+
deverá
|
|
35
|
+
direita
|
|
36
|
+
diz
|
|
37
|
+
dizer
|
|
38
|
+
dois
|
|
39
|
+
dos
|
|
40
|
+
e
|
|
41
|
+
ela
|
|
42
|
+
ele
|
|
43
|
+
eles
|
|
44
|
+
em
|
|
45
|
+
enquanto
|
|
46
|
+
então
|
|
47
|
+
está
|
|
48
|
+
estão
|
|
49
|
+
estado
|
|
50
|
+
estar estará
|
|
51
|
+
este
|
|
52
|
+
estes
|
|
53
|
+
esteve
|
|
54
|
+
estive
|
|
55
|
+
estivemos
|
|
56
|
+
estiveram
|
|
57
|
+
eu
|
|
58
|
+
fará
|
|
59
|
+
faz
|
|
60
|
+
fazer
|
|
61
|
+
fazia
|
|
62
|
+
fez
|
|
63
|
+
fim
|
|
64
|
+
foi
|
|
65
|
+
fora
|
|
66
|
+
horas
|
|
67
|
+
iniciar
|
|
68
|
+
inicio
|
|
69
|
+
ir
|
|
70
|
+
irá
|
|
71
|
+
ista
|
|
72
|
+
iste
|
|
73
|
+
isto
|
|
74
|
+
ligado
|
|
75
|
+
maioria
|
|
76
|
+
maiorias
|
|
77
|
+
mais
|
|
78
|
+
mas
|
|
79
|
+
mesmo
|
|
80
|
+
meu
|
|
81
|
+
muito
|
|
82
|
+
muitos
|
|
83
|
+
nós
|
|
84
|
+
não
|
|
85
|
+
nome
|
|
86
|
+
nosso
|
|
87
|
+
novo
|
|
88
|
+
o
|
|
89
|
+
onde
|
|
90
|
+
os
|
|
91
|
+
ou
|
|
92
|
+
outro
|
|
93
|
+
para
|
|
94
|
+
parte
|
|
95
|
+
pegar
|
|
96
|
+
pelo
|
|
97
|
+
pessoas
|
|
98
|
+
pode
|
|
99
|
+
poderá podia
|
|
100
|
+
por
|
|
101
|
+
porque
|
|
102
|
+
povo
|
|
103
|
+
promeiro
|
|
104
|
+
quê
|
|
105
|
+
qual
|
|
106
|
+
qualquer
|
|
107
|
+
quando
|
|
108
|
+
quem
|
|
109
|
+
quieto
|
|
110
|
+
são
|
|
111
|
+
saber
|
|
112
|
+
sem
|
|
113
|
+
ser
|
|
114
|
+
seu
|
|
115
|
+
somente
|
|
116
|
+
têm
|
|
117
|
+
tal
|
|
118
|
+
também
|
|
119
|
+
tem
|
|
120
|
+
tempo
|
|
121
|
+
tenho
|
|
122
|
+
tentar
|
|
123
|
+
tentaram
|
|
124
|
+
tente
|
|
125
|
+
tentei
|
|
126
|
+
teu
|
|
127
|
+
teve
|
|
128
|
+
tipo
|
|
129
|
+
tive
|
|
130
|
+
todos
|
|
131
|
+
trabalhar
|
|
132
|
+
trabalho
|
|
133
|
+
tu
|
|
134
|
+
um
|
|
135
|
+
uma
|
|
136
|
+
umas
|
|
137
|
+
uns
|
|
138
|
+
usa
|
|
139
|
+
usar
|
|
140
|
+
valor
|
|
141
|
+
veja
|
|
142
|
+
ver
|
|
143
|
+
verdade
|
|
144
|
+
verdadeiro
|
|
145
|
+
você
|
data/resources/ru.stop
ADDED
|
@@ -0,0 +1,421 @@
|
|
|
1
|
+
а
|
|
2
|
+
е
|
|
3
|
+
и
|
|
4
|
+
ж
|
|
5
|
+
м
|
|
6
|
+
о
|
|
7
|
+
на
|
|
8
|
+
не
|
|
9
|
+
ни
|
|
10
|
+
об
|
|
11
|
+
но
|
|
12
|
+
он
|
|
13
|
+
мне
|
|
14
|
+
мои
|
|
15
|
+
мож
|
|
16
|
+
она
|
|
17
|
+
они
|
|
18
|
+
оно
|
|
19
|
+
мной
|
|
20
|
+
много
|
|
21
|
+
многочисленное
|
|
22
|
+
многочисленная
|
|
23
|
+
многочисленные
|
|
24
|
+
многочисленный
|
|
25
|
+
мною
|
|
26
|
+
мой
|
|
27
|
+
мог
|
|
28
|
+
могут
|
|
29
|
+
можно
|
|
30
|
+
может
|
|
31
|
+
можхо
|
|
32
|
+
мор
|
|
33
|
+
моя
|
|
34
|
+
моё
|
|
35
|
+
мочь
|
|
36
|
+
над
|
|
37
|
+
нее
|
|
38
|
+
оба
|
|
39
|
+
нам
|
|
40
|
+
нем
|
|
41
|
+
нами
|
|
42
|
+
ними
|
|
43
|
+
мимо
|
|
44
|
+
немного
|
|
45
|
+
одной
|
|
46
|
+
одного
|
|
47
|
+
менее
|
|
48
|
+
однажды
|
|
49
|
+
однако
|
|
50
|
+
меня
|
|
51
|
+
нему
|
|
52
|
+
меньше
|
|
53
|
+
ней
|
|
54
|
+
наверху
|
|
55
|
+
него
|
|
56
|
+
ниже
|
|
57
|
+
мало
|
|
58
|
+
надо
|
|
59
|
+
один
|
|
60
|
+
одиннадцать
|
|
61
|
+
одиннадцатый
|
|
62
|
+
назад
|
|
63
|
+
наиболее
|
|
64
|
+
недавно
|
|
65
|
+
миллионов
|
|
66
|
+
недалеко
|
|
67
|
+
между
|
|
68
|
+
низко
|
|
69
|
+
меля
|
|
70
|
+
нельзя
|
|
71
|
+
нибудь
|
|
72
|
+
непрерывно
|
|
73
|
+
наконец
|
|
74
|
+
никогда
|
|
75
|
+
никуда
|
|
76
|
+
нас
|
|
77
|
+
наш
|
|
78
|
+
нет
|
|
79
|
+
нею
|
|
80
|
+
неё
|
|
81
|
+
них
|
|
82
|
+
мира
|
|
83
|
+
наша
|
|
84
|
+
наше
|
|
85
|
+
наши
|
|
86
|
+
ничего
|
|
87
|
+
начала
|
|
88
|
+
нередко
|
|
89
|
+
несколько
|
|
90
|
+
обычно
|
|
91
|
+
опять
|
|
92
|
+
около
|
|
93
|
+
мы
|
|
94
|
+
ну
|
|
95
|
+
нх
|
|
96
|
+
от
|
|
97
|
+
отовсюду
|
|
98
|
+
особенно
|
|
99
|
+
нужно
|
|
100
|
+
очень
|
|
101
|
+
отсюда
|
|
102
|
+
в
|
|
103
|
+
во
|
|
104
|
+
вон
|
|
105
|
+
вниз
|
|
106
|
+
внизу
|
|
107
|
+
вокруг
|
|
108
|
+
вот
|
|
109
|
+
восемнадцать
|
|
110
|
+
восемнадцатый
|
|
111
|
+
восемь
|
|
112
|
+
восьмой
|
|
113
|
+
вверх
|
|
114
|
+
вам
|
|
115
|
+
вами
|
|
116
|
+
важное
|
|
117
|
+
важная
|
|
118
|
+
важные
|
|
119
|
+
важный
|
|
120
|
+
вдали
|
|
121
|
+
везде
|
|
122
|
+
ведь
|
|
123
|
+
вас
|
|
124
|
+
ваш
|
|
125
|
+
ваша
|
|
126
|
+
ваше
|
|
127
|
+
ваши
|
|
128
|
+
впрочем
|
|
129
|
+
весь
|
|
130
|
+
вдруг
|
|
131
|
+
вы
|
|
132
|
+
все
|
|
133
|
+
второй
|
|
134
|
+
всем
|
|
135
|
+
всеми
|
|
136
|
+
времени
|
|
137
|
+
время
|
|
138
|
+
всему
|
|
139
|
+
всего
|
|
140
|
+
всегда
|
|
141
|
+
всех
|
|
142
|
+
всею
|
|
143
|
+
всю
|
|
144
|
+
вся
|
|
145
|
+
всё
|
|
146
|
+
всюду
|
|
147
|
+
г
|
|
148
|
+
год
|
|
149
|
+
говорил
|
|
150
|
+
говорит
|
|
151
|
+
года
|
|
152
|
+
году
|
|
153
|
+
где
|
|
154
|
+
да
|
|
155
|
+
ее
|
|
156
|
+
за
|
|
157
|
+
из
|
|
158
|
+
ли
|
|
159
|
+
же
|
|
160
|
+
им
|
|
161
|
+
до
|
|
162
|
+
по
|
|
163
|
+
ими
|
|
164
|
+
под
|
|
165
|
+
иногда
|
|
166
|
+
довольно
|
|
167
|
+
именно
|
|
168
|
+
долго
|
|
169
|
+
позже
|
|
170
|
+
более
|
|
171
|
+
должно
|
|
172
|
+
пожалуйста
|
|
173
|
+
значит
|
|
174
|
+
иметь
|
|
175
|
+
больше
|
|
176
|
+
пока
|
|
177
|
+
ему
|
|
178
|
+
имя
|
|
179
|
+
пор
|
|
180
|
+
пора
|
|
181
|
+
потом
|
|
182
|
+
потому
|
|
183
|
+
после
|
|
184
|
+
почему
|
|
185
|
+
почти
|
|
186
|
+
посреди
|
|
187
|
+
ей
|
|
188
|
+
два
|
|
189
|
+
две
|
|
190
|
+
двенадцать
|
|
191
|
+
двенадцатый
|
|
192
|
+
двадцать
|
|
193
|
+
двадцатый
|
|
194
|
+
двух
|
|
195
|
+
его
|
|
196
|
+
дел
|
|
197
|
+
или
|
|
198
|
+
без
|
|
199
|
+
день
|
|
200
|
+
занят
|
|
201
|
+
занята
|
|
202
|
+
занято
|
|
203
|
+
заняты
|
|
204
|
+
действительно
|
|
205
|
+
давно
|
|
206
|
+
девятнадцать
|
|
207
|
+
девятнадцатый
|
|
208
|
+
девять
|
|
209
|
+
девятый
|
|
210
|
+
даже
|
|
211
|
+
алло
|
|
212
|
+
жизнь
|
|
213
|
+
далеко
|
|
214
|
+
близко
|
|
215
|
+
здесь
|
|
216
|
+
дальше
|
|
217
|
+
для
|
|
218
|
+
лет
|
|
219
|
+
зато
|
|
220
|
+
даром
|
|
221
|
+
первый
|
|
222
|
+
перед
|
|
223
|
+
затем
|
|
224
|
+
зачем
|
|
225
|
+
лишь
|
|
226
|
+
десять
|
|
227
|
+
десятый
|
|
228
|
+
ею
|
|
229
|
+
её
|
|
230
|
+
их
|
|
231
|
+
бы
|
|
232
|
+
еще
|
|
233
|
+
при
|
|
234
|
+
был
|
|
235
|
+
про
|
|
236
|
+
процентов
|
|
237
|
+
против
|
|
238
|
+
просто
|
|
239
|
+
бывает
|
|
240
|
+
бывь
|
|
241
|
+
если
|
|
242
|
+
люди
|
|
243
|
+
была
|
|
244
|
+
были
|
|
245
|
+
было
|
|
246
|
+
будем
|
|
247
|
+
будет
|
|
248
|
+
будете
|
|
249
|
+
будешь
|
|
250
|
+
прекрасно
|
|
251
|
+
буду
|
|
252
|
+
будь
|
|
253
|
+
будто
|
|
254
|
+
будут
|
|
255
|
+
ещё
|
|
256
|
+
пятнадцать
|
|
257
|
+
пятнадцатый
|
|
258
|
+
друго
|
|
259
|
+
другое
|
|
260
|
+
другой
|
|
261
|
+
другие
|
|
262
|
+
другая
|
|
263
|
+
других
|
|
264
|
+
есть
|
|
265
|
+
пять
|
|
266
|
+
быть
|
|
267
|
+
лучше
|
|
268
|
+
пятый
|
|
269
|
+
к
|
|
270
|
+
ком
|
|
271
|
+
конечно
|
|
272
|
+
кому
|
|
273
|
+
кого
|
|
274
|
+
когда
|
|
275
|
+
которой
|
|
276
|
+
которого
|
|
277
|
+
которая
|
|
278
|
+
которые
|
|
279
|
+
который
|
|
280
|
+
которых
|
|
281
|
+
кем
|
|
282
|
+
каждое
|
|
283
|
+
каждая
|
|
284
|
+
каждые
|
|
285
|
+
каждый
|
|
286
|
+
кажется
|
|
287
|
+
как
|
|
288
|
+
какой
|
|
289
|
+
какая
|
|
290
|
+
кто
|
|
291
|
+
кроме
|
|
292
|
+
куда
|
|
293
|
+
кругом
|
|
294
|
+
с
|
|
295
|
+
т
|
|
296
|
+
у
|
|
297
|
+
я
|
|
298
|
+
та
|
|
299
|
+
те
|
|
300
|
+
уж
|
|
301
|
+
со
|
|
302
|
+
то
|
|
303
|
+
том
|
|
304
|
+
снова
|
|
305
|
+
тому
|
|
306
|
+
совсем
|
|
307
|
+
того
|
|
308
|
+
тогда
|
|
309
|
+
тоже
|
|
310
|
+
собой
|
|
311
|
+
тобой
|
|
312
|
+
собою
|
|
313
|
+
тобою
|
|
314
|
+
сначала
|
|
315
|
+
только
|
|
316
|
+
уметь
|
|
317
|
+
тот
|
|
318
|
+
тою
|
|
319
|
+
хорошо
|
|
320
|
+
хотеть
|
|
321
|
+
хочешь
|
|
322
|
+
хоть
|
|
323
|
+
хотя
|
|
324
|
+
свое
|
|
325
|
+
свои
|
|
326
|
+
твой
|
|
327
|
+
своей
|
|
328
|
+
своего
|
|
329
|
+
своих
|
|
330
|
+
свою
|
|
331
|
+
твоя
|
|
332
|
+
твоё
|
|
333
|
+
раз
|
|
334
|
+
уже
|
|
335
|
+
сам
|
|
336
|
+
там
|
|
337
|
+
тем
|
|
338
|
+
чем
|
|
339
|
+
сама
|
|
340
|
+
сами
|
|
341
|
+
теми
|
|
342
|
+
само
|
|
343
|
+
рано
|
|
344
|
+
самом
|
|
345
|
+
самому
|
|
346
|
+
самой
|
|
347
|
+
самого
|
|
348
|
+
семнадцать
|
|
349
|
+
семнадцатый
|
|
350
|
+
самим
|
|
351
|
+
самими
|
|
352
|
+
самих
|
|
353
|
+
саму
|
|
354
|
+
семь
|
|
355
|
+
чему
|
|
356
|
+
раньше
|
|
357
|
+
сейчас
|
|
358
|
+
чего
|
|
359
|
+
сегодня
|
|
360
|
+
себе
|
|
361
|
+
тебе
|
|
362
|
+
сеаой
|
|
363
|
+
человек
|
|
364
|
+
разве
|
|
365
|
+
теперь
|
|
366
|
+
себя
|
|
367
|
+
тебя
|
|
368
|
+
седьмой
|
|
369
|
+
спасибо
|
|
370
|
+
слишком
|
|
371
|
+
так
|
|
372
|
+
такое
|
|
373
|
+
такой
|
|
374
|
+
такие
|
|
375
|
+
также
|
|
376
|
+
такая
|
|
377
|
+
сих
|
|
378
|
+
тех
|
|
379
|
+
чаще
|
|
380
|
+
четвертый
|
|
381
|
+
через
|
|
382
|
+
часто
|
|
383
|
+
шестой
|
|
384
|
+
шестнадцать
|
|
385
|
+
шестнадцатый
|
|
386
|
+
шесть
|
|
387
|
+
четыре
|
|
388
|
+
четырнадцать
|
|
389
|
+
четырнадцатый
|
|
390
|
+
сколько
|
|
391
|
+
сказал
|
|
392
|
+
сказала
|
|
393
|
+
сказать
|
|
394
|
+
ту
|
|
395
|
+
ты
|
|
396
|
+
три
|
|
397
|
+
эта
|
|
398
|
+
эти
|
|
399
|
+
что
|
|
400
|
+
это
|
|
401
|
+
чтоб
|
|
402
|
+
этом
|
|
403
|
+
этому
|
|
404
|
+
этой
|
|
405
|
+
этого
|
|
406
|
+
чтобы
|
|
407
|
+
этот
|
|
408
|
+
стал
|
|
409
|
+
туда
|
|
410
|
+
этим
|
|
411
|
+
этими
|
|
412
|
+
рядом
|
|
413
|
+
тринадцать
|
|
414
|
+
тринадцатый
|
|
415
|
+
этих
|
|
416
|
+
третий
|
|
417
|
+
тут
|
|
418
|
+
эту
|
|
419
|
+
суть
|
|
420
|
+
чуть
|
|
421
|
+
тысяч
|