scylla 0.7.0 → 0.7.5
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- data/lib/scylla/classifier.rb +3 -4
- data/lib/scylla/generator.rb +4 -7
- data/lib/scylla/lms/afrikaans.lm +280 -280
- data/lib/scylla/lms/arabic.lm +225 -225
- data/lib/scylla/lms/bulgarian.lm +208 -208
- data/lib/scylla/lms/catalan.lm +212 -212
- data/lib/scylla/lms/chinese.lm +201 -201
- data/lib/scylla/lms/danish.lm +155 -155
- data/lib/scylla/lms/english.lm +207 -207
- data/lib/scylla/lms/finnish.lm +259 -259
- data/lib/scylla/lms/french.lm +203 -203
- data/lib/scylla/lms/german.lm +280 -280
- data/lib/scylla/lms/greek.lm +276 -276
- data/lib/scylla/lms/hebrew.lm +170 -170
- data/lib/scylla/lms/hindi.lm +241 -241
- data/lib/scylla/lms/icelandic.lm +264 -264
- data/lib/scylla/lms/indonesian.lm +272 -272
- data/lib/scylla/lms/italian.lm +283 -283
- data/lib/scylla/lms/japanese.lm +105 -105
- data/lib/scylla/lms/korean.lm +400 -400
- data/lib/scylla/lms/norwegian.lm +235 -235
- data/lib/scylla/lms/polish.lm +264 -264
- data/lib/scylla/lms/portuguese.lm +269 -269
- data/lib/scylla/lms/romanian.lm +278 -278
- data/lib/scylla/lms/russian.lm +127 -127
- data/lib/scylla/lms/slovak.lm +281 -281
- data/lib/scylla/lms/slovenian.lm +276 -276
- data/lib/scylla/lms/spanish.lm +190 -190
- data/lib/scylla/lms/swedish.lm +195 -195
- data/lib/scylla/lms/tagalog.lm +282 -282
- data/lib/scylla/lms/thai.lm +257 -257
- data/lib/scylla/lms/turkish.lm +300 -300
- data/lib/scylla/lms/vietnamese.lm +277 -277
- data/lib/scylla/lms/welsh.lm +271 -271
- data/scylla.gemspec +3 -22
- data/source_texts/korean.txt +219 -134
- metadata +15 -14
- data/scylla-0.6.0.gem +0 -0
@@ -1,4 +1,4 @@
|
|
1
|
-
_
|
1
|
+
_ 1518
|
2
2
|
a 445
|
3
3
|
o 425
|
4
4
|
e 409
|
@@ -9,392 +9,392 @@ t 203
|
|
9
9
|
d 195
|
10
10
|
n 193
|
11
11
|
m 162
|
12
|
-
o_
|
12
|
+
o_ 161
|
13
13
|
u 144
|
14
14
|
c 130
|
15
|
-
a_
|
16
|
-
e_
|
15
|
+
a_ 127
|
16
|
+
e_ 123
|
17
|
+
s_ 106
|
17
18
|
p 100
|
18
|
-
|
19
|
-
_d 96
|
19
|
+
_d 100
|
20
20
|
l 94
|
21
21
|
de 77
|
22
|
+
_a 71
|
22
23
|
os 67
|
23
|
-
_a 66
|
24
24
|
es 65
|
25
25
|
, 62
|
26
|
+
,_ 62
|
26
27
|
do 61
|
27
28
|
ra 60
|
29
|
+
_p 60
|
28
30
|
nt 59
|
29
|
-
|
30
|
-
|
31
|
-
|
31
|
+
_de 56
|
32
|
+
os_ 51
|
33
|
+
de_ 50
|
32
34
|
v 49
|
33
35
|
re 48
|
34
|
-
os_ 48
|
35
36
|
to 47
|
36
37
|
ar 46
|
37
|
-
or 45
|
38
38
|
ta 45
|
39
|
+
_s 45
|
40
|
+
_c 45
|
41
|
+
or 45
|
39
42
|
. 45
|
40
|
-
de_ 44
|
41
|
-
en 44
|
42
43
|
te 44
|
44
|
+
en 43
|
43
45
|
g 43
|
44
|
-
_c 42
|
45
46
|
co 42
|
46
|
-
|
47
|
+
_m 41
|
48
|
+
_de_ 40
|
47
49
|
er 39
|
48
|
-
|
50
|
+
do_ 39
|
51
|
+
_n 39
|
52
|
+
_e 39
|
49
53
|
ri 38
|
50
|
-
|
54
|
+
f 38
|
51
55
|
se 37
|
52
|
-
|
53
|
-
|
54
|
-
_n 36
|
55
|
-
do_ 36
|
56
|
-
_e 36
|
56
|
+
as 37
|
57
|
+
m_ 37
|
57
58
|
da 36
|
59
|
+
b 36
|
60
|
+
r_ 36
|
58
61
|
ad 35
|
59
|
-
|
60
|
-
r_ 35
|
62
|
+
_t 34
|
61
63
|
ma 34
|
62
|
-
|
64
|
+
q 33
|
63
65
|
st 33
|
64
66
|
qu 33
|
65
|
-
q 33
|
66
|
-
� 32
|
67
|
-
� 32
|
68
67
|
no 32
|
68
|
+
� 32
|
69
|
+
_o 32
|
69
70
|
�o 32
|
70
|
-
|
71
|
-
|
71
|
+
� 32
|
72
|
+
._ 31
|
72
73
|
ia 30
|
74
|
+
_co 30
|
73
75
|
is 30
|
74
|
-
_co 29
|
75
76
|
an 29
|
76
|
-
__ 28
|
77
77
|
me 28
|
78
|
-
ue 28
|
79
78
|
pa 28
|
80
|
-
|
81
|
-
|
79
|
+
ue 28
|
80
|
+
�o_ 27
|
82
81
|
h 27
|
83
82
|
on 27
|
84
83
|
io 27
|
85
|
-
|
86
|
-
|
84
|
+
in 27
|
85
|
+
_qu 27
|
86
|
+
_q 27
|
87
|
+
al 27
|
87
88
|
ti 26
|
89
|
+
_se 26
|
88
90
|
am 26
|
91
|
+
que 26
|
89
92
|
nte 26
|
90
93
|
_do 25
|
91
|
-
om 25
|
92
94
|
ent 25
|
93
|
-
|
94
|
-
_qu 24
|
95
|
-
_q 24
|
96
|
-
em 24
|
95
|
+
_f 25
|
97
96
|
po 24
|
98
|
-
|
99
|
-
|
100
|
-
|
97
|
+
_a_ 24
|
98
|
+
_que 24
|
99
|
+
om 24
|
100
|
+
ca 24
|
101
|
+
em 22
|
102
|
+
u_ 21
|
103
|
+
ra_ 21
|
104
|
+
es_ 21
|
101
105
|
� 21
|
102
|
-
|
106
|
+
_pa 21
|
103
107
|
ci 21
|
104
|
-
|
105
|
-
ei 20
|
108
|
+
que_ 20
|
106
109
|
ec 20
|
107
|
-
|
108
|
-
|
109
|
-
|
110
|
+
as_ 20
|
111
|
+
_que_ 20
|
112
|
+
to_ 20
|
113
|
+
ue_ 20
|
110
114
|
ic 19
|
111
|
-
|
112
|
-
|
115
|
+
o, 19
|
116
|
+
ei 19
|
117
|
+
tr 19
|
118
|
+
_r 19
|
119
|
+
_no 19
|
120
|
+
o,_ 19
|
113
121
|
na 18
|
114
|
-
|
122
|
+
ado 18
|
115
123
|
a� 18
|
124
|
+
ce 18
|
116
125
|
ou 18
|
117
126
|
ss 18
|
118
|
-
|
119
|
-
ue_ 18
|
120
|
-
que_ 18
|
121
|
-
ce 18
|
122
|
-
ado 18
|
123
|
-
_do_ 17
|
127
|
+
te_ 17
|
124
128
|
id 17
|
129
|
+
_po 17
|
125
130
|
nd 17
|
126
|
-
par 17
|
127
|
-
si 17
|
128
|
-
_r 17
|
129
|
-
mi 17
|
130
131
|
nto 17
|
132
|
+
_do_ 17
|
131
133
|
li 17
|
132
|
-
|
133
|
-
|
134
|
-
|
134
|
+
si 17
|
135
|
+
mi 17
|
136
|
+
_re 17
|
137
|
+
par 17
|
138
|
+
_o_ 16
|
139
|
+
pr 16
|
135
140
|
um 16
|
141
|
+
_da 16
|
142
|
+
� 16
|
143
|
+
em_ 16
|
144
|
+
s,_ 16
|
136
145
|
S 16
|
137
|
-
im 16
|
138
146
|
men 16
|
139
|
-
|
147
|
+
im 16
|
140
148
|
s, 16
|
141
|
-
|
142
|
-
o,_ 16
|
143
|
-
_da 16
|
144
|
-
em_ 16
|
145
|
-
it 15
|
149
|
+
_e_ 15
|
146
150
|
rt 15
|
151
|
+
no_ 15
|
147
152
|
el 15
|
148
153
|
mo 15
|
149
|
-
sa 15
|
150
154
|
res 15
|
151
155
|
� 15
|
152
|
-
|
153
|
-
|
156
|
+
it 15
|
157
|
+
_par 15
|
154
158
|
da_ 14
|
155
|
-
ro 14
|
156
159
|
so 14
|
157
|
-
|
160
|
+
ant 14
|
161
|
+
ro 14
|
162
|
+
ve 14
|
163
|
+
ma_ 14
|
164
|
+
sa 14
|
158
165
|
��o 14
|
159
|
-
ac 14
|
160
|
-
.. 14
|
161
166
|
�� 14
|
162
|
-
|
163
|
-
|
164
|
-
|
165
|
-
ve 14
|
166
|
-
ant 14
|
167
|
-
� 13
|
167
|
+
ara 14
|
168
|
+
.. 14
|
169
|
+
ont 13
|
168
170
|
la 13
|
169
|
-
|
170
|
-
|
171
|
-
|
171
|
+
_i 13
|
172
|
+
_S 13
|
173
|
+
� 13
|
172
174
|
dos 13
|
173
|
-
|
174
|
-
|
175
|
-
ir 13
|
176
|
-
con 13
|
177
|
-
_� 13
|
178
|
-
ai 13
|
179
|
-
no_ 13
|
175
|
+
dos_ 13
|
176
|
+
fo 13
|
180
177
|
��o_ 13
|
178
|
+
ac 13
|
179
|
+
il 13
|
180
|
+
ment 13
|
181
181
|
com 13
|
182
|
-
|
183
|
-
|
184
|
-
|
182
|
+
con 13
|
183
|
+
_� 13
|
184
|
+
ir 13
|
185
|
+
lh 12
|
185
186
|
tu 12
|
186
|
-
ho 12
|
187
|
-
sta 12
|
188
187
|
est 12
|
189
|
-
|
190
|
-
|
188
|
+
ai 12
|
189
|
+
_b 12
|
190
|
+
_l 12
|
191
|
+
pe 12
|
191
192
|
uma 12
|
193
|
+
ia_ 12
|
194
|
+
ou_ 12
|
195
|
+
di 12
|
192
196
|
_com 12
|
197
|
+
uma_ 12
|
193
198
|
� 12
|
194
|
-
|
195
|
-
|
196
|
-
|
197
|
-
|
199
|
+
ho 12
|
200
|
+
nte_ 12
|
201
|
+
sta 12
|
202
|
+
at 11
|
203
|
+
ente 11
|
198
204
|
_u 11
|
199
|
-
|
200
|
-
|
201
|
-
I 11
|
205
|
+
am_ 11
|
206
|
+
rio 11
|
202
207
|
er_ 11
|
203
|
-
|
204
|
-
|
208
|
+
I 11
|
209
|
+
tos 11
|
210
|
+
_pr 11
|
211
|
+
_um 11
|
212
|
+
ni 11
|
205
213
|
vo 11
|
206
|
-
|
214
|
+
gu 11
|
215
|
+
ar_ 11
|
216
|
+
tra 11
|
217
|
+
_fo 11
|
207
218
|
l_ 11
|
208
|
-
ni 11
|
209
|
-
rio 11
|
210
|
-
_l 11
|
211
219
|
or_ 11
|
212
|
-
|
213
|
-
tos 11
|
214
|
-
ol 10
|
215
|
-
_pr 10
|
216
|
-
nto_ 10
|
220
|
+
ara_ 10
|
217
221
|
E 10
|
218
|
-
|
222
|
+
ica 10
|
223
|
+
nto_ 10
|
224
|
+
nc 10
|
225
|
+
_no_ 10
|
219
226
|
x 10
|
220
|
-
ia_ 10
|
221
|
-
ua 10
|
222
|
-
nte_ 10
|
223
227
|
ria 10
|
228
|
+
mu 10
|
224
229
|
gr 10
|
225
|
-
a��o 10
|
226
|
-
lo 10
|
227
|
-
ica 10
|
228
|
-
nc 10
|
229
|
-
_uma_ 10
|
230
|
-
ar_ 10
|
231
|
-
ou_ 10
|
232
230
|
a�� 10
|
231
|
+
_uma_ 10
|
232
|
+
ua 10
|
233
|
+
vi 10
|
234
|
+
ist 10
|
233
235
|
va 10
|
236
|
+
ol 10
|
234
237
|
_uma 10
|
238
|
+
lo 10
|
235
239
|
dad 10
|
236
|
-
|
237
|
-
|
238
|
-
� 9
|
239
|
-
le 9
|
240
|
-
ida 9
|
241
|
-
sen 9
|
242
|
-
mp 9
|
243
|
-
ui 9
|
244
|
-
ne 9
|
245
|
-
des 9
|
246
|
-
para 9
|
247
|
-
ara_ 9
|
248
|
-
iv 9
|
249
|
-
_ta 9
|
240
|
+
a��o 10
|
241
|
+
_ma 10
|
250
242
|
rec 9
|
243
|
+
iv 9
|
244
|
+
le 9
|
251
245
|
�e 9
|
252
|
-
|
246
|
+
des 9
|
247
|
+
para_ 9
|
248
|
+
_con 9
|
249
|
+
sen 9
|
250
|
+
ado_ 9
|
251
|
+
_ap 9
|
252
|
+
�es_ 9
|
253
253
|
�es 9
|
254
|
-
|
255
|
-
ul 9
|
254
|
+
ida 9
|
256
255
|
a��o_ 9
|
257
|
-
|
258
|
-
|
259
|
-
|
256
|
+
ap 9
|
257
|
+
_mi 9
|
258
|
+
_para 9
|
259
|
+
eg 9
|
260
260
|
ct 9
|
261
|
+
ul 9
|
262
|
+
_na 9
|
263
|
+
A 9
|
261
264
|
�a 9
|
262
|
-
|
263
|
-
|
264
|
-
|
265
|
-
|
266
|
-
|
267
|
-
|
268
|
-
|
269
|
-
|
270
|
-
_mu 8
|
271
|
-
rr 8
|
272
|
-
omo 8
|
273
|
-
ed 8
|
274
|
-
ade 8
|
275
|
-
_con 8
|
276
|
-
io_ 8
|
277
|
-
_no_ 8
|
278
|
-
tado 8
|
279
|
-
cont 8
|
265
|
+
para 9
|
266
|
+
_ta 9
|
267
|
+
ne 9
|
268
|
+
ui 9
|
269
|
+
� 9
|
270
|
+
mp 9
|
271
|
+
ba 8
|
272
|
+
fi 8
|
280
273
|
C 8
|
281
|
-
|
282
|
-
gi 8
|
283
|
-
ns 8
|
284
|
-
_na 8
|
285
|
-
ime 8
|
286
|
-
oc 8
|
274
|
+
_es 8
|
287
275
|
_me 8
|
288
|
-
|
276
|
+
mo_ 8
|
289
277
|
_os 8
|
290
|
-
|
291
|
-
|
278
|
+
z 8
|
279
|
+
oc 8
|
280
|
+
_pe 8
|
281
|
+
ime 8
|
282
|
+
tado 8
|
283
|
+
gra 8
|
284
|
+
tiv 8
|
285
|
+
os,_ 8
|
286
|
+
ter 8
|
287
|
+
ade 8
|
288
|
+
ente_ 8
|
289
|
+
ns 8
|
290
|
+
tes 8
|
291
|
+
nta 8
|
292
|
+
_v 8
|
293
|
+
tad 8
|
292
294
|
e, 8
|
295
|
+
io_ 8
|
296
|
+
os, 8
|
297
|
+
ur 8
|
298
|
+
gi 8
|
299
|
+
e,_ 8
|
300
|
+
_mu 8
|
293
301
|
_da_ 8
|
302
|
+
_os_ 8
|
303
|
+
rr 8
|
294
304
|
ab 8
|
295
|
-
|
296
|
-
|
297
|
-
|
298
|
-
|
299
|
-
|
300
|
-
|
301
|
-
br 7
|
302
|
-
un 7
|
303
|
-
ece 7
|
304
|
-
eu 7
|
305
|
-
cia 7
|
305
|
+
cont 8
|
306
|
+
ov 8
|
307
|
+
is_ 8
|
308
|
+
omo 7
|
309
|
+
� 7
|
310
|
+
j 7
|
306
311
|
ito 7
|
307
312
|
ndo 7
|
308
|
-
|
309
|
-
sc 7
|
310
|
-
ort 7
|
311
|
-
is_ 7
|
312
|
-
mento 7
|
313
|
-
va_ 7
|
314
|
-
mo_ 7
|
315
|
-
ado_ 7
|
316
|
-
_pe 7
|
317
|
-
das 7
|
318
|
-
_te 7
|
319
|
-
idad 7
|
313
|
+
_M 7
|
320
314
|
ut 7
|
321
|
-
|
322
|
-
|
315
|
+
das_ 7
|
316
|
+
al_ 7
|
317
|
+
idad 7
|
318
|
+
... 7
|
319
|
+
.._ 7
|
320
|
+
tar 7
|
321
|
+
va_ 7
|
322
|
+
str 7
|
323
|
+
_� 7
|
324
|
+
tan 7
|
325
|
+
_E 7
|
326
|
+
br 7
|
327
|
+
un 7
|
328
|
+
_des 7
|
329
|
+
_das 7
|
330
|
+
ndo_ 7
|
331
|
+
_in 7
|
323
332
|
dade 7
|
324
|
-
|
325
|
-
|
326
|
-
|
333
|
+
..._ 7
|
334
|
+
das 7
|
335
|
+
nos 7
|
336
|
+
ort 7
|
337
|
+
mento 7
|
338
|
+
cia 7
|
339
|
+
ece 7
|
340
|
+
R 7
|
341
|
+
min 7
|
327
342
|
M 7
|
328
343
|
a, 7
|
329
|
-
|
330
|
-
|
344
|
+
a,_ 7
|
345
|
+
se_ 7
|
346
|
+
ento 7
|
331
347
|
_das_ 7
|
332
|
-
R 7
|
333
|
-
dep 7
|
334
|
-
tan 7
|
335
|
-
� 7
|
336
|
-
nos 7
|
337
348
|
av 7
|
338
|
-
|
339
|
-
|
340
|
-
|
341
|
-
... 7
|
342
|
-
�es_ 7
|
343
|
-
das_ 7
|
349
|
+
eu 7
|
350
|
+
ed 7
|
351
|
+
_te 7
|
344
352
|
ess 7
|
345
353
|
_em 7
|
346
|
-
|
347
|
-
|
348
|
-
|
349
|
-
|
350
|
-
|
351
|
-
|
352
|
-
por 6
|
353
|
-
iment 6
|
354
|
-
se_ 6
|
354
|
+
omo_ 7
|
355
|
+
D 6
|
356
|
+
_cont 6
|
357
|
+
be 6
|
358
|
+
_ao 6
|
359
|
+
como 6
|
355
360
|
eri 6
|
356
|
-
_des 6
|
357
|
-
pu 6
|
358
|
-
_muit 6
|
359
|
-
_dep 6
|
360
|
-
ao 6
|
361
361
|
tic 6
|
362
|
-
|
363
|
-
|
364
|
-
|
365
|
-
|
366
|
-
rn 6
|
362
|
+
tes_ 6
|
363
|
+
_nos 6
|
364
|
+
ep 6
|
365
|
+
tos_ 6
|
367
366
|
esta 6
|
368
|
-
|
369
|
-
|
370
|
-
|
371
|
-
T 6
|
372
|
-
mui 6
|
373
|
-
�ri 6
|
374
|
-
ntes 6
|
375
|
-
e,_ 6
|
376
|
-
ios 6
|
377
|
-
- 6
|
378
|
-
_em_ 6
|
379
|
-
ram 6
|
380
|
-
�a_ 6
|
381
|
-
anto 6
|
367
|
+
ig 6
|
368
|
+
eu_ 6
|
369
|
+
nh 6
|
382
370
|
ser 6
|
383
|
-
|
371
|
+
�_ 6
|
372
|
+
�_ 6
|
373
|
+
�rio 6
|
374
|
+
o. 6
|
384
375
|
ori 6
|
385
|
-
|
386
|
-
|
387
|
-
|
388
|
-
|
389
|
-
eu_ 6
|
390
|
-
af 6
|
391
|
-
ect 6
|
392
|
-
lho 6
|
376
|
+
�a_ 6
|
377
|
+
uit 6
|
378
|
+
rn 6
|
379
|
+
_mui 6
|
393
380
|
tor 6
|
394
|
-
nh 6
|
395
|
-
imen 6
|
396
381
|
us 6
|
397
|
-
|
398
|
-
|
399
|
-
|
382
|
+
nos_ 6
|
383
|
+
�r 6
|
384
|
+
T 6
|
385
|
+
_C 6
|
400
386
|
cor 6
|
387
|
+
od 6
|
388
|
+
�ri 6
|
389
|
+
_�_ 6
|
390
|
+
_tr 6
|
391
|
+
_em_ 6
|
392
|
+
ome 6
|
393
|
+
ria_ 6
|
394
|
+
ios 6
|
395
|
+
muit 6
|
396
|
+
_por 6
|
397
|
+
ntes 6
|
398
|
+
P 6
|
399
|
+
iment 6
|
400
|
+
_como 6
|