scylla 0.7.0 → 0.7.5

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (38) hide show
  1. data/lib/scylla/classifier.rb +3 -4
  2. data/lib/scylla/generator.rb +4 -7
  3. data/lib/scylla/lms/afrikaans.lm +280 -280
  4. data/lib/scylla/lms/arabic.lm +225 -225
  5. data/lib/scylla/lms/bulgarian.lm +208 -208
  6. data/lib/scylla/lms/catalan.lm +212 -212
  7. data/lib/scylla/lms/chinese.lm +201 -201
  8. data/lib/scylla/lms/danish.lm +155 -155
  9. data/lib/scylla/lms/english.lm +207 -207
  10. data/lib/scylla/lms/finnish.lm +259 -259
  11. data/lib/scylla/lms/french.lm +203 -203
  12. data/lib/scylla/lms/german.lm +280 -280
  13. data/lib/scylla/lms/greek.lm +276 -276
  14. data/lib/scylla/lms/hebrew.lm +170 -170
  15. data/lib/scylla/lms/hindi.lm +241 -241
  16. data/lib/scylla/lms/icelandic.lm +264 -264
  17. data/lib/scylla/lms/indonesian.lm +272 -272
  18. data/lib/scylla/lms/italian.lm +283 -283
  19. data/lib/scylla/lms/japanese.lm +105 -105
  20. data/lib/scylla/lms/korean.lm +400 -400
  21. data/lib/scylla/lms/norwegian.lm +235 -235
  22. data/lib/scylla/lms/polish.lm +264 -264
  23. data/lib/scylla/lms/portuguese.lm +269 -269
  24. data/lib/scylla/lms/romanian.lm +278 -278
  25. data/lib/scylla/lms/russian.lm +127 -127
  26. data/lib/scylla/lms/slovak.lm +281 -281
  27. data/lib/scylla/lms/slovenian.lm +276 -276
  28. data/lib/scylla/lms/spanish.lm +190 -190
  29. data/lib/scylla/lms/swedish.lm +195 -195
  30. data/lib/scylla/lms/tagalog.lm +282 -282
  31. data/lib/scylla/lms/thai.lm +257 -257
  32. data/lib/scylla/lms/turkish.lm +300 -300
  33. data/lib/scylla/lms/vietnamese.lm +277 -277
  34. data/lib/scylla/lms/welsh.lm +271 -271
  35. data/scylla.gemspec +3 -22
  36. data/source_texts/korean.txt +219 -134
  37. metadata +15 -14
  38. data/scylla-0.6.0.gem +0 -0
@@ -1,4 +1,4 @@
1
- _ 4738
1
+ _ 5012
2
2
  e 1600
3
3
  r 1018
4
4
  n 1012
@@ -12,389 +12,389 @@ g 500
12
12
  k 479
13
13
  d 416
14
14
  m 398
15
+ r_ 323
15
16
  � 323
16
- r_ 306
17
- e_ 305
18
- t_ 294
17
+ e_ 321
18
+ t_ 306
19
+ n_ 292
19
20
  er 290
20
21
  en 287
21
22
  v 284
22
- n_ 277
23
- _s 216
23
+ _s 225
24
24
  et 214
25
+ g_ 214
25
26
  an 213
26
- g_ 205
27
27
  or 203
28
28
  � 194
29
29
  å 194
30
30
  de 191
31
- u 188
32
31
  f 188
32
+ u 188
33
+ er_ 175
33
34
  h 172
35
+ en_ 169
34
36
  p 166
35
- er_ 164
36
37
  te 162
37
38
  . 161
38
- re 160
39
- en_ 159
40
- _o 156
41
- _e 145
39
+ re 159
40
+ _o 158
41
+ ._ 152
42
+ _e 151
43
+ _h 148
42
44
  ar 145
43
- _h 143
44
45
  st 143
45
- et_ 138
46
- _d 135
46
+ et_ 142
47
+ _d 140
47
48
  , 134
48
- ,_ 130
49
+ ,_ 134
49
50
  in 130
50
51
  sk 129
51
- i_ 122
52
- _i 118
53
- ke 117
54
- ne 117
52
+ i_ 126
53
+ _i 121
55
54
  ng 117
56
- ti 110
55
+ ke 117
56
+ ne 116
57
+ _f 113
57
58
  le 110
59
+ ti 110
58
60
  om 109
59
- _f 109
60
61
  og 108
61
62
  _m 105
62
63
  me 105
63
64
  j 104
65
+ og_ 103
66
+ _og 103
64
67
  b 103
65
- _og 101
66
- og_ 100
68
+ _og_ 101
67
69
  la 99
68
- _og_ 97
69
- _de 95
70
- m_ 94
71
- _a 94
70
+ m_ 98
71
+ _a 97
72
+ _de 97
73
+ _t 96
72
74
  ha 94
73
75
  ei 93
76
+ å_ 93
77
+ �_ 93
74
78
  ø 92
75
79
  � 92
76
- �_ 91
77
- å_ 91
78
- a_ 88
79
- _t 88
80
+ a_ 89
80
81
  se 88
81
- _ha 85
82
+ _ha 87
83
+ _v 87
82
84
  el 84
83
- nd 84
84
85
  ge 84
85
86
  eg 84
86
87
  ri 84
87
- _v 84
88
+ nd 83
88
89
  tt 83
89
- ._ 82
90
+ _n 81
90
91
  is 80
91
92
  nn 80
93
+ _i_ 80
92
94
  y 79
93
95
  ta 79
96
+ _k 78
94
97
  av 78
95
- _i_ 78
96
- _n 77
98
+ om_ 77
97
99
  al 75
98
- om_ 74
100
+ _. 75
99
101
  il 74
100
102
  rs 74
101
- _k 74
102
- no 73
103
- l_ 72
103
+ l_ 73
104
+ no 72
105
+ d_ 71
106
+ _b 71
104
107
  on 71
105
- _b 70
106
- v_ 70
108
+ v_ 71
109
+ _._ 70
107
110
  _me 69
111
+ ar_ 69
108
112
  rt 69
109
- _. 68
110
- d_ 68
111
113
  ve 67
112
- ar_ 66
114
+ _, 66
115
+ _,_ 66
113
116
  va 65
114
117
  ing 63
115
- _, 62
116
- _p 60
118
+ _g 61
119
+ _p 61
117
120
  at 59
118
- _g 59
119
121
  det 59
120
- ll 58
122
+ ke_ 59
123
+ an_ 59
124
+ k_ 58
125
+ av_ 58
121
126
  fo 58
122
- _,_ 58
123
- ke_ 57
124
- av_ 57
127
+ ll 58
128
+ _er 57
125
129
  un 57
126
- k_ 56
127
- an_ 56
130
+ _av 57
131
+ _er_ 56
128
132
  ik 55
129
- _av 55
130
- _er 54
131
- so 54
132
- _l 54
133
133
  N 54
134
+ _l 54
135
+ so 53
136
+ _N 53
134
137
  li 53
135
- nor 52
136
138
  je 52
139
+ nor 52
137
140
  am 52
141
+ eg_ 51
138
142
  lan 51
139
- ns 50
140
- r� 50
143
+ ne_ 51
141
144
  ors 50
142
- _ti 50
143
- _er_ 50
144
145
  ed 50
145
- ne_ 49
146
- ter 49
147
- eg_ 49
146
+ r� 50
147
+ ns 50
148
+ _ti 50
148
149
  es 49
149
- D 48
150
- til 48
150
+ ter 49
151
151
  rsk 48
152
+ _av_ 48
153
+ D 48
152
154
  for 48
153
- nde 47
155
+ _D 48
156
+ til 48
157
+ te_ 47
158
+ _r 47
154
159
  and 47
155
- _av_ 47
156
160
  H 46
157
- _r 46
158
- ra 46
159
- it 46
161
+ _H 46
160
162
  ka 46
161
- _til 45
163
+ it 46
164
+ ra 46
165
+ nde 46
162
166
  ske 45
163
- _N 45
164
- te_ 44
167
+ _til 45
168
+ _no 44
169
+ det_ 44
165
170
  ga 44
171
+ _� 44
166
172
  orsk 44
167
- S 43
168
- som 43
169
- _so 43
170
- ko 43
173
+ _No 43
171
174
  na 43
175
+ ko 43
176
+ _fo 43
177
+ _so 43
178
+ som 43
172
179
  No 43
173
- Nor 42
174
- det_ 42
175
- _fo 42
176
- nge 42
180
+ S 43
177
181
  ste 42
182
+ nge 42
183
+ _Nor 42
184
+ Nor 42
185
+ som_ 42
186
+ il_ 42
178
187
  _som 41
179
- _no 41
180
- il_ 41
181
- som_ 40
188
+ _S 41
189
+ _som_ 41
190
+ 40
182
191
  tte 40
183
192
  p� 40
184
- rå 40
185
- _No 40
186
- _Nor 39
187
193
  ett 39
188
- _som_ 39
189
194
  nt 39
190
- ma 38
191
- rd 38
192
- ig 38
193
- _� 38
194
- em 38
195
+ _u 38
195
196
  på 38
196
197
  da 38
197
198
  kk 38
198
199
  _ei 38
199
- De 37
200
+ ig 38
201
+ em 38
202
+ ma 38
203
+ ør 37
204
+ _De 37
205
+ �r 37
206
+ _p� 37
207
+ _på 37
208
+ rd 37
209
+ _han 37
210
+ ed_ 37
200
211
  han 37
201
212
  sa 37
202
- _han 37
203
- ør 37
213
+ De 37
204
214
  ten 37
205
- �r 37
206
- _u 37
207
- ed_ 36
208
- _p� 36
215
+ vi 36
209
216
  gj 36
210
- norsk 36
217
+ re_ 36
218
+ _for 36
219
+ til_ 36
211
220
  nors 36
212
- vi 36
213
- _på 36
214
- _for 35
221
+ norsk 36
222
+ på_ 36
223
+ _på_ 36
215
224
  den 35
216
- på_ 35
217
225
  reg 35
218
- ske_ 35
219
- til_ 35
220
226
  kt 35
221
- _på_ 34
222
- __ 34
223
- _til_ 34
224
- med 34
227
+ _til_ 35
228
+ ske_ 35
229
+ _nor 34
225
230
  rt_ 34
226
231
  _va 34
227
- var 33
228
- _nor 33
229
- lle 33
232
+ _se 34
233
+ med 34
234
+ _det 33
235
+ de_ 33
236
+ or_ 33
230
237
  ore 33
231
- de_ 32
232
- or_ 32
233
- _se 32
234
- _S 32
235
- _det 32
238
+ lle 33
239
+ var 33
236
240
  m� 32
237
- tr 31
241
+ s_ 32
242
+ _st 32
243
+ sp 31
238
244
  den_ 31
239
- to 31
240
- ag 31
241
- _st 31
242
245
  land 31
243
- sp 31
244
- kr 31
245
246
  _med 31
246
- re_ 31
247
+ sk_ 31
248
+ to 31
247
249
  pe 31
248
- ell 30
249
- sk_ 30
250
+ kr 31
251
+ ag 31
252
+ tr 31
250
253
  ol 30
251
- pr 29
252
- le_ 29
253
- har 29
254
- s_ 29
255
- ak 29
256
- med_ 29
254
+ ell 30
255
+ med_ 30
257
256
  må 29
258
257
  fr 29
258
+ _har_ 29
259
+ ak 29
260
+ pr 29
259
261
  ni 29
262
+ har_ 29
263
+ _har 29
264
+ le_ 29
265
+ har 29
266
+ _han_ 28
260
267
  rk 28
261
- der 28
262
- _la 28
263
- _D 28
268
+ mi 28
269
+ han_ 28
270
+ _ko 28
271
+ _med_ 28
264
272
  ss 28
265
- har_ 28
266
273
  ek 28
267
- mi 28
268
- _har 28
274
+ _den 28
269
275
  si 28
276
+ der 28
277
+ _la 28
278
+ ng_ 27
270
279
  æ 27
271
- ks 27
272
- _ko 27
273
- ål 27
274
- �l 27
280
+ _den_ 27
281
+ ie 27
282
+ _ve 27
275
283
  � 27
276
- _har_ 27
284
+ �l 27
285
+ år 27
277
286
  _re 27
287
+ _fr 27
278
288
  �r 27
279
- ei_ 27
280
- ie 27
281
289
  as 27
282
- _fr 27
283
- _den 27
284
- år 27
285
- _med_ 27
286
- _var 26
287
- men 26
288
- ande 26
289
- enn 26
290
- ng_ 26
290
+ ks 27
291
+ ål 27
292
+ ei_ 27
291
293
  ut 26
294
+ ande 26
295
+ men 26
292
296
  ans 26
293
- ord 26
297
+ _var 26
294
298
  tin 26
295
- - 26
296
299
  nne 26
297
- _den_ 26
298
- ver 25
300
+ enn 26
299
301
  eri 25
302
+ _det_ 25
303
+ ter_ 25
304
+ mål 25
300
305
  ru 25
306
+ Noreg 25
301
307
  gje 25
302
- Nore 25
303
- mål 25
304
- ette 25
308
+ ver 25
305
309
  oreg 25
306
- _ve 25
307
- ere 25
308
- _han_ 25
309
- han_ 25
310
- Noreg 25
311
- sj 24
312
- ts 24
310
+ ette 25
311
+ _Nore 25
312
+ 25
313
+ ord 25
314
+ Nore 25
313
315
  tt_ 24
314
- gen 24
316
+ ere 24
317
+ sj 24
318
+ ten_ 24
315
319
  A 24
320
+ gen 24
316
321
  E 24
317
- ene 23
318
- ting 23
319
- _H 23
320
- _å 23
321
322
  kke 23
322
- he 23
323
- lo 23
324
- ter_ 23
325
- bl 23
326
- ten_ 23
323
+ ting 23
324
+ _Ha 23
325
+ ts 23
327
326
  nga 23
327
+ lo 23
328
+ _E 23
329
+ _A 23
328
330
  Ha 23
331
+ he 23
332
+ bl 23
333
+ isk 22
329
334
  ds 22
335
+ _om 22
330
336
  s� 22
331
- _Nore 22
332
337
  sta 22
333
- ong 22
334
- _det_ 22
335
338
  kon 22
336
- isk 22
337
- _om 22
339
+ for_ 22
340
+ ene 22
341
+ ong 22
342
+ kri 21
343
+ �y 21
344
+ �r 21
345
+ ær 21
338
346
  øy 21
339
- rm 21
340
347
  ir 21
341
- �r 21
342
- gr 21
343
348
  us 21
344
- kri 21
345
349
  ok 21
346
- ær 21
347
- for_ 21
348
- �y 21
350
+ rm 21
349
351
  ane 21
350
- _bl 20
351
- art 20
352
- _lan 20
352
+ orsk_ 20
353
+ _en 20
354
+ rsk_ 20
353
355
  _nors 20
354
- ndet 20
355
- sl 20
356
+ gr 20
356
357
  ad 20
357
358
  ld 20
358
359
  ist 20
359
- _A 20
360
- lt 19
360
+ _lan 20
361
+ _bl 20
362
+ ndet 20
363
+ sl 20
364
+ art 20
361
365
  ale 19
362
- id 19
363
- sam 19
366
+ lt 19
364
367
  hu 19
365
- jo 19
366
- andet 19
367
- reg_ 19
368
+ _s� 19
368
369
  ert 19
369
- un_ 19
370
- _De 19
371
- rsk_ 19
372
- ort 19
373
- _ut 19
374
- orsk_ 19
375
- _ka 19
376
- f� 19
377
370
  inga 19
378
- oreg_ 19
379
- orske 19
380
- _s� 19
381
- _E 19
371
+ _seg 19
382
372
  fa 19
373
+ jo 19
374
+ oreg_ 19
375
+ f� 19
383
376
  rske 19
377
+ ort 19
378
+ orske 19
384
379
  ret 19
380
+ sam 19
381
+ andet 19
382
+ id 19
385
383
  seg 19
386
- ro 18
387
- _et 18
384
+ _ut 19
385
+ _ka 19
386
+ un_ 19
387
+ _sk 19
388
+ reg_ 19
389
+ _sa 19
390
+ _in 18
391
+ _seg_ 18
392
+ sm 18
388
393
  mn 18
389
- n� 18
394
+ ro 18
395
+ _om_ 18
396
+ elle 18
390
397
  ang 18
391
- rin 18
392
- tter 18
393
- ikk 18
394
- ren 18
395
- tor 18
396
- ov 18
397
- _sa 18
398
- sm 18
399
- inge 18
400
- gs 18
398
+ _vi 18
399
+ ge_ 18
400
+ seg_ 18