scylla 0.8.0 → 0.8.29

Sign up to get free protection for your applications and to get access to all the features.
Files changed (93) hide show
  1. data/Gemfile +4 -0
  2. data/Gemfile.lock +9 -1
  3. data/lib/scylla/generator.rb +46 -13
  4. data/lib/scylla/lms/afrikaans.lm +400 -400
  5. data/lib/scylla/lms/arabic.lm +400 -400
  6. data/lib/scylla/lms/bulgarian.lm +400 -400
  7. data/lib/scylla/lms/catalan.lm +399 -399
  8. data/lib/scylla/lms/chinese.lm +400 -400
  9. data/lib/scylla/lms/czech.lm +400 -0
  10. data/lib/scylla/lms/danish.lm +396 -396
  11. data/lib/scylla/lms/dutch.lm +400 -0
  12. data/lib/scylla/lms/english.lm +400 -400
  13. data/lib/scylla/lms/finnish.lm +400 -400
  14. data/lib/scylla/lms/french.lm +398 -398
  15. data/lib/scylla/lms/german.lm +400 -400
  16. data/lib/scylla/lms/greek.lm +400 -400
  17. data/lib/scylla/lms/hebrew.lm +399 -399
  18. data/lib/scylla/lms/hindi.lm +400 -400
  19. data/lib/scylla/lms/icelandic.lm +399 -399
  20. data/lib/scylla/lms/indonesian.lm +400 -400
  21. data/lib/scylla/lms/italian.lm +400 -400
  22. data/lib/scylla/lms/japanese.lm +399 -399
  23. data/lib/scylla/lms/kannada.lm +400 -0
  24. data/lib/scylla/lms/korean.lm +400 -400
  25. data/lib/scylla/lms/marathi.lm +400 -0
  26. data/lib/scylla/lms/norwegian.lm +400 -400
  27. data/lib/scylla/lms/persian.lm +400 -0
  28. data/lib/scylla/lms/polish.lm +400 -400
  29. data/lib/scylla/lms/portuguese.lm +400 -400
  30. data/lib/scylla/lms/romanian.lm +400 -400
  31. data/lib/scylla/lms/russian.lm +400 -400
  32. data/lib/scylla/lms/slovak.lm +400 -400
  33. data/lib/scylla/lms/slovenian.lm +387 -387
  34. data/lib/scylla/lms/spanish.lm +400 -400
  35. data/lib/scylla/lms/swedish.lm +399 -399
  36. data/lib/scylla/lms/tagalog.lm +400 -400
  37. data/lib/scylla/lms/thai.lm +400 -400
  38. data/lib/scylla/lms/turkish.lm +400 -400
  39. data/lib/scylla/lms/vietnamese.lm +400 -400
  40. data/lib/scylla/lms/welsh.lm +398 -398
  41. data/lib/scylla/resources.rb +43 -33
  42. data/lib/scylla/string.rb +2 -2
  43. data/lib/scylla.rb +0 -4
  44. data/pkg/scylla-0.5.0.gem +0 -0
  45. data/scylla.gemspec +1 -1
  46. data/source_texts/afrikaans.txt +330 -81
  47. data/source_texts/arabic.txt +590 -448
  48. data/source_texts/bulgarian.txt +588 -821
  49. data/source_texts/catalan.txt +435 -413
  50. data/source_texts/chinese.txt +526 -100
  51. data/source_texts/czech.txt +237 -0
  52. data/source_texts/danish.txt +233 -184
  53. data/source_texts/dutch.txt +503 -0
  54. data/source_texts/english.txt +673 -70
  55. data/source_texts/finnish.txt +939 -71
  56. data/source_texts/french.txt +879 -465
  57. data/source_texts/german.txt +1236 -137
  58. data/source_texts/greek.txt +488 -139
  59. data/source_texts/hebrew.txt +539 -100
  60. data/source_texts/hindi.txt +254 -100
  61. data/source_texts/icelandic.txt +301 -90
  62. data/source_texts/indonesian.txt +509 -93
  63. data/source_texts/italian.txt +1066 -120
  64. data/source_texts/japanese.txt +1217 -450
  65. data/source_texts/kannada.txt +340 -0
  66. data/source_texts/korean.txt +343 -219
  67. data/source_texts/marathi.txt +237 -0
  68. data/source_texts/norwegian.txt +555 -190
  69. data/source_texts/persian.txt +886 -0
  70. data/source_texts/polish.txt +1013 -90
  71. data/source_texts/portuguese.txt +690 -88
  72. data/source_texts/romanian.txt +436 -103
  73. data/source_texts/russian.txt +1029 -100
  74. data/source_texts/slovak.txt +575 -102
  75. data/source_texts/slovenian.txt +353 -99
  76. data/source_texts/spanish.txt +858 -675
  77. data/source_texts/swedish.txt +558 -488
  78. data/source_texts/tagalog.txt +391 -100
  79. data/source_texts/thai.txt +286 -60
  80. data/source_texts/turkish.txt +635 -87
  81. data/source_texts/vietnamese.txt +300 -92
  82. data/source_texts/welsh.txt +288 -104
  83. data/test/fixtures/lms/danish.lm +314 -314
  84. data/test/fixtures/lms/english.lm +301 -301
  85. data/test/fixtures/lms/french.lm +326 -326
  86. data/test/fixtures/lms/german.lm +331 -331
  87. data/test/fixtures/lms/hindi.lm +191 -191
  88. data/test/fixtures/lms/italian.lm +299 -299
  89. data/test/fixtures/lms/japanese.lm +103 -103
  90. data/test/fixtures/lms/norwegian.lm +309 -309
  91. data/test/fixtures/lms/spanish.lm +331 -331
  92. data/test/generator_test.rb +2 -2
  93. metadata +14 -3
@@ -1,400 +1,400 @@
1
- _ 2068
2
- n 418
3
- h 330
4
- i 203
5
- t 202
6
- c 191
7
- g 183
8
- ng 147
9
- _t 141
10
- a 123
11
- _n 120
12
- _c 114
13
- u 113
14
- g_ 109
15
- ng_ 109
16
- n_ 107
17
- nh 105
18
- i_ 103
19
- 92
20
- m 74
21
- o 70
22
- r 65
23
- 64
24
- . 64
25
- _� 63
26
- l 63
27
- 63
28
- c_ 59
29
- th 57
30
- _th 57
31
- h_ 55
32
- t_ 52
33
- _nh 51
34
- s 51
35
- _l 50
36
- ._ 49
37
- , 47
38
- _s 47
39
- y 47
40
- ,_ 47
41
- a_ 47
42
- nh_ 46
43
- 45
44
- u_ 45
45
- _h 42
46
- ch 42
47
- o_ 39
48
- k 39
49
- _m 39
50
- �_ 38
51
- _v 37
52
- v 37
53
- hi 37
54
- _k 37
55
- T 35
56
- _kh 34
57
- 34
58
- kh 34
59
- _ch 33
60
- 33
61
- _T 33
62
- p 32
63
- 31
64
- b 31
65
- _b 31
66
- 30
67
- d 30
68
- y_ 30
69
- 30
70
- _ng 29
71
- _g 29
72
- m_ 28
73
- _d 28
74
- N 27
75
- tr 27
76
- e 26
77
- l26
78
- _l26
79
- 25
80
- _tr 25
81
- 24
82
- 24
83
- 24
84
- an 23
85
- 23
86
- 23
87
- C 22
88
- �_ 22
89
- �n 22
90
- �n 22
91
- 21
92
- ܩ 21
93
- _p 21
94
- ph 21
95
- _ph 21
96
- _C 20
97
- h� 20
98
- _l�_ 20
99
- H 20
100
- _ca 20
101
- 20
102
- a 20
103
- l_ 20
104
- c� 20
105
- _c� 20
106
- c�a 20
107
- �i 19
108
- �a_ 19
109
- c�a_ 19
110
- _ca_ 19
111
- ho 18
112
- 18
113
- _r 18
114
- c 18
115
- ha 18
116
- n 17
117
- _gi 17
118
- _c�_ 17
119
- c17
120
- gi 17
121
- ng_ 17
122
- _c17
123
- c�_ 17
124
- �i_ 17
125
- �ng 17
126
- 16
127
- _N 16
128
- in 16
129
- 16
130
- 16
131
- 15
132
- i� 15
133
- qu 15
134
- uy 15
135
- i� 15
136
- nhi 15
137
- h� 15
138
- q 15
139
- n_ 15
140
- g� 15
141
- _q 15
142
- _qu 15
143
- h� 15
144
- _nhi 15
145
- ra 14
146
- .. 14
147
- �n 14
148
- h14
149
- 14
150
- �t 14
151
- 14
152
- 13
153
- u 13
154
- 13
155
- i 13
156
- �nh 13
157
- 13
158
- u_ 13
159
- gܩi 13
160
- v13
161
- �t_ 13
162
- gܩi_ 13
163
- n 13
164
- ܩi_ 13
165
- _v13
166
- i_ 13
167
- ܩi 13
168
- _H 13
169
- �n_ 13
170
- hi12
171
- inh 12
172
- hi�u_ 12
173
- on 12
174
- �_ 12
175
- iu_ 12
176
- hiu 12
177
- 12
178
- hng 12
179
- hng_ 12
180
- i�u 12
181
- h�n 12
182
- _ 12
183
- 11
184
- sa 11
185
- kh� 11
186
- khng 11
187
- ܮ 11
188
- _m11
189
- _nhi11
190
- nhi� 11
191
- �n 11
192
- �t_ 11
193
- khn 11
194
- t 11
195
- c11
196
- nhiu 11
197
- _c� 11
198
- o 11
199
- x 11
200
- inh_ 11
201
- �c_ 11
202
- _sa 11
203
- _kh11
204
- m11
205
- _kh�n 11
206
- 11
207
- ay 11
208
- _m�t_ 10
209
- �n 10
210
- �c 10
211
- _ng� 10
212
- ho_ 10
213
- h10
214
- _mt 10
215
- �ng 10
216
- �t_ 10
217
- t 10
218
- ngܩi 10
219
- �nh_ 10
220
- 10
221
- _V 10
222
- _�� 10
223
- �� 10
224
- i� 10
225
- �n 10
226
- V 10
227
- _x 10
228
- o_ 10
229
- _�ܮc 10
230
- ay_ 10
231
- n 10
232
- mt 10
233
- ng10
234
- _�ܮ 10
235
- 10
236
- m�t_ 10
237
- ngܩ 10
238
- �ܮc 10
239
- ܮc 10
240
- �ܮ 10
241
- _ngܩ 10
242
- _cc 9
243
- ch_ 9
244
- ti 9
245
- _n� 9
246
- f 9
247
- S 9
248
- 9
249
- �ܮc_ 9
250
- p_ 9
251
- ܮc_ 9
252
- h�n 9
253
- th�_ 9
254
- _th� 9
255
- _th_ 9
256
- A 9
257
- n 9
258
- an_ 9
259
- h�_ 9
260
- �c_ 9
261
- c�c 9
262
- 9
263
- nh� 9
264
- ra_ 9
265
- n9
266
- ng_ 9
267
- �_ 9
268
- _nh� 9
269
- 9
270
- L 9
271
- th9
272
- ng 8
273
- �u 8
274
- ܩng 8
275
- M 8
276
- �ng_ 8
277
- G 8
278
- _L 8
279
- ܩng_ 8
280
- hu 8
281
- ong_ 8
282
- �nh 8
283
- _S 8
284
- _��_ 8
285
- _ 8
286
- cho 8
287
- ta 8
288
- ro 8
289
- _s� 8
290
- ron 8
291
- cho_ 8
292
- au 8
293
- _cho_ 8
294
- �c 8
295
- h8
296
- y 8
297
- Th 8
298
- _cho 8
299
- _�� 8
300
- s8
301
- ��_ 8
302
- _ti 8
303
- rong 8
304
- �� 8
305
- �n_ 8
306
- ong 8
307
- ܧ 8
308
- un 8
309
- �c_ 8
310
- h�_ 8
311
- h� 8
312
- ܩn 8
313
- _ 8
314
- rong_ 8
315
- n 8
316
- _ 8
317
- _Th 8
318
- kh7
319
- i 7
320
- _v_ 7
321
- vi 7
322
- _ra 7
323
- �u_ 7
324
- _kh7
325
- _7
326
- nh_ 7
327
- .._ 7
328
- �n 7
329
- l� 7
330
- _nh�_ 7
331
- 7
332
- _Ng 7
333
- i7
334
- 7
335
- anh 7
336
- _l� 7
337
- 7
338
- ... 7
339
- 7
340
- ai_ 7
341
- v_ 7
342
- ao 7
343
- y_ 7
344
- ua 7
345
- _vi 7
346
- 7
347
- hay_ 7
348
- ai 7
349
- �ch 7
350
- n 7
351
- �n 7
352
- �nh_ 7
353
- ..._ 7
354
- 7
355
- re 7
356
- hay 7
357
- �n_ 7
358
- Ng 7
359
- 7
360
- ch_ 7
361
- ao_ 7
362
- ar 7
363
- _ra_ 7
364
- n_ 6
365
- l�i_ 6
366
- s�_ 6
367
- d�n 6
368
- tron 6
369
- hnh 6
370
- rt 6
371
- s�_ 6
372
- _l�i 6
373
- _M 6
374
- in 6
375
- _ljn 6
376
- �i_ 6
377
- i 6
378
- hi� 6
379
- Nj_ 6
380
- trong 6
381
- _r�t_ 6
382
- al 6
383
- _ta 6
384
- 6
385
- ung 6
386
- h� 6
387
- _s_ 6
388
- 6
389
- 6
390
- _s6
391
- _ljn_ 6
392
- ��n 6
393
- ljn 6
394
- h� 6
395
- tro 6
396
- _r�t 6
397
- _Tr 6
398
- _tron 6
399
- Tr 6
400
- hnh_ 6
1
+ _ 10796
2
+ 2788
3
+ n 2370
4
+ 2042
5
+ 2040
6
+ h 1583
7
+ 1430
8
+ t 1337
9
+ c 1281
10
+ i 1097
11
+ _t 949
12
+ g 880
13
+ 776
14
+ ng 751
15
+ 748
16
+ _n 727
17
+ n_ 713
18
+ _c 704
19
+ a 656
20
+ 606
21
+ g_ 606
22
+ ng_ 605
23
+ 586
24
+ v 531
25
+ _v 521
26
+ c_ 504
27
+ m 497
28
+ u 470
29
+ đ 459
30
+ 459
31
+ 459
32
+ _� 459
33
+ nh 457
34
+ h� 456
35
+ i� 446
36
+ 427
37
+ i_ 427
38
+ 421
39
+ à 418
40
+ i� 397
41
+ o 383
42
+ h� 372
43
+ m_ 359
44
+ 338
45
+ t_ 337
46
+ ư 336
47
+ r 330
48
+ h� 330
49
+ h_ 328
50
+ _h 316
51
+ th 294
52
+ _th 293
53
+ l 281
54
+ �� 280
55
+ 280
56
+ 280
57
+ nh_ 275
58
+ ch 267
59
+ _t� 266
60
+ t266
61
+ _l 260
62
+ đ� 257
63
+ �� 257
64
+ 254
65
+ �� 253
66
+ �� 253
67
+ ư� 253
68
+ a_ 251
69
+ p 243
70
+ tr 241
71
+ á 240
72
+ _tr 239
73
+ �_ 236
74
+ à_ 236
75
+ 224
76
+ _ch 216
77
+ c212
78
+ 211
79
+ _c211
80
+ y 209
81
+ 205
82
+ 205
83
+ �� 205
84
+ 203
85
+ s 203
86
+ 203
87
+ �� 203
88
+ na 200
89
+ k 200
90
+ _k 197
91
+ b 193
92
+ d 192
93
+ vi 188
94
+ 187
95
+ _na 187
96
+ ế 187
97
+ �� 187
98
+ _vi 186
99
+ v� 186
100
+ _v186
101
+ _nh 182
102
+ c182
103
+ _c182
104
+ am 178
105
+ _b 177
106
+ o_ 176
107
+ am_ 176
108
+ nam 173
109
+ u_ 172
110
+ 169
111
+ _s 164
112
+ 162
113
+ �� 162
114
+ t161
115
+ 159
116
+ vi159
117
+ �� 159
118
+ _d 159
119
+ 159
120
+ ��t 155
121
+ t_ 155
122
+ t 155
123
+ 154
124
+ hi 152
125
+ 147
126
+ �� 147
127
+ _ng 143
128
+ e 142
129
+ 142
130
+ q 137
131
+ c 137
132
+ qu 137
133
+ _q 137
134
+ _qu 137
135
+ ác 135
136
+ �� 134
137
+ y_ 132
138
+ c� 129
139
+ h126
140
+ �� 125
141
+ 125
142
+ �c_ 124
143
+ ó 124
144
+ _g 124
145
+ �� 123
146
+ _m 122
147
+ _p 121
148
+ 120
149
+ 119
150
+ �� 119
151
+ p_ 119
152
+ _l119
153
+ l119
154
+ _h119
155
+ u117
156
+ í 115
157
+ ă 114
158
+ th114
159
+ v� 113
160
+ _v113
161
+ _ph 112
162
+ ph 112
163
+ _ 112
164
+ hi� 112
165
+ 109
166
+ 109
167
+ â 109
168
+ ê 109
169
+ 108
170
+ v106
171
+ t� 105
172
+ �� 101
173
+ 101
174
+ ên 101
175
+ n 101
176
+ 101
177
+ s100
178
+ _s100
179
+ n 99
180
+ kh 99
181
+ _kh 99
182
+ n_ 97
183
+ 97
184
+ ó_ 96
185
+ àn 94
186
+ n 94
187
+ �i_ 93
188
+ m_ 93
189
+ m 93
190
+ �� 93
191
+ ��i 93
192
+ 93
193
+ i 93
194
+ a 92
195
+ n 92
196
+ b92
197
+ ��a 92
198
+ _b92
199
+ an 92
200
+ �a_ 92
201
+ ơ 91
202
+ 90
203
+ 89
204
+ 89
205
+ �� 89
206
+ 89
207
+ 88
208
+ 88
209
+ �� 87
210
+ đ� 87
211
+ 86
212
+ �� 86
213
+ n_ 85
214
+ n 85
215
+ ��n 85
216
+ ô 84
217
+ 84
218
+ �n 83
219
+ uy 83
220
+ ăm 83
221
+ ch� 83
222
+ 82
223
+ gi 82
224
+ �� 82
225
+ 82
226
+ ch� 82
227
+ 81
228
+ s81
229
+ 81
230
+ n� 81
231
+ _n81
232
+ _l80
233
+ _h80
234
+ l� 80
235
+ _gi 80
236
+ 80
237
+ on 79
238
+ ��_ 78
239
+ nh� 78
240
+ �_ 78
241
+ h� 77
242
+ i_ 77
243
+ �i 77
244
+ �n 76
245
+ ôn 76
246
+ th� 76
247
+ ��n 75
248
+ u74
249
+ 73
250
+ �n 73
251
+ �n_ 73
252
+ �� 73
253
+ ân 73
254
+ ��c 72
255
+ c 72
256
+ �c_ 72
257
+ i71
258
+ ��i 70
259
+ ã 68
260
+ �� 67
261
+ in 67
262
+ 67
263
+ �� 66
264
+ đ� 66
265
+ _ 66
266
+ qu66
267
+ 66
268
+ ín 65
269
+ ��n 65
270
+ �n 65
271
+ nh 65
272
+ n_ 64
273
+ ho 64
274
+ ng 64
275
+ �nh 64
276
+ ��_ 63
277
+ �_ 63
278
+ ong 62
279
+ �� 62
280
+ 62
281
+ �_ 62
282
+ ��_ 62
283
+ �n 61
284
+ �ư 61
285
+ ph60
286
+ y� 60
287
+ _n� 60
288
+ �_ 60
289
+ ��n 60
290
+ �n 60
291
+ n� 60
292
+ 59
293
+ ro 58
294
+ 58
295
+ i 57
296
+ i_ 57
297
+ ��i 57
298
+ �n_ 57
299
+ 56
300
+ 56
301
+ �� 56
302
+ m� 55
303
+ 55
304
+ b� 55
305
+ �� 55
306
+ _m� 55
307
+ _� 54
308
+ ron 54
309
+ tro 54
310
+ 53
311
+ �� 53
312
+ �t 53
313
+ uy53
314
+ _d� 53
315
+ t_ 53
316
+ c53
317
+ d� 53
318
+ _c52
319
+ c52
320
+ i_ 52
321
+ ã_ 52
322
+ �ng 52
323
+ ��i 52
324
+ i 52
325
+ 51
326
+ n_ 51
327
+ ch_ 51
328
+ ��t 51
329
+ x 50
330
+ 50
331
+ c 50
332
+ �� 50
333
+ c_ 50
334
+ o50
335
+ o� 50
336
+ ��c 50
337
+ t49
338
+ i� 49
339
+ r49
340
+ _hi 49
341
+ l49
342
+ �ng 49
343
+ _t49
344
+ �c_ 48
345
+ �n 48
346
+ c 48
347
+ ��c 48
348
+ _� 47
349
+ 47
350
+ m47
351
+ an_ 47
352
+ inh 46
353
+ ��_ 46
354
+ 46
355
+ �_ 46
356
+ ơ_ 46
357
+ _x 46
358
+ �� 46
359
+ c_ 45
360
+ c 45
361
+ �ng 45
362
+ 45
363
+ ��c 45
364
+ 45
365
+ hu 45
366
+ he 43
367
+ ơn 43
368
+ u� 43
369
+ g43
370
+ _ 43
371
+ _mi 42
372
+ mi 42
373
+ _k� 42
374
+ k42
375
+ ua 42
376
+ ��_ 42
377
+ _ 42
378
+ 42
379
+ qua 42
380
+ r� 41
381
+ ��_ 40
382
+ _d� 40
383
+ �_ 40
384
+ r40
385
+ tr� 40
386
+ the 40
387
+ d40
388
+ �o_ 39
389
+ ti 39
390
+ u 39
391
+ �i 39
392
+ �u_ 39
393
+ ng� 39
394
+ ��n 39
395
+ �o 39
396
+ ��u 39
397
+ ù 39
398
+ ��n 39
399
+ �n 39
400
+ b38