scylla 0.8.0 → 0.8.29

Sign up to get free protection for your applications and to get access to all the features.
Files changed (93) hide show
  1. data/Gemfile +4 -0
  2. data/Gemfile.lock +9 -1
  3. data/lib/scylla/generator.rb +46 -13
  4. data/lib/scylla/lms/afrikaans.lm +400 -400
  5. data/lib/scylla/lms/arabic.lm +400 -400
  6. data/lib/scylla/lms/bulgarian.lm +400 -400
  7. data/lib/scylla/lms/catalan.lm +399 -399
  8. data/lib/scylla/lms/chinese.lm +400 -400
  9. data/lib/scylla/lms/czech.lm +400 -0
  10. data/lib/scylla/lms/danish.lm +396 -396
  11. data/lib/scylla/lms/dutch.lm +400 -0
  12. data/lib/scylla/lms/english.lm +400 -400
  13. data/lib/scylla/lms/finnish.lm +400 -400
  14. data/lib/scylla/lms/french.lm +398 -398
  15. data/lib/scylla/lms/german.lm +400 -400
  16. data/lib/scylla/lms/greek.lm +400 -400
  17. data/lib/scylla/lms/hebrew.lm +399 -399
  18. data/lib/scylla/lms/hindi.lm +400 -400
  19. data/lib/scylla/lms/icelandic.lm +399 -399
  20. data/lib/scylla/lms/indonesian.lm +400 -400
  21. data/lib/scylla/lms/italian.lm +400 -400
  22. data/lib/scylla/lms/japanese.lm +399 -399
  23. data/lib/scylla/lms/kannada.lm +400 -0
  24. data/lib/scylla/lms/korean.lm +400 -400
  25. data/lib/scylla/lms/marathi.lm +400 -0
  26. data/lib/scylla/lms/norwegian.lm +400 -400
  27. data/lib/scylla/lms/persian.lm +400 -0
  28. data/lib/scylla/lms/polish.lm +400 -400
  29. data/lib/scylla/lms/portuguese.lm +400 -400
  30. data/lib/scylla/lms/romanian.lm +400 -400
  31. data/lib/scylla/lms/russian.lm +400 -400
  32. data/lib/scylla/lms/slovak.lm +400 -400
  33. data/lib/scylla/lms/slovenian.lm +387 -387
  34. data/lib/scylla/lms/spanish.lm +400 -400
  35. data/lib/scylla/lms/swedish.lm +399 -399
  36. data/lib/scylla/lms/tagalog.lm +400 -400
  37. data/lib/scylla/lms/thai.lm +400 -400
  38. data/lib/scylla/lms/turkish.lm +400 -400
  39. data/lib/scylla/lms/vietnamese.lm +400 -400
  40. data/lib/scylla/lms/welsh.lm +398 -398
  41. data/lib/scylla/resources.rb +43 -33
  42. data/lib/scylla/string.rb +2 -2
  43. data/lib/scylla.rb +0 -4
  44. data/pkg/scylla-0.5.0.gem +0 -0
  45. data/scylla.gemspec +1 -1
  46. data/source_texts/afrikaans.txt +330 -81
  47. data/source_texts/arabic.txt +590 -448
  48. data/source_texts/bulgarian.txt +588 -821
  49. data/source_texts/catalan.txt +435 -413
  50. data/source_texts/chinese.txt +526 -100
  51. data/source_texts/czech.txt +237 -0
  52. data/source_texts/danish.txt +233 -184
  53. data/source_texts/dutch.txt +503 -0
  54. data/source_texts/english.txt +673 -70
  55. data/source_texts/finnish.txt +939 -71
  56. data/source_texts/french.txt +879 -465
  57. data/source_texts/german.txt +1236 -137
  58. data/source_texts/greek.txt +488 -139
  59. data/source_texts/hebrew.txt +539 -100
  60. data/source_texts/hindi.txt +254 -100
  61. data/source_texts/icelandic.txt +301 -90
  62. data/source_texts/indonesian.txt +509 -93
  63. data/source_texts/italian.txt +1066 -120
  64. data/source_texts/japanese.txt +1217 -450
  65. data/source_texts/kannada.txt +340 -0
  66. data/source_texts/korean.txt +343 -219
  67. data/source_texts/marathi.txt +237 -0
  68. data/source_texts/norwegian.txt +555 -190
  69. data/source_texts/persian.txt +886 -0
  70. data/source_texts/polish.txt +1013 -90
  71. data/source_texts/portuguese.txt +690 -88
  72. data/source_texts/romanian.txt +436 -103
  73. data/source_texts/russian.txt +1029 -100
  74. data/source_texts/slovak.txt +575 -102
  75. data/source_texts/slovenian.txt +353 -99
  76. data/source_texts/spanish.txt +858 -675
  77. data/source_texts/swedish.txt +558 -488
  78. data/source_texts/tagalog.txt +391 -100
  79. data/source_texts/thai.txt +286 -60
  80. data/source_texts/turkish.txt +635 -87
  81. data/source_texts/vietnamese.txt +300 -92
  82. data/source_texts/welsh.txt +288 -104
  83. data/test/fixtures/lms/danish.lm +314 -314
  84. data/test/fixtures/lms/english.lm +301 -301
  85. data/test/fixtures/lms/french.lm +326 -326
  86. data/test/fixtures/lms/german.lm +331 -331
  87. data/test/fixtures/lms/hindi.lm +191 -191
  88. data/test/fixtures/lms/italian.lm +299 -299
  89. data/test/fixtures/lms/japanese.lm +103 -103
  90. data/test/fixtures/lms/norwegian.lm +309 -309
  91. data/test/fixtures/lms/spanish.lm +331 -331
  92. data/test/generator_test.rb +2 -2
  93. metadata +14 -3
data/lib/scylla/lms/japanese.lm CHANGED
@@ -1,400 +1,400 @@
1
- � 20184
2
- � 13193
3
- � 11085
4
- � 6271
5
- � 6187
6
- � 4811
7
- � 4488
8
- � 3670
9
- � 2935
10
- � 2486
11
- � 2486
12
- _ 2244
13
- � 2136
14
- � 2083
15
- � 2033
16
- � 2004
17
- � 1968
18
- � 1677
19
- � 1676
20
- � 1647
21
- �� 1544
22
- 、 1537
23
- の 1523
24
- �� 1523
25
- � 1496
26
- � 1410
27
- � 1400
28
- � 1380
29
- � 1262
30
- � 1240
31
- � 1232
32
- � 1216
33
- � 1192
34
- � 1184
35
- � 1172
36
- � 1151
37
- �� 1144
38
- � 1142
39
- � 1094
40
- � 1046
41
- � 1039
42
- � 1028
43
- � 1021
44
- �� 1011
45
- に 1007
46
- � 1000
47
- � 991
48
- � 981
49
- る 966
50
- �� 966
51
- � 958
52
- �� 943
53
- � 901
54
- � 836
55
- � 823
56
- � 813
57
- � 804
58
- � 799
59
- � 795
60
- �� 783
61
- � 780
62
- � 772
63
- � 767
64
- が 763
65
- �� 763
66
- �� 756
67
- � 743
68
- �� 729
69
- � 716
70
- �� 711
71
- � 710
72
- � 708
73
- と 704
74
- �� 704
75
- � 702
76
- � 696
77
- � 695
78
- � 695
79
- �� 681
80
- 。 681
81
- � 669
82
- 国 659
83
- �� 659
84
- � 656
85
- �� 647
86
- � 641
87
- �� 639
88
- �� 637
89
- を 637
90
- �� 634
91
- し 627
92
- �� 627
93
- � 622
94
- � 619
95
- � 619
96
- た 616
97
- �� 616
98
- �� 613
99
- て 613
100
- � 611
101
- い 604
102
- �� 604
103
- し� 600
104
- ��� 600
105
- � 596
106
- �� 591
107
- �� 589
108
- � 584
109
- ��� 582
110
- る� 582
111
- �� 580
112
- 日 580
113
- �� 579
114
- な 579
115
- � 576
116
- �� 563
117
- � 559
118
- �� 553
119
- は 552
120
- � 547
121
- �� 534
122
- ��� 528
123
- い� 528
124
- �� 519
125
- �� 518
126
- � 515
127
- �� 513
128
- で 513
129
- 本 513
130
- �� 513
131
- � 510
132
- と� 509
133
- ��� 509
134
- �� 507
135
- �� 504
136
- � 492
137
- �� 490
138
- れ 490
139
- � 484
140
- し� 483
141
- ��� 483
142
- ��� 480
143
- 日� 480
144
- �� 471
145
- � 470
146
- 日� 469
147
- ��� 469
148
- ��本 466
149
- � 466
150
- �本 466
151
- れ� 465
152
- ��� 465
153
- �� 461
154
- �� 455
155
- �� 449
156
- � 446
157
- � 445
158
- た� 444
159
- ��� 444
160
- �� 439
161
- � 436
162
- �� 434
163
- な� 420
164
- ��� 420
165
- ��� 419
166
- �� 419
167
- と� 419
168
- �� 416
169
- の� 407
170
- ��� 407
171
- に� 402
172
- ��� 402
173
- �� 395
174
- ��� 392
175
- て� 392
176
- _� 386
177
- �� 383
178
- ��� 382
179
- � 379
180
- ��� 373
181
- �� 373
182
- � 373
183
- � 372
184
- は� 372
185
- 、� 369
186
- �� 369
187
- ��� 367
188
- で� 367
189
- �� 366
190
- �� 365
191
- � 364
192
- る� 360
193
- ��� 360
194
- �� 358
195
- �� 358
196
- �� 356
197
- �� 355
198
- な� 349
199
- ��� 349
200
- �� 347
201
- � 347
202
- �� 345
203
- ��。 342
204
- �。 342
205
- �� 338
206
- �� 336
207
- �� 335
208
- 、� 335
209
- ��� 335
210
- � 334
211
- �� 333
212
- �� 333
213
- �� 330
214
- �� 330
215
- ��� 329
216
- �� 329
217
- は� 329
218
- （ 329
219
- ） 328
220
- �� 327
221
- �� 324
222
- ら 323
223
- �� 323
224
- ��� 323
225
- �� 321
226
- あ 320
227
- あ� 320
228
- ��� 316
229
- �� 316
230
- て� 316
231
- も 316
232
- �� 315
233
- ��� 313
234
- 、� 313
235
- �� 313
236
- 」 311
237
- �� 311
238
- 「 311
239
- �� 309
240
- �� 309
241
- � 308
242
- �� 307
243
- 国� 306
244
- ��� 306
245
- ��� 305
246
- の� 305
247
- �� 305
248
- �、 302
249
- ��、 300
250
- � 298
251
- ��� 297
252
- で� 297
253
- あ� 284
254
- ��� 284
255
- �� 281
256
- �� 278
257
- �� 277
258
- �� 276
259
- れ� 274
260
- ��� 274
261
- か 273
262
- �� 273
263
- �� 272
264
- す 272
265
- 年 270
266
- �� 270
267
- ��� 269
268
- か� 268
269
- � 263
270
- �� 262
271
- � 262
272
- す� 261
273
- ��� 261
274
- ��� 255
275
- �� 254
276
- �� 253
277
- ��� 252
278
- �� 251
279
- ��� 250
280
- �_ 250
281
- 本� 250
282
- ��� 250
283
- 」� 249
284
- す� 246
285
- �� 246
286
- �� 246
287
- ��て 246
288
- ��� 246
289
- _� 246
290
- �て 246
291
- �本� 245
292
- � 245
293
- � 245
294
- ��_ 245
295
- 。_ 245
296
- ��� 244
297
- ）� 242
298
- �る 242
299
- ��る 242
300
- �� 241
301
- ��� 239
302
- い� 239
303
- �� 238
304
- っ 238
305
- � 238
306
- っ� 237
307
- �� 237
308
- っ� 237
309
- �� 237
310
- ア 237
311
- �� 236
1
+ � 27394
2
+ � 18832
3
+ � 15876
4
+ � 8087
5
+ � 7143
6
+ � 5707
7
+ � 5360
8
+ � 5259
9
+ � 4417
10
+ � 3312
11
+ _ 3236
12
+ � 3139
13
+ � 2797
14
+ � 2629
15
+ � 2397
16
+ � 2345
17
+ �� 2280
18
+ 、 2271
19
+ の 2169
20
+ �� 2169
21
+ � 1980
22
+ � 1957
23
+ � 1954
24
+ � 1933
25
+ � 1904
26
+ � 1896
27
+ � 1702
28
+ �� 1690
29
+ � 1669
30
+ � 1645
31
+ � 1609
32
+ � 1569
33
+ � 1510
34
+ �� 1472
35
+ に 1470
36
+ � 1431
37
+ る 1418
38
+ �� 1418
39
+ � 1413
40
+ �� 1404
41
+ � 1396
42
+ � 1388
43
+ � 1320
44
+ � 1313
45
+ � 1295
46
+ � 1282
47
+ � 1276
48
+ � 1274
49
+ � 1216
50
+ � 1213
51
+ � 1188
52
+ �� 1173
53
+ � 1168
54
+ �� 1154
55
+ �� 1150
56
+ � 1132
57
+ �� 1090
58
+ 。 1090
59
+ � 1075
60
+ が 1051
61
+ �� 1051
62
+ � 1039
63
+ �� 1035
64
+ �� 1019
65
+ ��� 1007
66
+ �� 995
67
+ と 995
68
+ � 966
69
+ � 958
70
+ � 936
71
+ � 926
72
+ � 922
73
+ � 908
74
+ � 905
75
+ � 903
76
+ � 892
77
+ �� 892
78
+ �� 884
79
+ し 884
80
+ �� 876
81
+ を 876
82
+ � 873
83
+ � 871
84
+ �� 867
85
+ な 867
86
+ � 867
87
+ �� 861
88
+ て 861
89
+ �� 857
90
+ い 857
91
+ ��� 850
92
+ �� 848
93
+ �� 847
94
+ � 842
95
+ �� 838
96
+ た 838
97
+ は 837
98
+ ��� 829
99
+ �� 814
100
+ �� 812
101
+ �� 807
102
+ �� 795
103
+ � 789
104
+ で 778
105
+ �� 778
106
+ ��� 767
107
+ � 756
108
+ � 756
109
+ � 747
110
+ � 746
111
+ �� 743
112
+ ��� 743
113
+ � 733
114
+ �� 706
115
+ �� 691
116
+ れ 690
117
+ �� 690
118
+ ��� 679
119
+ � 676
120
+ � 671
121
+ ��� 670
122
+ � 668
123
+ �� 666
124
+ � 662
125
+ �� 661
126
+ � 656
127
+ ��� 655
128
+ � 654
129
+ ��� 653
130
+ � 644
131
+ 国 642
132
+ �� 642
133
+ �� 641
134
+ �� 637
135
+ �� 635
136
+ �� 624
137
+ �� 623
138
+ � 623
139
+ � 614
140
+ 日 608
141
+ �� 608
142
+ �� 602
143
+ ��� 602
144
+ � 596
145
+ ��� 579
146
+ �� 566
147
+ ��� 565
148
+ �� 557
149
+ �� 556
150
+ �� 553
151
+ � 549
152
+ ） 546
153
+ �� 545
154
+ �� 543
155
+ （ 543
156
+ �� 542
157
+ 本 542
158
+ �� 540
159
+ � 537
160
+ �� 534
161
+ � 525
162
+ � 521
163
+ �� 521
164
+ � 520
165
+ ��� 517
166
+ � 516
167
+ � 509
168
+ ��� 501
169
+ �� 495
170
+ �� 492
171
+ � 485
172
+ �� 484
173
+ �� 482
174
+ � 476
175
+ _� 476
176
+ �� 467
177
+ ��� 467
178
+ �� 464
179
+ あ 463
180
+ � 463
181
+ �� 462
182
+ �� 459
183
+ �� 456
184
+ �� 453
185
+ も 451
186
+ �� 451
187
+ �� 450
188
+ �� 436
189
+ ら 433
190
+ ��� 424
191
+ �� 416
192
+ �� 408
193
+ �� 406
194
+ ��� 403
195
+ 「 402
196
+ �� 402
197
+ 」 402
198
+ �� 395
199
+ �� 393
200
+ �� 392
201
+ �� 388
202
+ �� 386
203
+ �� 382
204
+ �� 381
205
+ す 381
206
+ � 379
207
+ か 378
208
+ �� 376
209
+ ��� 374
210
+ �� 374
211
+ ��� 373
212
+ � 373
213
+ ��� 372
214
+ _� 371
215
+ �� 371
216
+ � 369
217
+ ��� 369
218
+ �� 367
219
+ � 366
220
+ �� 364
221
+ �� 356
222
+ 年 356
223
+ �_ 355
224
+ �� 352
225
+ ��_ 351
226
+ ・ 350
227
+ �� 350
228
+ �� 348
229
+ �� 348
230
+ ��� 347
231
+ �� 338
232
+ �� 336
233
+ � 335
234
+ �� 335
235
+ ��� 334
236
+ �� 333
237
+ �� 333
238
+ ��� 332
239
+ �� 331
240
+ さ 329
241
+ ��� 326
242
+ � 317
243
+ っ 317
244
+ ��� 312
245
+ �� 312
246
+ �� 312
247
+ �� 311
248
+ ��� 305
249
+ � 303
250
+ �� 302
251
+ ��� 300
252
+ ��� 297
253
+ �� 293
254
+ �� 292
255
+ ��� 292
256
+ � 291
257
+ � 291
258
+ �� 290
259
+ �� 289
260
+ _� 286
261
+ り 286
262
+ ど 284
263
+ �� 281
264
+ � 280
265
+ �� 279
266
+ ��� 279
267
+ � 275
268
+ �� 274
269
+ � 272
270
+ �� 269
271
+ ��� 269
272
+ �� 268
273
+ � 268
274
+ �� 266
275
+ � 266
276
+ �� 266
277
+ �� 264
278
+ �� 260
279
+ や 259
280
+ �� 258
281
+ �� 257
282
+ 人 256
283
+ �� 256
284
+ � 253
285
+ こ 253
286
+ � 252
287
+ �� 249
288
+ � 248
289
+ �� 246
290
+ �� 246
291
+ ま 245
292
+ �� 245
293
+ �� 245
294
+ ��� 243
295
+ � 242
296
+ �� 242
297
+ �� 242
298
+ �� 240
299
+ よ 239
300
+ �� 239
301
+ ��� 239
302
+ ��� 238
312
303
  �� 236
313
- �� 235
314
- _� 235
315
- �� 235
316
- ・ 235
317
- � 233
318
- � 233
319
- �い 232
320
- �い� 231
321
- _年 231
322
- � 230
323
- � 230
324
- �� 229
325
- た� 229
326
- ��� 229
327
- ��い 228
328
- �� 225
329
- ��� 224
330
- �� 223
331
- �� 223
332
- �� 223
333
- �� 222
334
- に� 220
335
- �� 220
336
- �� 219
337
- ��� 218
338
- さ 217
339
- さ� 215
340
- 国� 215
341
- ��� 215
342
- � 215
343
- �る 214
344
- ��る 213
345
- 大 210
346
- �� 210
347
- ��� 209
348
- ら� 209
349
- い� 208
350
- ��� 208
351
- �� 207
352
- � 205
353
- � 205
354
- ��� 202
355
- に� 201
356
- ��� 201
357
- �� 199
358
- �� 199
359
- �� 197
360
- り 197
361
- �� 196
362
- �� 195
363
- 本� 194
364
- ��� 194
365
- さ� 193
366
- ��る 193
367
- � 193
368
- �る 193
369
- �� 193
370
- � 193
371
- ��� 193
372
- �� 192
373
- �� 192
374
- ��� 191
375
- ��� 191
376
- 人 191
377
- が� 191
378
- �� 191
379
- ア� 191
380
- �� 190
381
- 中 190
382
- �� 188
383
- �� 188
384
- ��� 187
385
- か� 187
386
- �れ 185
387
- �� 185
388
- �� 185
389
- ��れ 185
390
- �� 185
391
- �� 182
392
- �� 182
393
- �れ� 182
394
- �� 182
395
- ��あ 181
396
- � 181
397
- �あ� 181
398
- �あ 181
399
- ど 180
400
- �� 180
304
+ �� 233
305
+ �� 232
306
+ �� 231
307
+ ��� 229
308
+ � 229
309
+ ��� 228
310
+ ��� 225
311
+ ��� 221
312
+ _� 221
313
+ �� 220
314
+ �� 218
315
+ 的 218
316
+ �� 218
317
+ �� 217
318
+ 大 216
319
+ �� 216
320
+ �� 216
321
+ �� 215
322
+ �� 214
323
+ 中 213
324
+ � 211
325
+ �� 210
326
+ �� 209
327
+ �� 209
328
+ � 207
329
+ ��� 207
330
+ �� 206
331
+ �� 205
332
+ �� 205
333
+ �� 203
334
+ � 202
335
+ �� 200
336
+ �� 200
337
+ �� 200
338
+ く 199
339
+ �� 198
340
+ ��� 197
341
+ _� 196
342
+ �� 196
343
+ �� 195
344
+ �� 194
345
+ ��� 193
346
+ ��� 193
347
+ ��� 192
348
+ �� 190
349
+ �� 190
350
+ 地 189
351
+ �� 189
352
+ �� 186
353
+ �� 186
354
+ め 186
355
+ � 185
356
+ �� 185
357
+ �� 184
358
+ �� 184
359
+ �� 184
360
+ �� 183
361
+ �� 180
362
+ ��� 179
363
+ �� 179
364
+ � 179
365
+ ��� 179
366
+ ��� 178
367
+ �� 177
368
+ ア 177
369
+ �� 174
370
+ �� 172
371
+ �� 169
372
+ �� 165
373
+ � 165
374
+ �� 163
375
+ �� 163
376
+ � 163
377
+ �� 162
378
+ � 161
379
+ �� 160
380
+ � 160
381
+ �� 159
382
+ �� 158
383
+ 成 158
384
+ �� 158
385
+ _� 157
386
+ �� 156
387
+ �� 155
388
+ �� 155
389
+ �� 154
390
+ �� 154
391
+ �� 153
392
+ � 153
393
+ ��� 151
394
+ � 151
395
+ � 151
396
+ �� 149
397
+ �� 148
398
+ � 148
399
+ � 148
400
+ �� 147