scylla 0.7.0 → 0.7.5
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- data/lib/scylla/classifier.rb +3 -4
- data/lib/scylla/generator.rb +4 -7
- data/lib/scylla/lms/afrikaans.lm +280 -280
- data/lib/scylla/lms/arabic.lm +225 -225
- data/lib/scylla/lms/bulgarian.lm +208 -208
- data/lib/scylla/lms/catalan.lm +212 -212
- data/lib/scylla/lms/chinese.lm +201 -201
- data/lib/scylla/lms/danish.lm +155 -155
- data/lib/scylla/lms/english.lm +207 -207
- data/lib/scylla/lms/finnish.lm +259 -259
- data/lib/scylla/lms/french.lm +203 -203
- data/lib/scylla/lms/german.lm +280 -280
- data/lib/scylla/lms/greek.lm +276 -276
- data/lib/scylla/lms/hebrew.lm +170 -170
- data/lib/scylla/lms/hindi.lm +241 -241
- data/lib/scylla/lms/icelandic.lm +264 -264
- data/lib/scylla/lms/indonesian.lm +272 -272
- data/lib/scylla/lms/italian.lm +283 -283
- data/lib/scylla/lms/japanese.lm +105 -105
- data/lib/scylla/lms/korean.lm +400 -400
- data/lib/scylla/lms/norwegian.lm +235 -235
- data/lib/scylla/lms/polish.lm +264 -264
- data/lib/scylla/lms/portuguese.lm +269 -269
- data/lib/scylla/lms/romanian.lm +278 -278
- data/lib/scylla/lms/russian.lm +127 -127
- data/lib/scylla/lms/slovak.lm +281 -281
- data/lib/scylla/lms/slovenian.lm +276 -276
- data/lib/scylla/lms/spanish.lm +190 -190
- data/lib/scylla/lms/swedish.lm +195 -195
- data/lib/scylla/lms/tagalog.lm +282 -282
- data/lib/scylla/lms/thai.lm +257 -257
- data/lib/scylla/lms/turkish.lm +300 -300
- data/lib/scylla/lms/vietnamese.lm +277 -277
- data/lib/scylla/lms/welsh.lm +271 -271
- data/scylla.gemspec +3 -22
- data/source_texts/korean.txt +219 -134
- metadata +15 -14
- data/scylla-0.6.0.gem +0 -0
data/lib/scylla/lms/hebrew.lm
CHANGED
@@ -1,20 +1,20 @@
|
|
1
1
|
� 18717
|
2
|
-
_
|
3
|
-
_�
|
4
|
-
� 2236
|
2
|
+
_ 8536
|
3
|
+
_� 4268
|
5
4
|
י 2236
|
6
|
-
|
5
|
+
� 2236
|
7
6
|
�� 2028
|
7
|
+
י� 2028
|
8
8
|
ו 2000
|
9
9
|
� 2000
|
10
|
-
ו� 1828
|
11
10
|
�� 1828
|
12
|
-
|
11
|
+
ו� 1828
|
13
12
|
ה 1399
|
14
|
-
�
|
13
|
+
� 1399
|
15
14
|
ל 1228
|
16
|
-
�
|
15
|
+
� 1228
|
17
16
|
ת 1141
|
17
|
+
� 1141
|
18
18
|
ר 1133
|
19
19
|
� 1133
|
20
20
|
א 1129
|
@@ -22,165 +22,165 @@ _
|
|
22
22
|
�� 999
|
23
23
|
א� 999
|
24
24
|
�� 944
|
25
|
+
מ� 944
|
25
26
|
� 944
|
26
27
|
מ 944
|
27
|
-
מ� 944
|
28
28
|
�� 885
|
29
29
|
ר� 885
|
30
30
|
ב 832
|
31
31
|
� 832
|
32
|
-
ל� 791
|
33
32
|
�� 791
|
34
|
-
|
33
|
+
ל� 791
|
35
34
|
� 734
|
35
|
+
ש 734
|
36
36
|
ב� 706
|
37
37
|
�� 706
|
38
|
-
|
38
|
+
_א� 677
|
39
|
+
_א 677
|
39
40
|
ם 674
|
41
|
+
� 674
|
40
42
|
�_ 660
|
41
43
|
ה_ 660
|
42
|
-
_א� 657
|
43
|
-
_א 657
|
44
|
-
ד 636
|
45
44
|
� 636
|
45
|
+
ד 636
|
46
46
|
�� 617
|
47
47
|
ש� 617
|
48
|
+
� 610
|
48
49
|
נ� 610
|
49
50
|
�� 610
|
50
|
-
� 610
|
51
51
|
נ 610
|
52
52
|
�_ 569
|
53
53
|
ת_ 569
|
54
|
-
ם_ 535
|
55
54
|
�_ 535
|
55
|
+
ם_ 535
|
56
56
|
�� 534
|
57
57
|
ה� 534
|
58
58
|
ע 523
|
59
59
|
� 523
|
60
60
|
. 522
|
61
|
-
|
61
|
+
._ 522
|
62
62
|
� 507
|
63
|
+
ק 507
|
63
64
|
ד� 499
|
65
|
+
ק� 499
|
64
66
|
�� 499
|
65
67
|
�� 499
|
66
|
-
ק� 499
|
67
|
-
�� 495
|
68
|
-
פ� 495
|
69
68
|
פ 495
|
70
69
|
� 495
|
71
|
-
|
70
|
+
�� 495
|
71
|
+
פ� 495
|
72
|
+
_מ� 478
|
73
|
+
_מ 478
|
72
74
|
� 470
|
73
|
-
|
74
|
-
_מ� 461
|
75
|
-
ע� 460
|
75
|
+
ח 470
|
76
76
|
�� 460
|
77
|
-
|
78
|
-
|
79
|
-
כ 441
|
77
|
+
ע� 460
|
78
|
+
_ב 445
|
80
79
|
� 441
|
80
|
+
כ 441
|
81
|
+
כ� 441
|
82
|
+
�� 441
|
81
83
|
ת� 440
|
82
84
|
�� 440
|
83
|
-
_ב 433
|
84
85
|
ח� 432
|
85
86
|
�� 432
|
86
|
-
._ 423
|
87
87
|
, 422
|
88
88
|
,_ 422
|
89
89
|
ים 417
|
90
90
|
�ם 417
|
91
|
-
_ה
|
92
|
-
_ה�
|
93
|
-
_ב�
|
91
|
+
_ה 388
|
92
|
+
_ה� 388
|
93
|
+
_ב� 373
|
94
94
|
�ם_ 353
|
95
95
|
ים_ 353
|
96
|
-
ס� 348
|
97
96
|
�� 348
|
98
|
-
� 348
|
99
97
|
ס 348
|
98
|
+
� 348
|
99
|
+
ס� 348
|
100
100
|
�_ 328
|
101
101
|
ל_ 328
|
102
102
|
ות 317
|
103
103
|
�ת 317
|
104
|
+
_ש 310
|
105
|
+
_ש� 310
|
106
|
+
ג 309
|
104
107
|
� 309
|
105
108
|
�� 309
|
106
109
|
ג� 309
|
107
|
-
ג 309
|
108
|
-
ט 303
|
109
110
|
� 303
|
110
|
-
|
111
|
-
_
|
112
|
-
_ל
|
113
|
-
_ל� 253
|
111
|
+
ט 303
|
112
|
+
_ל� 258
|
113
|
+
_ל 258
|
114
114
|
�ל 250
|
115
115
|
ול 250
|
116
|
-
�ת_ 243
|
117
116
|
ות_ 243
|
117
|
+
�ת_ 243
|
118
118
|
�ה 239
|
119
119
|
יה 239
|
120
120
|
ט� 235
|
121
121
|
�� 235
|
122
122
|
לו 233
|
123
123
|
�ו 233
|
124
|
-
�ו� 217
|
125
124
|
לו� 217
|
126
|
-
|
127
|
-
|
128
|
-
_ע�
|
129
|
-
_ע 212
|
125
|
+
�ו� 217
|
126
|
+
_ע 216
|
127
|
+
_ע� 216
|
130
128
|
� 212
|
131
|
-
|
132
|
-
_ו 205
|
129
|
+
צ 212
|
133
130
|
_ו� 205
|
134
|
-
|
135
|
-
�י� 196
|
131
|
+
_ו 205
|
136
132
|
�י 196
|
133
|
+
�י� 196
|
137
134
|
רי 196
|
135
|
+
רי� 196
|
136
|
+
�ק 194
|
138
137
|
יק� 194
|
139
138
|
�ק� 194
|
140
|
-
�ק 194
|
141
139
|
יק 194
|
142
140
|
�ו 192
|
143
141
|
רו 192
|
144
142
|
ר_ 188
|
145
143
|
�_ 188
|
144
|
+
צ� 184
|
145
|
+
�� 184
|
146
146
|
�ו� 181
|
147
147
|
רו� 181
|
148
|
-
�ה_ 178
|
149
148
|
יה_ 178
|
150
|
-
�ה
|
149
|
+
�ה_ 178
|
151
150
|
בה 175
|
152
|
-
|
151
|
+
�ה 175
|
153
152
|
מו 174
|
154
|
-
|
153
|
+
�ו 174
|
155
154
|
י_ 173
|
156
|
-
|
155
|
+
�_ 173
|
157
156
|
ול� 172
|
157
|
+
�ל� 172
|
158
158
|
�ו 170
|
159
159
|
או 170
|
160
|
-
�י 169
|
161
160
|
די 169
|
161
|
+
�י 169
|
162
162
|
נו 166
|
163
163
|
�ו 166
|
164
|
-
נו� 161
|
165
164
|
�ו� 161
|
166
|
-
|
165
|
+
נו� 161
|
167
166
|
ית 160
|
168
|
-
|
169
|
-
_
|
170
|
-
|
167
|
+
�ת 160
|
168
|
+
_כ 157
|
169
|
+
_כ� 157
|
171
170
|
�ו 149
|
171
|
+
יו� 149
|
172
172
|
�ו� 149
|
173
173
|
יו 149
|
174
174
|
� 148
|
175
175
|
ז 148
|
176
176
|
די� 147
|
177
177
|
�י� 147
|
178
|
-
�� 142
|
179
178
|
ז� 142
|
180
|
-
|
179
|
+
�� 142
|
180
|
+
את 141
|
181
181
|
מו� 141
|
182
|
+
�ו� 141
|
182
183
|
�ת 141
|
183
|
-
את 141
|
184
184
|
�י 139
|
185
185
|
ני 139
|
186
186
|
�י 137
|
@@ -189,212 +189,212 @@ _כ
|
|
189
189
|
�ל 135
|
190
190
|
גי� 129
|
191
191
|
�י� 129
|
192
|
+
�נ 128
|
193
|
+
�ה 128
|
192
194
|
מה 128
|
193
|
-
ונ 128
|
194
|
-
�נ� 128
|
195
195
|
ונ� 128
|
196
|
-
|
197
|
-
|
196
|
+
�נ� 128
|
197
|
+
ונ 128
|
198
198
|
וג 125
|
199
199
|
�ג 125
|
200
|
-
וג� 125
|
201
200
|
�ג� 125
|
202
|
-
|
201
|
+
וג� 125
|
203
202
|
ו_ 124
|
204
|
-
|
203
|
+
_ת� 124
|
204
|
+
_ת 124
|
205
|
+
�_ 124
|
205
206
|
� 122
|
206
|
-
|
207
|
-
_ת 122
|
208
|
-
�י 121
|
207
|
+
ן 122
|
209
208
|
מי 121
|
210
|
-
|
209
|
+
�י 121
|
210
|
+
_ר� 120
|
211
211
|
ית_ 120
|
212
|
-
|
213
|
-
|
214
|
-
�י 118
|
212
|
+
�ת_ 120
|
213
|
+
_ר 120
|
215
214
|
פי 118
|
216
|
-
_ר 118
|
217
|
-
�י� 118
|
218
215
|
אם 118
|
216
|
+
�י 118
|
217
|
+
�י 118
|
218
|
+
_בה 118
|
219
219
|
�ם 118
|
220
|
-
_ר� 118
|
221
220
|
שי 118
|
221
|
+
�י� 118
|
222
|
+
פי� 118
|
222
223
|
�. 117
|
223
224
|
ה. 117
|
224
|
-
|
225
|
+
ה._ 117
|
226
|
+
�._ 117
|
227
|
+
_את 116
|
225
228
|
�י� 115
|
226
|
-
|
227
|
-
�י� 114
|
229
|
+
מי� 115
|
228
230
|
ני� 114
|
229
|
-
|
230
|
-
_את 113
|
231
|
+
�י� 114
|
231
232
|
ד_ 113
|
233
|
+
�_ 113
|
232
234
|
�י 112
|
233
235
|
לי 112
|
234
|
-
�ד� 111
|
235
|
-
�ד 111
|
236
236
|
מד� 111
|
237
237
|
מד 111
|
238
|
-
|
239
|
-
|
240
|
-
_ד�
|
241
|
-
|
238
|
+
�ד� 111
|
239
|
+
�ד 111
|
240
|
+
_ד� 110
|
241
|
+
_ד 110
|
242
242
|
�י� 107
|
243
243
|
�י 107
|
244
|
+
וי 107
|
245
|
+
וי� 107
|
244
246
|
אח 105
|
245
247
|
�ח 105
|
246
248
|
אח� 105
|
247
249
|
�ח� 105
|
248
|
-
�גי 104
|
249
250
|
�יה 104
|
250
|
-
�וג 104
|
251
|
-
�לו 104
|
252
251
|
�ה 104
|
252
|
+
�גי 104
|
253
|
+
�לו 104
|
254
|
+
�וג 104
|
253
255
|
קה 104
|
256
|
+
_ג 103
|
257
|
+
_ס� 103
|
258
|
+
_ג� 103
|
259
|
+
_ס 103
|
260
|
+
_אח 102
|
254
261
|
על 102
|
262
|
+
_על 102
|
263
|
+
_אם 102
|
255
264
|
�ל 102
|
256
|
-
_ס 101
|
257
265
|
�ר 101
|
258
266
|
ער 101
|
259
267
|
פו 101
|
260
268
|
�ו 101
|
261
|
-
_ס� 101
|
262
|
-
בי� 100
|
263
|
-
_ג� 100
|
264
|
-
�ל 100
|
265
269
|
�י� 100
|
270
|
+
בי� 100
|
271
|
+
�י 100
|
266
272
|
אל 100
|
273
|
+
�ל 100
|
267
274
|
בי 100
|
268
|
-
_ג 100
|
269
|
-
�י 100
|
270
|
-
_על 100
|
271
275
|
�י 99
|
272
|
-
ה._ 99
|
273
|
-
.� 99
|
274
276
|
יי 99
|
275
|
-
|
276
|
-
_מה 98
|
277
|
+
_מה 99
|
277
278
|
לי� 98
|
278
|
-
ן_ 98
|
279
279
|
�י� 98
|
280
|
+
ן_ 98
|
280
281
|
�_ 98
|
281
|
-
וד 97
|
282
|
-
רב 97
|
283
282
|
�ב 97
|
284
|
-
|
283
|
+
רב 97
|
284
|
+
וד 97
|
285
285
|
�ד 97
|
286
|
-
דת 96
|
287
|
-
חר 96
|
288
|
-
�ת 96
|
289
286
|
�ר 96
|
290
|
-
|
291
|
-
|
287
|
+
�ת 96
|
288
|
+
חר 96
|
289
|
+
_דת 96
|
290
|
+
דת 96
|
292
291
|
פו� 95
|
293
|
-
�י� 95
|
294
292
|
�ו� 95
|
295
|
-
|
296
|
-
|
297
|
-
|
293
|
+
שי� 95
|
294
|
+
�י� 95
|
295
|
+
_או 95
|
296
|
+
_ק 93
|
297
|
+
_ק� 93
|
298
|
+
כל� 92
|
298
299
|
ש_ 92
|
300
|
+
�ל� 92
|
299
301
|
�ר 92
|
300
|
-
כל� 92
|
301
|
-
�_ 92
|
302
302
|
�ה_ 92
|
303
|
-
|
303
|
+
בה_ 92
|
304
304
|
ור 92
|
305
|
-
_
|
306
|
-
|
305
|
+
�_ 92
|
306
|
+
קר 90
|
307
307
|
תי 90
|
308
|
-
�י 90
|
309
308
|
�ר 90
|
310
|
-
|
309
|
+
�י 90
|
310
|
+
_ח� 88
|
311
|
+
או� 88
|
311
312
|
�ב� 88
|
313
|
+
רב� 88
|
312
314
|
�ו� 88
|
313
|
-
�,_ 88
|
314
|
-
או� 88
|
315
315
|
ה,_ 88
|
316
316
|
ה, 88
|
317
|
+
_ח 88
|
317
318
|
�, 88
|
318
|
-
|
319
|
-
_ח� 87
|
319
|
+
�,_ 88
|
320
320
|
יש 87
|
321
|
-
_ח 87
|
322
|
-
�ש 87
|
323
321
|
�קה 87
|
322
|
+
�ש 87
|
324
323
|
בר 86
|
325
324
|
�ר 86
|
326
|
-
�_ 85
|
327
|
-
מה_ 85
|
328
|
-
�י� 85
|
329
325
|
א_ 85
|
326
|
+
�_ 85
|
330
327
|
�ה_ 85
|
328
|
+
�י� 85
|
331
329
|
יי� 85
|
332
|
-
|
333
|
-
�י� 84
|
330
|
+
מה_ 85
|
334
331
|
קי 84
|
335
332
|
הי� 84
|
333
|
+
�י 84
|
336
334
|
הי 84
|
335
|
+
�י� 84
|
337
336
|
�י 84
|
338
337
|
�ם 83
|
338
|
+
_גם 83
|
339
339
|
גם 83
|
340
|
+
_של 82
|
340
341
|
המ 82
|
341
|
-
�מ 82
|
342
|
-
של 82
|
343
342
|
�מ� 82
|
344
|
-
�י� 82
|
345
343
|
_המ 82
|
346
|
-
צי 82
|
347
|
-
המ� 82
|
348
|
-
�י 82
|
349
344
|
�ל 82
|
345
|
+
של 82
|
346
|
+
�י� 82
|
347
|
+
�מ 82
|
348
|
+
�י 82
|
349
|
+
המ� 82
|
350
|
+
צי 82
|
350
351
|
צי� 82
|
351
352
|
�י 80
|
352
|
-
_של 80
|
353
|
-
טי� 80
|
354
|
-
_גם 80
|
355
|
-
טי 80
|
356
353
|
�י� 80
|
357
|
-
|
358
|
-
|
354
|
+
טי 80
|
355
|
+
טי� 80
|
356
|
+
_צ 80
|
357
|
+
ב_ 79
|
358
|
+
ם._ 79
|
359
359
|
�ו� 79
|
360
|
+
�ו� 79
|
360
361
|
אם_ 79
|
361
|
-
|
362
|
+
�._ 79
|
363
|
+
�. 79
|
364
|
+
קו 79
|
362
365
|
�_ 79
|
363
|
-
�ו 79
|
364
|
-
�ו� 79
|
365
|
-
ב_ 79
|
366
366
|
�ם_ 79
|
367
|
-
|
367
|
+
�ו 79
|
368
368
|
שו� 79
|
369
|
+
קו� 79
|
369
370
|
שו 79
|
370
371
|
�ו 79
|
372
|
+
ם. 79
|
371
373
|
�י 78
|
372
374
|
אי 78
|
373
|
-
_צ� 78
|
374
|
-
_צ 78
|
375
375
|
אנ 77
|
376
|
-
אנ� 77
|
377
376
|
�נ 77
|
377
|
+
אנ� 77
|
378
378
|
�נ� 77
|
379
|
+
ת._ 76
|
380
|
+
ת. 76
|
379
381
|
�חר 76
|
382
|
+
�._ 76
|
380
383
|
�. 76
|
381
|
-
|
382
|
-
|
384
|
+
�כ� 75
|
385
|
+
ספ 75
|
386
|
+
�כ 75
|
383
387
|
�פ� 75
|
384
388
|
�פ 75
|
385
389
|
יכ� 75
|
386
|
-
�כ� 75
|
387
|
-
�כ 75
|
388
|
-
ספ 75
|
389
390
|
�ל_ 75
|
390
|
-
|
391
|
+
יכ 75
|
391
392
|
ספ� 75
|
392
|
-
|
393
|
-
ופ 74
|
393
|
+
ול_ 75
|
394
394
|
�א 74
|
395
|
+
ופ 74
|
395
396
|
נא 74
|
396
397
|
ופ� 74
|
398
|
+
�פ� 74
|
397
399
|
�פ 74
|
398
|
-
קי� 73
|
399
400
|
�י 73
|
400
|
-
את_ 73
|