scylla 0.7.5 → 0.8.0

data/test/fixtures/lms/french.lm

@@ -1,4 +1,4 @@
-_	32286
+_	32532
 e	11820
 s	6385
 a	6245
@@ -7,394 +7,394 @@ n	6115
 t	5635
 r	5480
 l	4711
-e_	4337
+e_	4461
 u	4260
 o	4196
 �	3243
 d	3178
-s_	2976
+s_	3066
 c	2591
 p	2396
-_d	2360
+_d	2392
 m	2162
 es	2138
-�	2115
 é	2115
-_l	1881
-t_	1784
-de	1595
-le	1539
-es_	1523
-en	1500
-on	1430
-_de	1338
-_e	1314
+�	2115
+_l	1892
+t_	1830
+de	1585
+es_	1556
+le	1533
+en	1497
+on	1429
+_de	1354
+_e	1349
+_p	1259
 nt	1258
 an	1256
-_p	1247
 ,	1245
-,_	1209
+,_	1217
 re	1163
-n_	1086
+n_	1116
 ti	1028
-is	982
-de_	975
-la	906
+de_	982
+is	981
 ra	900
-_de_	877
-a_	863
+la	900
+_de_	892
+a_	871
 g	846
-_s	834
+_s	841
 v	796
+_c	794
 f	777
-_c	773
-_a	746
+_a	776
 ai	735
-te	724
+te	723
 ent	708
 �	698
 _le	691
 �	688
 �	687
+le_	684
 q	683
-_la	679
-qu	672
+nt_	682
+_la	678
 ar	672
-le_	665
+qu	672
 in	664
-nt_	663
-et	663
-it	660
-se	659
-me	658
-�	652
-��	652
+et	662
+me	657
+se	656
+it	656
 ’	652
+��	652
+�	652
 ur	643
-ce	641
-la_	638
-_la_	637
+la_	642
+_la_	641
+ce	639
 ne	632
 b	630
-er	620
-ue	616
-__	614
-ns	601
+er	618
+ue	613
 io	600
 .	599
-u_	577
+ns	598
+._	592
+u_	591
 ion	572
-et_	556
-_�	545
+_�	571
+et_	567
+_m	560
+r_	550
 st	545
-r_	541
 ie	538
-_m	538
+_et	536
 ri	535
 pa	531
-_et	529
+_et_	530
 ran	527
-at	526
 au	525
+at	524
 co	521
-nc	520
-_et_	520
+nc	519
 les	515
-li	512
 ou	510
-tr	498
+li	508
+tr	497
 al	479
-ta	469
+les_	468
+ta	467
 ro	467
+re_	460
 h	459
-les_	457
-que	455
+que	452
+on_	433
 tio	431
-eu	429
+_f	430
 tion	429
+eu	429
 r�	428
-em	428
-_f	424
-re_	423
-on_	419
-_r	413
+_en	419
+_r	419
+em	413
 x	410
-_en	408
-_pa	404
-or	402
+_pa	408
+or	400
 rt	400
 po	397
-des	388
 ll	386
 si	382
-oi	380
+des	379
+oi	378
 pr	375
 anc	374
+ent_	374
+en_	373
 un	373
-ent_	372
-en_	368
-nce	367
-e,	362
-_t	362
-des_	362
-e,_	362
-._	362
-�	359
+_t	369
+nce	366
+des_	364
 è	359
-ne_	356
-ir	352
+�	359
+ne_	359
+ce_	355
 par	352
-_des	347
-_le_	345
-_co	345
-ce_	344
-du	343
-_des_	338
-ns_	338
-el	331
-l�	328
-_l�	328
-_l�	328
+ir	352
+_co	352
+e,_	351
+e,	351
+_des	349
+_le_	349
+ns_	346
+_des_	339
+du	339
 l�	328
-l’	328
+_l�	328
 _l’	328
-ui	327
+l�	328
+l’	328
+_l�	328
+el	327
 us	325
+ui	325
 F	324
-nd	323
 ré	322
 ati	321
-ance	311
+nd	320
+_F	317
+is_	314
+_en_	313
+ion_	312
 t�	311
-n�	308
-_F	307
+ance	311
+_,	310
+_les	307
 ve	307
-ion_	306
-om	306
-_en_	305
+n�	307
+om	305
 L	305
+�_	304
 so	304
-_les	304
-is_	302
-�_	299
-ue_	299
-é_	299
+_les_	304
+é_	304
+ue_	304
+_L	303
+_par	298
 iq	296
-_les_	296
 iqu	296
+i_	295
 �e	294
-_par	294
 ée	294
 ma	293
-men	292
-à	288
+_.	291
+men	291
+_._	289
 �	288
+à	288
+à_	287
+�_	287
 Fr	287
+_Fr	287
 ique	286
+_,_	286
 il	284
-_Fr	283
+_Fra	283
 Fra	283
 est	283
+_u	282
+_Fran	280
 Fran	280
-�_	280
-i_	280
-à_	280
-_Fra	279
+_à_	279
+_à	279
 mi	279
 pl	278
-_Fran	276
 té	276
-_.	276
-_u	274
-_,	274
-_à	273
-_à_	272
 ranc	272
-di	271
-na	270
 ment	270
+di	270
+na	269
 ut	269
 ss	268
-_du	268
 ci	267
+_au	266
+_n	265
+_du	265
+_un	263
+nce_	263
 �s	263
 és	263
+_pr	262
 ais	262
 du_	259
-_au	259
 atio	258
+que_	258
 ation	258
-_n	258
-_pr	258
-_un	257
-lu	257
 _du_	256
+tion_	256
 y	255
-nce_	255
-que_	253
-ol	252
+lu	255
 Franc	252
+ol	252
 rance	251
 rs	251
-tion_	250
 lle	250
+te_	250
 pe	248
-_,_	247
-s,	246
 con	244
-ic	244
-s,_	243
-te_	242
-d�	242
+_so	243
+s,	241
 ire	240
 ont	240
-_so	240
+d�	239
+s,_	239
 no	239
 res	239
 ons	238
+ic	238
 mo	236
-dé	233
+ance_	234
+dé	232
 i�	231
 eur	230
-ance_	228
-nn	227
-_qu	226
-_q	226
+_q	229
+_qu	229
+nn	226
 ant	226
 ct	223
-eme	223
-est_	218
-st_	218
-ni	217
-lo	215
+st_	222
+me_	220
+est_	220
+l_	216
+ni	216
+_é	216
+_po	215
 ux	215
+_es	213
+lo	213
 ch	213
-_po	213
 vi	212
-_é	209
-me_	209
-sa	207
-_L	207
-emen	205
+se_	209
+eme	208
 ement	205
+emen	205
+_o	204
 _d�	203
-se_	203
-ec	203
+_est	202
 pu	202
 ét	202
 �t	202
-_es	202
 d�	201
+sa	201
 d’	201
 d�	201
+ec	200
+_dé	198
+ur_	198
+_est_	196
+x_	196
 ale	196
-ur_	196
-to	196
-_dé	196
-da	195
-_o	193
-_d’	193
-_d�	193
-_d�	193
-_est	192
-A	191
-tre	191
+_d’	195
+_d�	195
+to	195
+_d�	195
+_i	194
+au_	193
 op	191
-au_	190
+A	191
+da	190
+tre	190
 _pl	190
 ul	189
-_est_	187
-x_	186
-ment_	186
-_re	185
-bl	185
+_re	188
+ment_	187
 fr	185
-_._	184
+bl	184
 mp	184
-_i	184
-ts	182
-tu	180
+ér	180
 ac	180
+tu	180
 �r	180
-ér	180
+ts	179
 rti	179
-_se	177
-ise	175
+_se	178
+ux_	174
+ise	174
 art	173
+_con	172
 iè	172
 ans	171
-ia	170
+_mo	171
+_g	171
 ç	170
 �	170
-l_	169
-_mo	169
-ux_	169
+ia	170
+_v	170
 ar_	168
 an�	167
-lus	167
 gr	167
-_con	167
+ont_	167
 ran�	166
+lus	166
+rs_	166
 P	166
 nç	165
 im	164
 _fr	163
-ont_	163
 une	163
-rs_	162
+us_	162
 son	162
-_g	162
+un_	162
 anç	161
-un_	161
 ranç	160
-su	160
-us_	160
-_v	160
 C	160
+su	159
+ique_	159
 ill	159
-plu	158
+_par_	158
+_au_	158
 cl	158
 par_	158
 _plu	158
-_par_	157
+plu	158
+_P	158
 as	157
-�a	156
-nça	156
 ça	156
-l�	154
-ique_	154
-mm	153
+nça	156
+�a	156
 ança	153
+mm	153
+çais	152
+nçai	152
+�ais	152
 plus	152
 çai	152
 �ai	152
-çais	152
-�ais	152
-nçai	152
-rr	152
 _plus	152
+ie_	151
+rr	151
 fra	151
-_au_	151
 ge	150
 m�	149
-une_	148
+une_	149
+l�	149
+té_	148
+ans_	147
 ag	147
-fi	146
 ell	146
 ions	146
+fi	146
 iv	145
-ie_	145
-dan	145
+_C	144
 ien	144
-ans_	144
-té_	143
+ts_	144
+dan	144
 ain	143
 _fra	143
+it_	143
 our	143
-ep	143
+res_	142
 elle	142
 fran	142
 _fran	142
-éc	141
-�c	141
-res_	140