talentbox-unidecoder 1.1.2

Sign up to get free protection for your applications and to get access to all the features.
Files changed (189) hide show
  1. data/Changelog.md +16 -0
  2. data/README.md +51 -0
  3. data/Rakefile +28 -0
  4. data/lib/unidecoder.rb +98 -0
  5. data/lib/unidecoder/data/x00.yml +257 -0
  6. data/lib/unidecoder/data/x01.yml +257 -0
  7. data/lib/unidecoder/data/x02.yml +256 -0
  8. data/lib/unidecoder/data/x03.yml +256 -0
  9. data/lib/unidecoder/data/x04.yml +256 -0
  10. data/lib/unidecoder/data/x05.yml +256 -0
  11. data/lib/unidecoder/data/x06.yml +256 -0
  12. data/lib/unidecoder/data/x07.yml +256 -0
  13. data/lib/unidecoder/data/x09.yml +256 -0
  14. data/lib/unidecoder/data/x0a.yml +256 -0
  15. data/lib/unidecoder/data/x0b.yml +256 -0
  16. data/lib/unidecoder/data/x0c.yml +256 -0
  17. data/lib/unidecoder/data/x0d.yml +256 -0
  18. data/lib/unidecoder/data/x0e.yml +256 -0
  19. data/lib/unidecoder/data/x0f.yml +256 -0
  20. data/lib/unidecoder/data/x10.yml +256 -0
  21. data/lib/unidecoder/data/x11.yml +256 -0
  22. data/lib/unidecoder/data/x12.yml +257 -0
  23. data/lib/unidecoder/data/x13.yml +256 -0
  24. data/lib/unidecoder/data/x14.yml +257 -0
  25. data/lib/unidecoder/data/x15.yml +257 -0
  26. data/lib/unidecoder/data/x16.yml +256 -0
  27. data/lib/unidecoder/data/x17.yml +256 -0
  28. data/lib/unidecoder/data/x18.yml +256 -0
  29. data/lib/unidecoder/data/x1e.yml +256 -0
  30. data/lib/unidecoder/data/x1f.yml +256 -0
  31. data/lib/unidecoder/data/x20.yml +256 -0
  32. data/lib/unidecoder/data/x21.yml +256 -0
  33. data/lib/unidecoder/data/x22.yml +256 -0
  34. data/lib/unidecoder/data/x23.yml +256 -0
  35. data/lib/unidecoder/data/x24.yml +256 -0
  36. data/lib/unidecoder/data/x25.yml +256 -0
  37. data/lib/unidecoder/data/x26.yml +256 -0
  38. data/lib/unidecoder/data/x27.yml +256 -0
  39. data/lib/unidecoder/data/x28.yml +257 -0
  40. data/lib/unidecoder/data/x2e.yml +256 -0
  41. data/lib/unidecoder/data/x2f.yml +256 -0
  42. data/lib/unidecoder/data/x30.yml +256 -0
  43. data/lib/unidecoder/data/x31.yml +256 -0
  44. data/lib/unidecoder/data/x32.yml +256 -0
  45. data/lib/unidecoder/data/x33.yml +256 -0
  46. data/lib/unidecoder/data/x4d.yml +256 -0
  47. data/lib/unidecoder/data/x4e.yml +257 -0
  48. data/lib/unidecoder/data/x4f.yml +257 -0
  49. data/lib/unidecoder/data/x50.yml +257 -0
  50. data/lib/unidecoder/data/x51.yml +257 -0
  51. data/lib/unidecoder/data/x52.yml +257 -0
  52. data/lib/unidecoder/data/x53.yml +257 -0
  53. data/lib/unidecoder/data/x54.yml +257 -0
  54. data/lib/unidecoder/data/x55.yml +257 -0
  55. data/lib/unidecoder/data/x56.yml +257 -0
  56. data/lib/unidecoder/data/x57.yml +257 -0
  57. data/lib/unidecoder/data/x58.yml +257 -0
  58. data/lib/unidecoder/data/x59.yml +257 -0
  59. data/lib/unidecoder/data/x5a.yml +257 -0
  60. data/lib/unidecoder/data/x5b.yml +257 -0
  61. data/lib/unidecoder/data/x5c.yml +257 -0
  62. data/lib/unidecoder/data/x5d.yml +257 -0
  63. data/lib/unidecoder/data/x5e.yml +257 -0
  64. data/lib/unidecoder/data/x5f.yml +257 -0
  65. data/lib/unidecoder/data/x60.yml +257 -0
  66. data/lib/unidecoder/data/x61.yml +257 -0
  67. data/lib/unidecoder/data/x62.yml +257 -0
  68. data/lib/unidecoder/data/x63.yml +257 -0
  69. data/lib/unidecoder/data/x64.yml +257 -0
  70. data/lib/unidecoder/data/x65.yml +257 -0
  71. data/lib/unidecoder/data/x66.yml +257 -0
  72. data/lib/unidecoder/data/x67.yml +257 -0
  73. data/lib/unidecoder/data/x68.yml +257 -0
  74. data/lib/unidecoder/data/x69.yml +257 -0
  75. data/lib/unidecoder/data/x6a.yml +257 -0
  76. data/lib/unidecoder/data/x6b.yml +257 -0
  77. data/lib/unidecoder/data/x6c.yml +257 -0
  78. data/lib/unidecoder/data/x6d.yml +257 -0
  79. data/lib/unidecoder/data/x6e.yml +257 -0
  80. data/lib/unidecoder/data/x6f.yml +257 -0
  81. data/lib/unidecoder/data/x70.yml +257 -0
  82. data/lib/unidecoder/data/x71.yml +257 -0
  83. data/lib/unidecoder/data/x72.yml +257 -0
  84. data/lib/unidecoder/data/x73.yml +257 -0
  85. data/lib/unidecoder/data/x74.yml +257 -0
  86. data/lib/unidecoder/data/x75.yml +257 -0
  87. data/lib/unidecoder/data/x76.yml +257 -0
  88. data/lib/unidecoder/data/x77.yml +257 -0
  89. data/lib/unidecoder/data/x78.yml +257 -0
  90. data/lib/unidecoder/data/x79.yml +257 -0
  91. data/lib/unidecoder/data/x7a.yml +257 -0
  92. data/lib/unidecoder/data/x7b.yml +257 -0
  93. data/lib/unidecoder/data/x7c.yml +257 -0
  94. data/lib/unidecoder/data/x7d.yml +257 -0
  95. data/lib/unidecoder/data/x7e.yml +257 -0
  96. data/lib/unidecoder/data/x7f.yml +257 -0
  97. data/lib/unidecoder/data/x80.yml +257 -0
  98. data/lib/unidecoder/data/x81.yml +257 -0
  99. data/lib/unidecoder/data/x82.yml +257 -0
  100. data/lib/unidecoder/data/x83.yml +257 -0
  101. data/lib/unidecoder/data/x84.yml +257 -0
  102. data/lib/unidecoder/data/x85.yml +257 -0
  103. data/lib/unidecoder/data/x86.yml +257 -0
  104. data/lib/unidecoder/data/x87.yml +257 -0
  105. data/lib/unidecoder/data/x88.yml +257 -0
  106. data/lib/unidecoder/data/x89.yml +257 -0
  107. data/lib/unidecoder/data/x8a.yml +257 -0
  108. data/lib/unidecoder/data/x8b.yml +257 -0
  109. data/lib/unidecoder/data/x8c.yml +257 -0
  110. data/lib/unidecoder/data/x8d.yml +257 -0
  111. data/lib/unidecoder/data/x8e.yml +257 -0
  112. data/lib/unidecoder/data/x8f.yml +257 -0
  113. data/lib/unidecoder/data/x90.yml +257 -0
  114. data/lib/unidecoder/data/x91.yml +257 -0
  115. data/lib/unidecoder/data/x92.yml +257 -0
  116. data/lib/unidecoder/data/x93.yml +257 -0
  117. data/lib/unidecoder/data/x94.yml +257 -0
  118. data/lib/unidecoder/data/x95.yml +257 -0
  119. data/lib/unidecoder/data/x96.yml +257 -0
  120. data/lib/unidecoder/data/x97.yml +257 -0
  121. data/lib/unidecoder/data/x98.yml +257 -0
  122. data/lib/unidecoder/data/x99.yml +257 -0
  123. data/lib/unidecoder/data/x9a.yml +257 -0
  124. data/lib/unidecoder/data/x9b.yml +257 -0
  125. data/lib/unidecoder/data/x9c.yml +257 -0
  126. data/lib/unidecoder/data/x9d.yml +257 -0
  127. data/lib/unidecoder/data/x9e.yml +257 -0
  128. data/lib/unidecoder/data/x9f.yml +256 -0
  129. data/lib/unidecoder/data/xa0.yml +257 -0
  130. data/lib/unidecoder/data/xa1.yml +257 -0
  131. data/lib/unidecoder/data/xa2.yml +257 -0
  132. data/lib/unidecoder/data/xa3.yml +257 -0
  133. data/lib/unidecoder/data/xa4.yml +256 -0
  134. data/lib/unidecoder/data/xac.yml +257 -0
  135. data/lib/unidecoder/data/xad.yml +257 -0
  136. data/lib/unidecoder/data/xae.yml +257 -0
  137. data/lib/unidecoder/data/xaf.yml +257 -0
  138. data/lib/unidecoder/data/xb0.yml +257 -0
  139. data/lib/unidecoder/data/xb1.yml +257 -0
  140. data/lib/unidecoder/data/xb2.yml +257 -0
  141. data/lib/unidecoder/data/xb3.yml +257 -0
  142. data/lib/unidecoder/data/xb4.yml +257 -0
  143. data/lib/unidecoder/data/xb5.yml +257 -0
  144. data/lib/unidecoder/data/xb6.yml +257 -0
  145. data/lib/unidecoder/data/xb7.yml +257 -0
  146. data/lib/unidecoder/data/xb8.yml +257 -0
  147. data/lib/unidecoder/data/xb9.yml +257 -0
  148. data/lib/unidecoder/data/xba.yml +257 -0
  149. data/lib/unidecoder/data/xbb.yml +257 -0
  150. data/lib/unidecoder/data/xbc.yml +257 -0
  151. data/lib/unidecoder/data/xbd.yml +257 -0
  152. data/lib/unidecoder/data/xbe.yml +257 -0
  153. data/lib/unidecoder/data/xbf.yml +257 -0
  154. data/lib/unidecoder/data/xc0.yml +257 -0
  155. data/lib/unidecoder/data/xc1.yml +257 -0
  156. data/lib/unidecoder/data/xc2.yml +257 -0
  157. data/lib/unidecoder/data/xc3.yml +257 -0
  158. data/lib/unidecoder/data/xc4.yml +257 -0
  159. data/lib/unidecoder/data/xc5.yml +257 -0
  160. data/lib/unidecoder/data/xc6.yml +257 -0
  161. data/lib/unidecoder/data/xc7.yml +257 -0
  162. data/lib/unidecoder/data/xc8.yml +257 -0
  163. data/lib/unidecoder/data/xc9.yml +257 -0
  164. data/lib/unidecoder/data/xca.yml +257 -0
  165. data/lib/unidecoder/data/xcb.yml +257 -0
  166. data/lib/unidecoder/data/xcc.yml +257 -0
  167. data/lib/unidecoder/data/xcd.yml +257 -0
  168. data/lib/unidecoder/data/xce.yml +257 -0
  169. data/lib/unidecoder/data/xcf.yml +257 -0
  170. data/lib/unidecoder/data/xd0.yml +257 -0
  171. data/lib/unidecoder/data/xd1.yml +257 -0
  172. data/lib/unidecoder/data/xd2.yml +257 -0
  173. data/lib/unidecoder/data/xd3.yml +257 -0
  174. data/lib/unidecoder/data/xd4.yml +257 -0
  175. data/lib/unidecoder/data/xd5.yml +257 -0
  176. data/lib/unidecoder/data/xd6.yml +257 -0
  177. data/lib/unidecoder/data/xd7.yml +256 -0
  178. data/lib/unidecoder/data/xf9.yml +257 -0
  179. data/lib/unidecoder/data/xfa.yml +256 -0
  180. data/lib/unidecoder/data/xfb.yml +257 -0
  181. data/lib/unidecoder/data/xfc.yml +257 -0
  182. data/lib/unidecoder/data/xfd.yml +256 -0
  183. data/lib/unidecoder/data/xfe.yml +257 -0
  184. data/lib/unidecoder/data/xff.yml +257 -0
  185. data/lib/unidecoder/version.rb +9 -0
  186. data/test/unicode_point_suite/basic_latin_test.rb +144 -0
  187. data/test/unicode_point_suite/codepoint_test_helper.rb +28 -0
  188. data/test/unidecoder_test.rb +114 -0
  189. metadata +238 -0
data/lib/unidecoder/data/x03.yml ADDED
@@ -0,0 +1,256 @@
1
+ ---
2
+ - ''
3
+ - ''
4
+ - ''
5
+ - ''
6
+ - ''
7
+ - ''
8
+ - ''
9
+ - ''
10
+ - ''
11
+ - ''
12
+ - ''
13
+ - ''
14
+ - ''
15
+ - ''
16
+ - ''
17
+ - ''
18
+ - ''
19
+ - ''
20
+ - ''
21
+ - ''
22
+ - ''
23
+ - ''
24
+ - ''
25
+ - ''
26
+ - ''
27
+ - ''
28
+ - ''
29
+ - ''
30
+ - ''
31
+ - ''
32
+ - ''
33
+ - ''
34
+ - ''
35
+ - ''
36
+ - ''
37
+ - ''
38
+ - ''
39
+ - ''
40
+ - ''
41
+ - ''
42
+ - ''
43
+ - ''
44
+ - ''
45
+ - ''
46
+ - ''
47
+ - ''
48
+ - ''
49
+ - ''
50
+ - ''
51
+ - ''
52
+ - ''
53
+ - ''
54
+ - ''
55
+ - ''
56
+ - ''
57
+ - ''
58
+ - ''
59
+ - ''
60
+ - ''
61
+ - ''
62
+ - ''
63
+ - ''
64
+ - ''
65
+ - ''
66
+ - ''
67
+ - ''
68
+ - ''
69
+ - ''
70
+ - ''
71
+ - ''
72
+ - ''
73
+ - ''
74
+ - ''
75
+ - ''
76
+ - ''
77
+ - ''
78
+ - ''
79
+ - ''
80
+ - ''
81
+ - '[?]'
82
+ - '[?]'
83
+ - '[?]'
84
+ - '[?]'
85
+ - '[?]'
86
+ - '[?]'
87
+ - '[?]'
88
+ - '[?]'
89
+ - '[?]'
90
+ - '[?]'
91
+ - '[?]'
92
+ - '[?]'
93
+ - '[?]'
94
+ - '[?]'
95
+ - '[?]'
96
+ - '[?]'
97
+ - '[?]'
98
+ - ''
99
+ - ''
100
+ - ''
101
+ - '[?]'
102
+ - '[?]'
103
+ - '[?]'
104
+ - '[?]'
105
+ - '[?]'
106
+ - '[?]'
107
+ - '[?]'
108
+ - '[?]'
109
+ - '[?]'
110
+ - '[?]'
111
+ - '[?]'
112
+ - '[?]'
113
+ - '[?]'
114
+ - '[?]'
115
+ - '[?]'
116
+ - '[?]'
117
+ - '[?]'
118
+ - "'"
119
+ - ','
120
+ - '[?]'
121
+ - '[?]'
122
+ - '[?]'
123
+ - '[?]'
124
+ - ''
125
+ - '[?]'
126
+ - '[?]'
127
+ - '[?]'
128
+ - '?'
129
+ - '[?]'
130
+ - '[?]'
131
+ - '[?]'
132
+ - '[?]'
133
+ - '[?]'
134
+ - ''
135
+ - ''
136
+ - A
137
+ - ;
138
+ - E
139
+ - E
140
+ - I
141
+ - '[?]'
142
+ - O
143
+ - '[?]'
144
+ - U
145
+ - O
146
+ - I
147
+ - A
148
+ - B
149
+ - G
150
+ - D
151
+ - E
152
+ - Z
153
+ - E
154
+ - Th
155
+ - I
156
+ - K
157
+ - L
158
+ - M
159
+ - N
160
+ - Ks
161
+ - O
162
+ - P
163
+ - R
164
+ - '[?]'
165
+ - S
166
+ - T
167
+ - U
168
+ - Ph
169
+ - Kh
170
+ - Ps
171
+ - O
172
+ - I
173
+ - U
174
+ - a
175
+ - e
176
+ - e
177
+ - i
178
+ - u
179
+ - a
180
+ - b
181
+ - g
182
+ - d
183
+ - e
184
+ - z
185
+ - e
186
+ - th
187
+ - i
188
+ - k
189
+ - l
190
+ - m
191
+ - n
192
+ - x
193
+ - o
194
+ - p
195
+ - r
196
+ - s
197
+ - s
198
+ - t
199
+ - u
200
+ - ph
201
+ - kh
202
+ - ps
203
+ - o
204
+ - i
205
+ - u
206
+ - o
207
+ - u
208
+ - o
209
+ - '[?]'
210
+ - b
211
+ - th
212
+ - U
213
+ - U
214
+ - U
215
+ - ph
216
+ - p
217
+ - '&'
218
+ - '[?]'
219
+ - '[?]'
220
+ - St
221
+ - st
222
+ - W
223
+ - w
224
+ - Q
225
+ - q
226
+ - Sp
227
+ - sp
228
+ - Sh
229
+ - sh
230
+ - F
231
+ - f
232
+ - Kh
233
+ - kh
234
+ - H
235
+ - h
236
+ - G
237
+ - g
238
+ - CH
239
+ - ch
240
+ - Ti
241
+ - ti
242
+ - k
243
+ - r
244
+ - c
245
+ - j
246
+ - '[?]'
247
+ - '[?]'
248
+ - '[?]'
249
+ - '[?]'
250
+ - '[?]'
251
+ - '[?]'
252
+ - '[?]'
253
+ - '[?]'
254
+ - '[?]'
255
+ - '[?]'
256
+ - '[?]'
data/lib/unidecoder/data/x04.yml ADDED
@@ -0,0 +1,256 @@
1
+ ---
2
+ - Ie
3
+ - Io
4
+ - Dj
5
+ - Gj
6
+ - Ie
7
+ - Dz
8
+ - I
9
+ - Yi
10
+ - J
11
+ - Lj
12
+ - Nj
13
+ - Tsh
14
+ - Kj
15
+ - I
16
+ - U
17
+ - Dzh
18
+ - A
19
+ - B
20
+ - V
21
+ - G
22
+ - D
23
+ - Ie
24
+ - Zh
25
+ - Z
26
+ - I
27
+ - I
28
+ - K
29
+ - L
30
+ - M
31
+ - N
32
+ - O
33
+ - P
34
+ - R
35
+ - S
36
+ - T
37
+ - U
38
+ - F
39
+ - Kh
40
+ - Ts
41
+ - Ch
42
+ - Sh
43
+ - Shch
44
+ - ''
45
+ - Y
46
+ - "'"
47
+ - E
48
+ - Iu
49
+ - Ia
50
+ - a
51
+ - b
52
+ - v
53
+ - gh
54
+ - d
55
+ - ie
56
+ - zh
57
+ - z
58
+ - i
59
+ - i
60
+ - k
61
+ - l
62
+ - m
63
+ - n
64
+ - o
65
+ - p
66
+ - r
67
+ - s
68
+ - t
69
+ - u
70
+ - f
71
+ - kh
72
+ - ts
73
+ - ch
74
+ - sh
75
+ - shch
76
+ - ''
77
+ - y
78
+ - "'"
79
+ - e
80
+ - iu
81
+ - ia
82
+ - ie
83
+ - io
84
+ - dj
85
+ - gj
86
+ - ie
87
+ - dz
88
+ - i
89
+ - yi
90
+ - j
91
+ - lj
92
+ - nj
93
+ - tsh
94
+ - kj
95
+ - i
96
+ - u
97
+ - dzh
98
+ - O
99
+ - o
100
+ - E
101
+ - e
102
+ - Ie
103
+ - ie
104
+ - E
105
+ - e
106
+ - Ie
107
+ - ie
108
+ - O
109
+ - o
110
+ - Io
111
+ - io
112
+ - Ks
113
+ - ks
114
+ - Ps
115
+ - ps
116
+ - F
117
+ - f
118
+ - Y
119
+ - y
120
+ - Y
121
+ - y
122
+ - u
123
+ - u
124
+ - O
125
+ - o
126
+ - O
127
+ - o
128
+ - Ot
129
+ - ot
130
+ - Q
131
+ - q
132
+ - '*1000*'
133
+ - ''
134
+ - ''
135
+ - ''
136
+ - ''
137
+ - '[?]'
138
+ - '*100.000*'
139
+ - '*1.000.000*'
140
+ - '[?]'
141
+ - '[?]'
142
+ - '"'
143
+ - '"'
144
+ - R'
145
+ - r'
146
+ - G'
147
+ - g'
148
+ - G'
149
+ - g'
150
+ - G'
151
+ - g'
152
+ - Zh'
153
+ - zh'
154
+ - Z'
155
+ - z'
156
+ - K'
157
+ - k'
158
+ - K'
159
+ - k'
160
+ - K'
161
+ - k'
162
+ - K'
163
+ - k'
164
+ - N'
165
+ - n'
166
+ - Ng
167
+ - ng
168
+ - P'
169
+ - p'
170
+ - Kh
171
+ - kh
172
+ - S'
173
+ - s'
174
+ - T'
175
+ - t'
176
+ - U
177
+ - u
178
+ - U'
179
+ - u'
180
+ - Kh'
181
+ - kh'
182
+ - Tts
183
+ - tts
184
+ - Ch'
185
+ - ch'
186
+ - Ch'
187
+ - ch'
188
+ - H
189
+ - h
190
+ - Ch
191
+ - ch
192
+ - Ch'
193
+ - ch'
194
+ - I
195
+ - Zh
196
+ - zh
197
+ - K'
198
+ - k'
199
+ - '[?]'
200
+ - '[?]'
201
+ - N'
202
+ - n'
203
+ - '[?]'
204
+ - '[?]'
205
+ - Ch
206
+ - ch
207
+ - '[?]'
208
+ - '[?]'
209
+ - '[?]'
210
+ - a
211
+ - a
212
+ - A
213
+ - a
214
+ - Ae
215
+ - ae
216
+ - Ie
217
+ - ie
218
+ - '@'
219
+ - '@'
220
+ - '@'
221
+ - '@'
222
+ - Zh
223
+ - zh
224
+ - Z
225
+ - z
226
+ - Dz
227
+ - dz
228
+ - I
229
+ - i
230
+ - I
231
+ - i
232
+ - O
233
+ - o
234
+ - O
235
+ - o
236
+ - O
237
+ - o
238
+ - E
239
+ - e
240
+ - U
241
+ - u
242
+ - U
243
+ - u
244
+ - U
245
+ - u
246
+ - Ch
247
+ - ch
248
+ - '[?]'
249
+ - '[?]'
250
+ - Y
251
+ - y
252
+ - '[?]'
253
+ - '[?]'
254
+ - '[?]'
255
+ - '[?]'
256
+ - '[?]'