talentbox-unidecoder 1.1.2

Sign up to get free protection for your applications and to get access to all the features.
Files changed (189) hide show
  1. data/Changelog.md +16 -0
  2. data/README.md +51 -0
  3. data/Rakefile +28 -0
  4. data/lib/unidecoder.rb +98 -0
  5. data/lib/unidecoder/data/x00.yml +257 -0
  6. data/lib/unidecoder/data/x01.yml +257 -0
  7. data/lib/unidecoder/data/x02.yml +256 -0
  8. data/lib/unidecoder/data/x03.yml +256 -0
  9. data/lib/unidecoder/data/x04.yml +256 -0
  10. data/lib/unidecoder/data/x05.yml +256 -0
  11. data/lib/unidecoder/data/x06.yml +256 -0
  12. data/lib/unidecoder/data/x07.yml +256 -0
  13. data/lib/unidecoder/data/x09.yml +256 -0
  14. data/lib/unidecoder/data/x0a.yml +256 -0
  15. data/lib/unidecoder/data/x0b.yml +256 -0
  16. data/lib/unidecoder/data/x0c.yml +256 -0
  17. data/lib/unidecoder/data/x0d.yml +256 -0
  18. data/lib/unidecoder/data/x0e.yml +256 -0
  19. data/lib/unidecoder/data/x0f.yml +256 -0
  20. data/lib/unidecoder/data/x10.yml +256 -0
  21. data/lib/unidecoder/data/x11.yml +256 -0
  22. data/lib/unidecoder/data/x12.yml +257 -0
  23. data/lib/unidecoder/data/x13.yml +256 -0
  24. data/lib/unidecoder/data/x14.yml +257 -0
  25. data/lib/unidecoder/data/x15.yml +257 -0
  26. data/lib/unidecoder/data/x16.yml +256 -0
  27. data/lib/unidecoder/data/x17.yml +256 -0
  28. data/lib/unidecoder/data/x18.yml +256 -0
  29. data/lib/unidecoder/data/x1e.yml +256 -0
  30. data/lib/unidecoder/data/x1f.yml +256 -0
  31. data/lib/unidecoder/data/x20.yml +256 -0
  32. data/lib/unidecoder/data/x21.yml +256 -0
  33. data/lib/unidecoder/data/x22.yml +256 -0
  34. data/lib/unidecoder/data/x23.yml +256 -0
  35. data/lib/unidecoder/data/x24.yml +256 -0
  36. data/lib/unidecoder/data/x25.yml +256 -0
  37. data/lib/unidecoder/data/x26.yml +256 -0
  38. data/lib/unidecoder/data/x27.yml +256 -0
  39. data/lib/unidecoder/data/x28.yml +257 -0
  40. data/lib/unidecoder/data/x2e.yml +256 -0
  41. data/lib/unidecoder/data/x2f.yml +256 -0
  42. data/lib/unidecoder/data/x30.yml +256 -0
  43. data/lib/unidecoder/data/x31.yml +256 -0
  44. data/lib/unidecoder/data/x32.yml +256 -0
  45. data/lib/unidecoder/data/x33.yml +256 -0
  46. data/lib/unidecoder/data/x4d.yml +256 -0
  47. data/lib/unidecoder/data/x4e.yml +257 -0
  48. data/lib/unidecoder/data/x4f.yml +257 -0
  49. data/lib/unidecoder/data/x50.yml +257 -0
  50. data/lib/unidecoder/data/x51.yml +257 -0
  51. data/lib/unidecoder/data/x52.yml +257 -0
  52. data/lib/unidecoder/data/x53.yml +257 -0
  53. data/lib/unidecoder/data/x54.yml +257 -0
  54. data/lib/unidecoder/data/x55.yml +257 -0
  55. data/lib/unidecoder/data/x56.yml +257 -0
  56. data/lib/unidecoder/data/x57.yml +257 -0
  57. data/lib/unidecoder/data/x58.yml +257 -0
  58. data/lib/unidecoder/data/x59.yml +257 -0
  59. data/lib/unidecoder/data/x5a.yml +257 -0
  60. data/lib/unidecoder/data/x5b.yml +257 -0
  61. data/lib/unidecoder/data/x5c.yml +257 -0
  62. data/lib/unidecoder/data/x5d.yml +257 -0
  63. data/lib/unidecoder/data/x5e.yml +257 -0
  64. data/lib/unidecoder/data/x5f.yml +257 -0
  65. data/lib/unidecoder/data/x60.yml +257 -0
  66. data/lib/unidecoder/data/x61.yml +257 -0
  67. data/lib/unidecoder/data/x62.yml +257 -0
  68. data/lib/unidecoder/data/x63.yml +257 -0
  69. data/lib/unidecoder/data/x64.yml +257 -0
  70. data/lib/unidecoder/data/x65.yml +257 -0
  71. data/lib/unidecoder/data/x66.yml +257 -0
  72. data/lib/unidecoder/data/x67.yml +257 -0
  73. data/lib/unidecoder/data/x68.yml +257 -0
  74. data/lib/unidecoder/data/x69.yml +257 -0
  75. data/lib/unidecoder/data/x6a.yml +257 -0
  76. data/lib/unidecoder/data/x6b.yml +257 -0
  77. data/lib/unidecoder/data/x6c.yml +257 -0
  78. data/lib/unidecoder/data/x6d.yml +257 -0
  79. data/lib/unidecoder/data/x6e.yml +257 -0
  80. data/lib/unidecoder/data/x6f.yml +257 -0
  81. data/lib/unidecoder/data/x70.yml +257 -0
  82. data/lib/unidecoder/data/x71.yml +257 -0
  83. data/lib/unidecoder/data/x72.yml +257 -0
  84. data/lib/unidecoder/data/x73.yml +257 -0
  85. data/lib/unidecoder/data/x74.yml +257 -0
  86. data/lib/unidecoder/data/x75.yml +257 -0
  87. data/lib/unidecoder/data/x76.yml +257 -0
  88. data/lib/unidecoder/data/x77.yml +257 -0
  89. data/lib/unidecoder/data/x78.yml +257 -0
  90. data/lib/unidecoder/data/x79.yml +257 -0
  91. data/lib/unidecoder/data/x7a.yml +257 -0
  92. data/lib/unidecoder/data/x7b.yml +257 -0
  93. data/lib/unidecoder/data/x7c.yml +257 -0
  94. data/lib/unidecoder/data/x7d.yml +257 -0
  95. data/lib/unidecoder/data/x7e.yml +257 -0
  96. data/lib/unidecoder/data/x7f.yml +257 -0
  97. data/lib/unidecoder/data/x80.yml +257 -0
  98. data/lib/unidecoder/data/x81.yml +257 -0
  99. data/lib/unidecoder/data/x82.yml +257 -0
  100. data/lib/unidecoder/data/x83.yml +257 -0
  101. data/lib/unidecoder/data/x84.yml +257 -0
  102. data/lib/unidecoder/data/x85.yml +257 -0
  103. data/lib/unidecoder/data/x86.yml +257 -0
  104. data/lib/unidecoder/data/x87.yml +257 -0
  105. data/lib/unidecoder/data/x88.yml +257 -0
  106. data/lib/unidecoder/data/x89.yml +257 -0
  107. data/lib/unidecoder/data/x8a.yml +257 -0
  108. data/lib/unidecoder/data/x8b.yml +257 -0
  109. data/lib/unidecoder/data/x8c.yml +257 -0
  110. data/lib/unidecoder/data/x8d.yml +257 -0
  111. data/lib/unidecoder/data/x8e.yml +257 -0
  112. data/lib/unidecoder/data/x8f.yml +257 -0
  113. data/lib/unidecoder/data/x90.yml +257 -0
  114. data/lib/unidecoder/data/x91.yml +257 -0
  115. data/lib/unidecoder/data/x92.yml +257 -0
  116. data/lib/unidecoder/data/x93.yml +257 -0
  117. data/lib/unidecoder/data/x94.yml +257 -0
  118. data/lib/unidecoder/data/x95.yml +257 -0
  119. data/lib/unidecoder/data/x96.yml +257 -0
  120. data/lib/unidecoder/data/x97.yml +257 -0
  121. data/lib/unidecoder/data/x98.yml +257 -0
  122. data/lib/unidecoder/data/x99.yml +257 -0
  123. data/lib/unidecoder/data/x9a.yml +257 -0
  124. data/lib/unidecoder/data/x9b.yml +257 -0
  125. data/lib/unidecoder/data/x9c.yml +257 -0
  126. data/lib/unidecoder/data/x9d.yml +257 -0
  127. data/lib/unidecoder/data/x9e.yml +257 -0
  128. data/lib/unidecoder/data/x9f.yml +256 -0
  129. data/lib/unidecoder/data/xa0.yml +257 -0
  130. data/lib/unidecoder/data/xa1.yml +257 -0
  131. data/lib/unidecoder/data/xa2.yml +257 -0
  132. data/lib/unidecoder/data/xa3.yml +257 -0
  133. data/lib/unidecoder/data/xa4.yml +256 -0
  134. data/lib/unidecoder/data/xac.yml +257 -0
  135. data/lib/unidecoder/data/xad.yml +257 -0
  136. data/lib/unidecoder/data/xae.yml +257 -0
  137. data/lib/unidecoder/data/xaf.yml +257 -0
  138. data/lib/unidecoder/data/xb0.yml +257 -0
  139. data/lib/unidecoder/data/xb1.yml +257 -0
  140. data/lib/unidecoder/data/xb2.yml +257 -0
  141. data/lib/unidecoder/data/xb3.yml +257 -0
  142. data/lib/unidecoder/data/xb4.yml +257 -0
  143. data/lib/unidecoder/data/xb5.yml +257 -0
  144. data/lib/unidecoder/data/xb6.yml +257 -0
  145. data/lib/unidecoder/data/xb7.yml +257 -0
  146. data/lib/unidecoder/data/xb8.yml +257 -0
  147. data/lib/unidecoder/data/xb9.yml +257 -0
  148. data/lib/unidecoder/data/xba.yml +257 -0
  149. data/lib/unidecoder/data/xbb.yml +257 -0
  150. data/lib/unidecoder/data/xbc.yml +257 -0
  151. data/lib/unidecoder/data/xbd.yml +257 -0
  152. data/lib/unidecoder/data/xbe.yml +257 -0
  153. data/lib/unidecoder/data/xbf.yml +257 -0
  154. data/lib/unidecoder/data/xc0.yml +257 -0
  155. data/lib/unidecoder/data/xc1.yml +257 -0
  156. data/lib/unidecoder/data/xc2.yml +257 -0
  157. data/lib/unidecoder/data/xc3.yml +257 -0
  158. data/lib/unidecoder/data/xc4.yml +257 -0
  159. data/lib/unidecoder/data/xc5.yml +257 -0
  160. data/lib/unidecoder/data/xc6.yml +257 -0
  161. data/lib/unidecoder/data/xc7.yml +257 -0
  162. data/lib/unidecoder/data/xc8.yml +257 -0
  163. data/lib/unidecoder/data/xc9.yml +257 -0
  164. data/lib/unidecoder/data/xca.yml +257 -0
  165. data/lib/unidecoder/data/xcb.yml +257 -0
  166. data/lib/unidecoder/data/xcc.yml +257 -0
  167. data/lib/unidecoder/data/xcd.yml +257 -0
  168. data/lib/unidecoder/data/xce.yml +257 -0
  169. data/lib/unidecoder/data/xcf.yml +257 -0
  170. data/lib/unidecoder/data/xd0.yml +257 -0
  171. data/lib/unidecoder/data/xd1.yml +257 -0
  172. data/lib/unidecoder/data/xd2.yml +257 -0
  173. data/lib/unidecoder/data/xd3.yml +257 -0
  174. data/lib/unidecoder/data/xd4.yml +257 -0
  175. data/lib/unidecoder/data/xd5.yml +257 -0
  176. data/lib/unidecoder/data/xd6.yml +257 -0
  177. data/lib/unidecoder/data/xd7.yml +256 -0
  178. data/lib/unidecoder/data/xf9.yml +257 -0
  179. data/lib/unidecoder/data/xfa.yml +256 -0
  180. data/lib/unidecoder/data/xfb.yml +257 -0
  181. data/lib/unidecoder/data/xfc.yml +257 -0
  182. data/lib/unidecoder/data/xfd.yml +256 -0
  183. data/lib/unidecoder/data/xfe.yml +257 -0
  184. data/lib/unidecoder/data/xff.yml +257 -0
  185. data/lib/unidecoder/version.rb +9 -0
  186. data/test/unicode_point_suite/basic_latin_test.rb +144 -0
  187. data/test/unicode_point_suite/codepoint_test_helper.rb +28 -0
  188. data/test/unidecoder_test.rb +114 -0
  189. metadata +238 -0
data/lib/unidecoder/data/x01.yml ADDED
@@ -0,0 +1,257 @@
1
+ ---
2
+ - A
3
+ - a
4
+ - A
5
+ - a
6
+ - A
7
+ - a
8
+ - C
9
+ - c
10
+ - C
11
+ - c
12
+ - C
13
+ - c
14
+ - C
15
+ - c
16
+ - D
17
+ - d
18
+ - D
19
+ - d
20
+ - E
21
+ - e
22
+ - E
23
+ - e
24
+ - E
25
+ - e
26
+ - E
27
+ - e
28
+ - E
29
+ - e
30
+ - G
31
+ - g
32
+ - G
33
+ - g
34
+ - G
35
+ - g
36
+ - G
37
+ - g
38
+ - H
39
+ - h
40
+ - H
41
+ - h
42
+ - I
43
+ - i
44
+ - I
45
+ - i
46
+ - I
47
+ - i
48
+ - I
49
+ - i
50
+ - I
51
+ - i
52
+ - IJ
53
+ - ''
54
+ - J
55
+ - j
56
+ - K
57
+ - k
58
+ - k
59
+ - L
60
+ - l
61
+ - L
62
+ - l
63
+ - L
64
+ - l
65
+ - L
66
+ - l
67
+ - L
68
+ - l
69
+ - N
70
+ - n
71
+ - N
72
+ - n
73
+ - N
74
+ - n
75
+ - "'n"
76
+ - ng
77
+ - NG
78
+ - O
79
+ - o
80
+ - O
81
+ - o
82
+ - O
83
+ - o
84
+ - OE
85
+ - oe
86
+ - R
87
+ - r
88
+ - R
89
+ - r
90
+ - R
91
+ - r
92
+ - S
93
+ - s
94
+ - S
95
+ - s
96
+ - S
97
+ - s
98
+ - S
99
+ - s
100
+ - T
101
+ - t
102
+ - T
103
+ - t
104
+ - T
105
+ - t
106
+ - U
107
+ - u
108
+ - U
109
+ - u
110
+ - U
111
+ - u
112
+ - U
113
+ - u
114
+ - U
115
+ - u
116
+ - U
117
+ - u
118
+ - W
119
+ - w
120
+ - Y
121
+ - y
122
+ - Y
123
+ - Z
124
+ - z
125
+ - Z
126
+ - z
127
+ - Z
128
+ - z
129
+ - s
130
+ - b
131
+ - B
132
+ - B
133
+ - b
134
+ - 6
135
+ - 6
136
+ - O
137
+ - C
138
+ - c
139
+ - D
140
+ - D
141
+ - D
142
+ - d
143
+ - d
144
+ - 3
145
+ - '@'
146
+ - E
147
+ - F
148
+ - f
149
+ - G
150
+ - G
151
+ - hv
152
+ - I
153
+ - I
154
+ - K
155
+ - k
156
+ - l
157
+ - l
158
+ - W
159
+ - N
160
+ - n
161
+ - O
162
+ - O
163
+ - o
164
+ - OI
165
+ - oi
166
+ - P
167
+ - p
168
+ - YR
169
+ - 2
170
+ - 2
171
+ - SH
172
+ - sh
173
+ - t
174
+ - T
175
+ - t
176
+ - T
177
+ - U
178
+ - u
179
+ - Y
180
+ - V
181
+ - Y
182
+ - y
183
+ - Z
184
+ - z
185
+ - ZH
186
+ - ZH
187
+ - zh
188
+ - zh
189
+ - 2
190
+ - 5
191
+ - 5
192
+ - ts
193
+ - w
194
+ - '|'
195
+ - '||'
196
+ - '|='
197
+ - '!'
198
+ - DZ
199
+ - Dz
200
+ - dz
201
+ - LJ
202
+ - Lj
203
+ - lj
204
+ - NJ
205
+ - Nj
206
+ - nj
207
+ - A
208
+ - a
209
+ - I
210
+ - i
211
+ - O
212
+ - o
213
+ - U
214
+ - u
215
+ - U
216
+ - u
217
+ - U
218
+ - u
219
+ - U
220
+ - u
221
+ - U
222
+ - u
223
+ - '@'
224
+ - A
225
+ - a
226
+ - A
227
+ - a
228
+ - AE
229
+ - ae
230
+ - G
231
+ - g
232
+ - G
233
+ - g
234
+ - K
235
+ - k
236
+ - O
237
+ - o
238
+ - O
239
+ - o
240
+ - ZH
241
+ - zh
242
+ - j
243
+ - DZ
244
+ - D
245
+ - dz
246
+ - G
247
+ - g
248
+ - HV
249
+ - W
250
+ - N
251
+ - n
252
+ - A
253
+ - a
254
+ - AE
255
+ - ae
256
+ - O
257
+ - o
data/lib/unidecoder/data/x02.yml ADDED
@@ -0,0 +1,256 @@
1
+ ---
2
+ - A
3
+ - a
4
+ - A
5
+ - a
6
+ - E
7
+ - e
8
+ - E
9
+ - e
10
+ - I
11
+ - i
12
+ - I
13
+ - i
14
+ - O
15
+ - o
16
+ - O
17
+ - o
18
+ - R
19
+ - r
20
+ - R
21
+ - r
22
+ - U
23
+ - u
24
+ - U
25
+ - u
26
+ - S
27
+ - s
28
+ - T
29
+ - t
30
+ - Y
31
+ - y
32
+ - H
33
+ - h
34
+ - N
35
+ - d
36
+ - OU
37
+ - ou
38
+ - Z
39
+ - z
40
+ - A
41
+ - a
42
+ - E
43
+ - e
44
+ - O
45
+ - o
46
+ - O
47
+ - o
48
+ - O
49
+ - o
50
+ - O
51
+ - o
52
+ - Y
53
+ - y
54
+ - l
55
+ - n
56
+ - t
57
+ - j
58
+ - db
59
+ - qp
60
+ - A
61
+ - C
62
+ - c
63
+ - L
64
+ - T
65
+ - s
66
+ - z
67
+ - '?'
68
+ - '?'
69
+ - B
70
+ - U
71
+ - V
72
+ - E
73
+ - e
74
+ - J
75
+ - j
76
+ - Q
77
+ - q
78
+ - R
79
+ - r
80
+ - Y
81
+ - y
82
+ - a
83
+ - a
84
+ - a
85
+ - b
86
+ - o
87
+ - c
88
+ - d
89
+ - d
90
+ - e
91
+ - '@'
92
+ - '@'
93
+ - e
94
+ - e
95
+ - e
96
+ - e
97
+ - j
98
+ - g
99
+ - g
100
+ - g
101
+ - g
102
+ - u
103
+ - Y
104
+ - h
105
+ - h
106
+ - i
107
+ - i
108
+ - I
109
+ - l
110
+ - l
111
+ - l
112
+ - lZ
113
+ - W
114
+ - W
115
+ - m
116
+ - n
117
+ - n
118
+ - n
119
+ - o
120
+ - OE
121
+ - O
122
+ - F
123
+ - R
124
+ - R
125
+ - R
126
+ - R
127
+ - r
128
+ - r
129
+ - R
130
+ - R
131
+ - R
132
+ - s
133
+ - S
134
+ - j
135
+ - S
136
+ - S
137
+ - t
138
+ - t
139
+ - U
140
+ - U
141
+ - v
142
+ - '^'
143
+ - W
144
+ - Y
145
+ - Y
146
+ - z
147
+ - z
148
+ - Z
149
+ - Z
150
+ - '?'
151
+ - '?'
152
+ - '?'
153
+ - C
154
+ - '@'
155
+ - B
156
+ - E
157
+ - G
158
+ - H
159
+ - j
160
+ - k
161
+ - L
162
+ - q
163
+ - '?'
164
+ - '?'
165
+ - dz
166
+ - dZ
167
+ - dz
168
+ - ts
169
+ - tS
170
+ - tC
171
+ - fN
172
+ - ls
173
+ - lz
174
+ - WW
175
+ - ']]'
176
+ - h
177
+ - h
178
+ - k
179
+ - h
180
+ - j
181
+ - r
182
+ - r
183
+ - r
184
+ - r
185
+ - w
186
+ - y
187
+ - "'"
188
+ - '"'
189
+ - '`'
190
+ - "'"
191
+ - '`'
192
+ - '`'
193
+ - "'"
194
+ - '?'
195
+ - '?'
196
+ - <
197
+ - '>'
198
+ - '^'
199
+ - V
200
+ - '^'
201
+ - V
202
+ - "'"
203
+ - '-'
204
+ - /
205
+ - '`'
206
+ - ','
207
+ - _
208
+ - \
209
+ - /
210
+ - ':'
211
+ - .
212
+ - '`'
213
+ - "'"
214
+ - '^'
215
+ - V
216
+ - +
217
+ - '-'
218
+ - V
219
+ - .
220
+ - '@'
221
+ - ','
222
+ - '~'
223
+ - '"'
224
+ - R
225
+ - X
226
+ - G
227
+ - l
228
+ - s
229
+ - x
230
+ - '?'
231
+ - ''
232
+ - ''
233
+ - ''
234
+ - ''
235
+ - ''
236
+ - ''
237
+ - ''
238
+ - V
239
+ - '='
240
+ - '"'
241
+ - '[?]'
242
+ - '[?]'
243
+ - '[?]'
244
+ - '[?]'
245
+ - '[?]'
246
+ - '[?]'
247
+ - '[?]'
248
+ - '[?]'
249
+ - '[?]'
250
+ - '[?]'
251
+ - '[?]'
252
+ - '[?]'
253
+ - '[?]'
254
+ - '[?]'
255
+ - '[?]'
256
+ - '[?]'