blackwinter-unidecoder 1.1.1.1

Sign up to get free protection for your applications and to get access to all the features.
Files changed (190) hide show
  1. checksums.yaml +7 -0
  2. data/Changelog.md +16 -0
  3. data/README.md +51 -0
  4. data/Rakefile +28 -0
  5. data/lib/unidecoder.rb +98 -0
  6. data/lib/unidecoder/data/x00.yml +257 -0
  7. data/lib/unidecoder/data/x01.yml +257 -0
  8. data/lib/unidecoder/data/x02.yml +256 -0
  9. data/lib/unidecoder/data/x03.yml +256 -0
  10. data/lib/unidecoder/data/x04.yml +256 -0
  11. data/lib/unidecoder/data/x05.yml +256 -0
  12. data/lib/unidecoder/data/x06.yml +256 -0
  13. data/lib/unidecoder/data/x07.yml +256 -0
  14. data/lib/unidecoder/data/x09.yml +256 -0
  15. data/lib/unidecoder/data/x0a.yml +256 -0
  16. data/lib/unidecoder/data/x0b.yml +256 -0
  17. data/lib/unidecoder/data/x0c.yml +256 -0
  18. data/lib/unidecoder/data/x0d.yml +256 -0
  19. data/lib/unidecoder/data/x0e.yml +256 -0
  20. data/lib/unidecoder/data/x0f.yml +256 -0
  21. data/lib/unidecoder/data/x10.yml +256 -0
  22. data/lib/unidecoder/data/x11.yml +256 -0
  23. data/lib/unidecoder/data/x12.yml +257 -0
  24. data/lib/unidecoder/data/x13.yml +256 -0
  25. data/lib/unidecoder/data/x14.yml +257 -0
  26. data/lib/unidecoder/data/x15.yml +257 -0
  27. data/lib/unidecoder/data/x16.yml +256 -0
  28. data/lib/unidecoder/data/x17.yml +256 -0
  29. data/lib/unidecoder/data/x18.yml +256 -0
  30. data/lib/unidecoder/data/x1e.yml +256 -0
  31. data/lib/unidecoder/data/x1f.yml +256 -0
  32. data/lib/unidecoder/data/x20.yml +256 -0
  33. data/lib/unidecoder/data/x21.yml +256 -0
  34. data/lib/unidecoder/data/x22.yml +256 -0
  35. data/lib/unidecoder/data/x23.yml +256 -0
  36. data/lib/unidecoder/data/x24.yml +256 -0
  37. data/lib/unidecoder/data/x25.yml +256 -0
  38. data/lib/unidecoder/data/x26.yml +256 -0
  39. data/lib/unidecoder/data/x27.yml +256 -0
  40. data/lib/unidecoder/data/x28.yml +257 -0
  41. data/lib/unidecoder/data/x2e.yml +256 -0
  42. data/lib/unidecoder/data/x2f.yml +256 -0
  43. data/lib/unidecoder/data/x30.yml +256 -0
  44. data/lib/unidecoder/data/x31.yml +256 -0
  45. data/lib/unidecoder/data/x32.yml +256 -0
  46. data/lib/unidecoder/data/x33.yml +256 -0
  47. data/lib/unidecoder/data/x4d.yml +256 -0
  48. data/lib/unidecoder/data/x4e.yml +257 -0
  49. data/lib/unidecoder/data/x4f.yml +257 -0
  50. data/lib/unidecoder/data/x50.yml +257 -0
  51. data/lib/unidecoder/data/x51.yml +257 -0
  52. data/lib/unidecoder/data/x52.yml +257 -0
  53. data/lib/unidecoder/data/x53.yml +257 -0
  54. data/lib/unidecoder/data/x54.yml +257 -0
  55. data/lib/unidecoder/data/x55.yml +257 -0
  56. data/lib/unidecoder/data/x56.yml +257 -0
  57. data/lib/unidecoder/data/x57.yml +257 -0
  58. data/lib/unidecoder/data/x58.yml +257 -0
  59. data/lib/unidecoder/data/x59.yml +257 -0
  60. data/lib/unidecoder/data/x5a.yml +257 -0
  61. data/lib/unidecoder/data/x5b.yml +257 -0
  62. data/lib/unidecoder/data/x5c.yml +257 -0
  63. data/lib/unidecoder/data/x5d.yml +257 -0
  64. data/lib/unidecoder/data/x5e.yml +257 -0
  65. data/lib/unidecoder/data/x5f.yml +257 -0
  66. data/lib/unidecoder/data/x60.yml +257 -0
  67. data/lib/unidecoder/data/x61.yml +257 -0
  68. data/lib/unidecoder/data/x62.yml +257 -0
  69. data/lib/unidecoder/data/x63.yml +257 -0
  70. data/lib/unidecoder/data/x64.yml +257 -0
  71. data/lib/unidecoder/data/x65.yml +257 -0
  72. data/lib/unidecoder/data/x66.yml +257 -0
  73. data/lib/unidecoder/data/x67.yml +257 -0
  74. data/lib/unidecoder/data/x68.yml +257 -0
  75. data/lib/unidecoder/data/x69.yml +257 -0
  76. data/lib/unidecoder/data/x6a.yml +257 -0
  77. data/lib/unidecoder/data/x6b.yml +257 -0
  78. data/lib/unidecoder/data/x6c.yml +257 -0
  79. data/lib/unidecoder/data/x6d.yml +257 -0
  80. data/lib/unidecoder/data/x6e.yml +257 -0
  81. data/lib/unidecoder/data/x6f.yml +257 -0
  82. data/lib/unidecoder/data/x70.yml +257 -0
  83. data/lib/unidecoder/data/x71.yml +257 -0
  84. data/lib/unidecoder/data/x72.yml +257 -0
  85. data/lib/unidecoder/data/x73.yml +257 -0
  86. data/lib/unidecoder/data/x74.yml +257 -0
  87. data/lib/unidecoder/data/x75.yml +257 -0
  88. data/lib/unidecoder/data/x76.yml +257 -0
  89. data/lib/unidecoder/data/x77.yml +257 -0
  90. data/lib/unidecoder/data/x78.yml +257 -0
  91. data/lib/unidecoder/data/x79.yml +257 -0
  92. data/lib/unidecoder/data/x7a.yml +257 -0
  93. data/lib/unidecoder/data/x7b.yml +257 -0
  94. data/lib/unidecoder/data/x7c.yml +257 -0
  95. data/lib/unidecoder/data/x7d.yml +257 -0
  96. data/lib/unidecoder/data/x7e.yml +257 -0
  97. data/lib/unidecoder/data/x7f.yml +257 -0
  98. data/lib/unidecoder/data/x80.yml +257 -0
  99. data/lib/unidecoder/data/x81.yml +257 -0
  100. data/lib/unidecoder/data/x82.yml +257 -0
  101. data/lib/unidecoder/data/x83.yml +257 -0
  102. data/lib/unidecoder/data/x84.yml +257 -0
  103. data/lib/unidecoder/data/x85.yml +257 -0
  104. data/lib/unidecoder/data/x86.yml +257 -0
  105. data/lib/unidecoder/data/x87.yml +257 -0
  106. data/lib/unidecoder/data/x88.yml +257 -0
  107. data/lib/unidecoder/data/x89.yml +257 -0
  108. data/lib/unidecoder/data/x8a.yml +257 -0
  109. data/lib/unidecoder/data/x8b.yml +257 -0
  110. data/lib/unidecoder/data/x8c.yml +257 -0
  111. data/lib/unidecoder/data/x8d.yml +257 -0
  112. data/lib/unidecoder/data/x8e.yml +257 -0
  113. data/lib/unidecoder/data/x8f.yml +257 -0
  114. data/lib/unidecoder/data/x90.yml +257 -0
  115. data/lib/unidecoder/data/x91.yml +257 -0
  116. data/lib/unidecoder/data/x92.yml +257 -0
  117. data/lib/unidecoder/data/x93.yml +257 -0
  118. data/lib/unidecoder/data/x94.yml +257 -0
  119. data/lib/unidecoder/data/x95.yml +257 -0
  120. data/lib/unidecoder/data/x96.yml +257 -0
  121. data/lib/unidecoder/data/x97.yml +257 -0
  122. data/lib/unidecoder/data/x98.yml +257 -0
  123. data/lib/unidecoder/data/x99.yml +257 -0
  124. data/lib/unidecoder/data/x9a.yml +257 -0
  125. data/lib/unidecoder/data/x9b.yml +257 -0
  126. data/lib/unidecoder/data/x9c.yml +257 -0
  127. data/lib/unidecoder/data/x9d.yml +257 -0
  128. data/lib/unidecoder/data/x9e.yml +257 -0
  129. data/lib/unidecoder/data/x9f.yml +256 -0
  130. data/lib/unidecoder/data/xa0.yml +257 -0
  131. data/lib/unidecoder/data/xa1.yml +257 -0
  132. data/lib/unidecoder/data/xa2.yml +257 -0
  133. data/lib/unidecoder/data/xa3.yml +257 -0
  134. data/lib/unidecoder/data/xa4.yml +256 -0
  135. data/lib/unidecoder/data/xac.yml +257 -0
  136. data/lib/unidecoder/data/xad.yml +257 -0
  137. data/lib/unidecoder/data/xae.yml +257 -0
  138. data/lib/unidecoder/data/xaf.yml +257 -0
  139. data/lib/unidecoder/data/xb0.yml +257 -0
  140. data/lib/unidecoder/data/xb1.yml +257 -0
  141. data/lib/unidecoder/data/xb2.yml +257 -0
  142. data/lib/unidecoder/data/xb3.yml +257 -0
  143. data/lib/unidecoder/data/xb4.yml +257 -0
  144. data/lib/unidecoder/data/xb5.yml +257 -0
  145. data/lib/unidecoder/data/xb6.yml +257 -0
  146. data/lib/unidecoder/data/xb7.yml +257 -0
  147. data/lib/unidecoder/data/xb8.yml +257 -0
  148. data/lib/unidecoder/data/xb9.yml +257 -0
  149. data/lib/unidecoder/data/xba.yml +257 -0
  150. data/lib/unidecoder/data/xbb.yml +257 -0
  151. data/lib/unidecoder/data/xbc.yml +257 -0
  152. data/lib/unidecoder/data/xbd.yml +257 -0
  153. data/lib/unidecoder/data/xbe.yml +257 -0
  154. data/lib/unidecoder/data/xbf.yml +257 -0
  155. data/lib/unidecoder/data/xc0.yml +257 -0
  156. data/lib/unidecoder/data/xc1.yml +257 -0
  157. data/lib/unidecoder/data/xc2.yml +257 -0
  158. data/lib/unidecoder/data/xc3.yml +257 -0
  159. data/lib/unidecoder/data/xc4.yml +257 -0
  160. data/lib/unidecoder/data/xc5.yml +257 -0
  161. data/lib/unidecoder/data/xc6.yml +257 -0
  162. data/lib/unidecoder/data/xc7.yml +257 -0
  163. data/lib/unidecoder/data/xc8.yml +257 -0
  164. data/lib/unidecoder/data/xc9.yml +257 -0
  165. data/lib/unidecoder/data/xca.yml +257 -0
  166. data/lib/unidecoder/data/xcb.yml +257 -0
  167. data/lib/unidecoder/data/xcc.yml +257 -0
  168. data/lib/unidecoder/data/xcd.yml +257 -0
  169. data/lib/unidecoder/data/xce.yml +257 -0
  170. data/lib/unidecoder/data/xcf.yml +257 -0
  171. data/lib/unidecoder/data/xd0.yml +257 -0
  172. data/lib/unidecoder/data/xd1.yml +257 -0
  173. data/lib/unidecoder/data/xd2.yml +257 -0
  174. data/lib/unidecoder/data/xd3.yml +257 -0
  175. data/lib/unidecoder/data/xd4.yml +257 -0
  176. data/lib/unidecoder/data/xd5.yml +257 -0
  177. data/lib/unidecoder/data/xd6.yml +257 -0
  178. data/lib/unidecoder/data/xd7.yml +256 -0
  179. data/lib/unidecoder/data/xf9.yml +257 -0
  180. data/lib/unidecoder/data/xfa.yml +256 -0
  181. data/lib/unidecoder/data/xfb.yml +257 -0
  182. data/lib/unidecoder/data/xfc.yml +257 -0
  183. data/lib/unidecoder/data/xfd.yml +256 -0
  184. data/lib/unidecoder/data/xfe.yml +257 -0
  185. data/lib/unidecoder/data/xff.yml +257 -0
  186. data/lib/unidecoder/version.rb +9 -0
  187. data/test/unicode_point_suite/basic_latin_test.rb +144 -0
  188. data/test/unicode_point_suite/codepoint_test_helper.rb +28 -0
  189. data/test/unidecoder_test.rb +114 -0
  190. metadata +236 -0
data/lib/unidecoder/data/x30.yml ADDED
@@ -0,0 +1,256 @@
1
+ ---
2
+ - ' '
3
+ - ', '
4
+ - '. '
5
+ - '"'
6
+ - '[JIS]'
7
+ - '"'
8
+ - /
9
+ - 0
10
+ - <
11
+ - '>'
12
+ - <<
13
+ - '>> '
14
+ - '['
15
+ - '] '
16
+ - '{'
17
+ - '} '
18
+ - '[('
19
+ - ')] '
20
+ - '@'
21
+ - 'X '
22
+ - '['
23
+ - '] '
24
+ - '[['
25
+ - ']] '
26
+ - ((
27
+ - ')) '
28
+ - '[['
29
+ - ']] '
30
+ - '~ '
31
+ - '``'
32
+ - "''"
33
+ - ',,'
34
+ - '@'
35
+ - 1
36
+ - 2
37
+ - 3
38
+ - 4
39
+ - 5
40
+ - 6
41
+ - 7
42
+ - 8
43
+ - 9
44
+ - ''
45
+ - ''
46
+ - ''
47
+ - ''
48
+ - ''
49
+ - ''
50
+ - '~'
51
+ - +
52
+ - +
53
+ - +
54
+ - +
55
+ - ''
56
+ - '@'
57
+ - ' // '
58
+ - +10+
59
+ - +20+
60
+ - +30+
61
+ - '[?]'
62
+ - '[?]'
63
+ - '[?]'
64
+ - ''
65
+ - ''
66
+ - '[?]'
67
+ - a
68
+ - a
69
+ - i
70
+ - i
71
+ - u
72
+ - u
73
+ - e
74
+ - e
75
+ - o
76
+ - o
77
+ - ka
78
+ - ga
79
+ - ki
80
+ - gi
81
+ - ku
82
+ - gu
83
+ - ke
84
+ - ge
85
+ - ko
86
+ - go
87
+ - sa
88
+ - za
89
+ - si
90
+ - zi
91
+ - su
92
+ - zu
93
+ - se
94
+ - ze
95
+ - so
96
+ - zo
97
+ - ta
98
+ - da
99
+ - ti
100
+ - di
101
+ - tu
102
+ - tu
103
+ - du
104
+ - te
105
+ - de
106
+ - to
107
+ - do
108
+ - na
109
+ - ni
110
+ - nu
111
+ - ne
112
+ - no
113
+ - ha
114
+ - ba
115
+ - pa
116
+ - hi
117
+ - bi
118
+ - pi
119
+ - hu
120
+ - bu
121
+ - pu
122
+ - he
123
+ - be
124
+ - pe
125
+ - ho
126
+ - bo
127
+ - po
128
+ - ma
129
+ - mi
130
+ - mu
131
+ - me
132
+ - mo
133
+ - ya
134
+ - ya
135
+ - yu
136
+ - yu
137
+ - yo
138
+ - yo
139
+ - ra
140
+ - ri
141
+ - ru
142
+ - re
143
+ - ro
144
+ - wa
145
+ - wa
146
+ - wi
147
+ - we
148
+ - wo
149
+ - n
150
+ - vu
151
+ - '[?]'
152
+ - '[?]'
153
+ - '[?]'
154
+ - '[?]'
155
+ - ''
156
+ - ''
157
+ - ''
158
+ - ''
159
+ - '"'
160
+ - '"'
161
+ - '[?]'
162
+ - '[?]'
163
+ - a
164
+ - a
165
+ - i
166
+ - i
167
+ - u
168
+ - u
169
+ - e
170
+ - e
171
+ - o
172
+ - o
173
+ - ka
174
+ - ga
175
+ - ki
176
+ - gi
177
+ - ku
178
+ - gu
179
+ - ke
180
+ - ge
181
+ - ko
182
+ - go
183
+ - sa
184
+ - za
185
+ - si
186
+ - zi
187
+ - su
188
+ - zu
189
+ - se
190
+ - ze
191
+ - so
192
+ - zo
193
+ - ta
194
+ - da
195
+ - ti
196
+ - di
197
+ - tu
198
+ - tu
199
+ - du
200
+ - te
201
+ - de
202
+ - to
203
+ - do
204
+ - na
205
+ - ni
206
+ - nu
207
+ - ne
208
+ - no
209
+ - ha
210
+ - ba
211
+ - pa
212
+ - hi
213
+ - bi
214
+ - pi
215
+ - hu
216
+ - bu
217
+ - pu
218
+ - he
219
+ - be
220
+ - pe
221
+ - ho
222
+ - bo
223
+ - po
224
+ - ma
225
+ - mi
226
+ - mu
227
+ - me
228
+ - mo
229
+ - ya
230
+ - ya
231
+ - yu
232
+ - yu
233
+ - yo
234
+ - yo
235
+ - ra
236
+ - ri
237
+ - ru
238
+ - re
239
+ - ro
240
+ - wa
241
+ - wa
242
+ - wi
243
+ - we
244
+ - wo
245
+ - n
246
+ - vu
247
+ - ka
248
+ - ke
249
+ - va
250
+ - vi
251
+ - ve
252
+ - vo
253
+ - ''
254
+ - ''
255
+ - '"'
256
+ - '"'
data/lib/unidecoder/data/x31.yml ADDED
@@ -0,0 +1,256 @@
1
+ ---
2
+ - '[?]'
3
+ - '[?]'
4
+ - '[?]'
5
+ - '[?]'
6
+ - '[?]'
7
+ - B
8
+ - P
9
+ - M
10
+ - F
11
+ - D
12
+ - T
13
+ - N
14
+ - L
15
+ - G
16
+ - K
17
+ - H
18
+ - J
19
+ - Q
20
+ - X
21
+ - ZH
22
+ - CH
23
+ - SH
24
+ - R
25
+ - Z
26
+ - C
27
+ - S
28
+ - A
29
+ - O
30
+ - E
31
+ - EH
32
+ - AI
33
+ - EI
34
+ - AU
35
+ - OU
36
+ - AN
37
+ - EN
38
+ - ANG
39
+ - ENG
40
+ - ER
41
+ - I
42
+ - U
43
+ - IU
44
+ - V
45
+ - NG
46
+ - GN
47
+ - '[?]'
48
+ - '[?]'
49
+ - '[?]'
50
+ - '[?]'
51
+ - g
52
+ - gg
53
+ - gs
54
+ - n
55
+ - nj
56
+ - nh
57
+ - d
58
+ - dd
59
+ - r
60
+ - lg
61
+ - lm
62
+ - lb
63
+ - ls
64
+ - lt
65
+ - lp
66
+ - rh
67
+ - m
68
+ - b
69
+ - bb
70
+ - bs
71
+ - s
72
+ - ss
73
+ - ''
74
+ - j
75
+ - jj
76
+ - c
77
+ - k
78
+ - t
79
+ - p
80
+ - h
81
+ - a
82
+ - ae
83
+ - ya
84
+ - yae
85
+ - eo
86
+ - e
87
+ - yeo
88
+ - ye
89
+ - o
90
+ - wa
91
+ - wae
92
+ - oe
93
+ - yo
94
+ - u
95
+ - weo
96
+ - we
97
+ - wi
98
+ - yu
99
+ - eu
100
+ - yi
101
+ - i
102
+ - ''
103
+ - nn
104
+ - nd
105
+ - ns
106
+ - nZ
107
+ - lgs
108
+ - ld
109
+ - lbs
110
+ - lZ
111
+ - lQ
112
+ - mb
113
+ - ms
114
+ - mZ
115
+ - mN
116
+ - bg
117
+ - ''
118
+ - bsg
119
+ - bst
120
+ - bj
121
+ - bt
122
+ - bN
123
+ - bbN
124
+ - sg
125
+ - sn
126
+ - sd
127
+ - sb
128
+ - sj
129
+ - Z
130
+ - ''
131
+ - N
132
+ - Ns
133
+ - NZ
134
+ - pN
135
+ - hh
136
+ - Q
137
+ - yo-ya
138
+ - yo-yae
139
+ - yo-i
140
+ - yu-yeo
141
+ - yu-ye
142
+ - yu-i
143
+ - U
144
+ - U-i
145
+ - '[?]'
146
+ - ''
147
+ - ''
148
+ - ''
149
+ - ''
150
+ - ''
151
+ - ''
152
+ - ''
153
+ - ''
154
+ - ''
155
+ - ''
156
+ - ''
157
+ - ''
158
+ - ''
159
+ - ''
160
+ - ''
161
+ - ''
162
+ - BU
163
+ - ZI
164
+ - JI
165
+ - GU
166
+ - EE
167
+ - ENN
168
+ - OO
169
+ - ONN
170
+ - IR
171
+ - ANN
172
+ - INN
173
+ - UNN
174
+ - IM
175
+ - NGG
176
+ - AINN
177
+ - AUNN
178
+ - AM
179
+ - OM
180
+ - ONG
181
+ - INNN
182
+ - P
183
+ - T
184
+ - K
185
+ - H
186
+ - '[?]'
187
+ - '[?]'
188
+ - '[?]'
189
+ - '[?]'
190
+ - '[?]'
191
+ - '[?]'
192
+ - '[?]'
193
+ - '[?]'
194
+ - '[?]'
195
+ - '[?]'
196
+ - '[?]'
197
+ - '[?]'
198
+ - '[?]'
199
+ - '[?]'
200
+ - '[?]'
201
+ - '[?]'
202
+ - '[?]'
203
+ - '[?]'
204
+ - '[?]'
205
+ - '[?]'
206
+ - '[?]'
207
+ - '[?]'
208
+ - '[?]'
209
+ - '[?]'
210
+ - '[?]'
211
+ - '[?]'
212
+ - '[?]'
213
+ - '[?]'
214
+ - '[?]'
215
+ - '[?]'
216
+ - '[?]'
217
+ - '[?]'
218
+ - '[?]'
219
+ - '[?]'
220
+ - '[?]'
221
+ - '[?]'
222
+ - '[?]'
223
+ - '[?]'
224
+ - '[?]'
225
+ - '[?]'
226
+ - '[?]'
227
+ - '[?]'
228
+ - '[?]'
229
+ - '[?]'
230
+ - '[?]'
231
+ - '[?]'
232
+ - '[?]'
233
+ - '[?]'
234
+ - '[?]'
235
+ - '[?]'
236
+ - '[?]'
237
+ - '[?]'
238
+ - '[?]'
239
+ - '[?]'
240
+ - '[?]'
241
+ - '[?]'
242
+ - '[?]'
243
+ - '[?]'
244
+ - '[?]'
245
+ - '[?]'
246
+ - '[?]'
247
+ - '[?]'
248
+ - '[?]'
249
+ - '[?]'
250
+ - '[?]'
251
+ - '[?]'
252
+ - '[?]'
253
+ - '[?]'
254
+ - '[?]'
255
+ - '[?]'
256
+ - '[?]'