lingo 1.8.0 → 1.8.1

Sign up to get free protection for your applications and to get access to all the features.
Files changed (100) hide show
  1. data/ChangeLog +13 -0
  2. data/README +49 -29
  3. data/Rakefile +28 -4
  4. data/TODO +2 -9
  5. data/bin/lingo +24 -0
  6. data/bin/lingoctl +24 -0
  7. data/de/lingo-dic.txt +559 -74
  8. data/info/gpl-hdr.txt +21 -24
  9. data/lib/lingo.rb +83 -112
  10. data/lib/lingo/agenda_item.rb +53 -0
  11. data/lib/lingo/attendee.rb +261 -0
  12. data/lib/lingo/attendee/abbreviator.rb +95 -97
  13. data/lib/lingo/attendee/debugger.rb +94 -93
  14. data/lib/lingo/attendee/decomposer.rb +76 -83
  15. data/lib/lingo/attendee/dehyphenizer.rb +141 -144
  16. data/lib/lingo/attendee/formatter.rb +65 -0
  17. data/lib/lingo/attendee/multi_worder.rb +302 -0
  18. data/lib/lingo/attendee/noneword_filter.rb +89 -84
  19. data/lib/lingo/attendee/object_filter.rb +91 -0
  20. data/lib/lingo/attendee/sequencer.rb +159 -158
  21. data/lib/lingo/attendee/synonymer.rb +81 -84
  22. data/lib/lingo/attendee/text_reader.rb +242 -0
  23. data/lib/lingo/attendee/text_writer.rb +169 -0
  24. data/lib/lingo/attendee/tokenizer.rb +192 -191
  25. data/lib/lingo/attendee/variator.rb +152 -156
  26. data/lib/lingo/attendee/vector_filter.rb +140 -135
  27. data/lib/lingo/attendee/word_searcher.rb +98 -0
  28. data/lib/lingo/buffered_attendee.rb +69 -0
  29. data/lib/lingo/cachable.rb +58 -0
  30. data/lib/lingo/call.rb +72 -0
  31. data/lib/lingo/cli.rb +26 -0
  32. data/lib/lingo/config.rb +23 -26
  33. data/lib/lingo/core_ext.rb +42 -0
  34. data/lib/lingo/ctl.rb +239 -173
  35. data/lib/lingo/database.rb +148 -496
  36. data/lib/lingo/database/crypter.rb +85 -0
  37. data/lib/lingo/database/gdbm_store.rb +49 -0
  38. data/lib/lingo/database/hash_store.rb +67 -0
  39. data/lib/lingo/database/libcdb_store.rb +58 -0
  40. data/lib/lingo/database/sdbm_store.rb +64 -0
  41. data/lib/lingo/database/show_progress.rb +81 -0
  42. data/lib/lingo/database/source.rb +134 -0
  43. data/lib/lingo/database/source/key_value.rb +62 -0
  44. data/lib/lingo/database/source/multi_key.rb +65 -0
  45. data/lib/lingo/database/source/multi_value.rb +65 -0
  46. data/lib/lingo/database/source/single_word.rb +60 -0
  47. data/lib/lingo/database/source/word_class.rb +64 -0
  48. data/lib/lingo/error.rb +122 -0
  49. data/lib/lingo/language.rb +78 -518
  50. data/lib/lingo/language/dictionary.rb +173 -0
  51. data/lib/lingo/language/grammar.rb +211 -0
  52. data/lib/lingo/language/lexical.rb +66 -0
  53. data/lib/lingo/language/lexical_hash.rb +88 -0
  54. data/lib/lingo/language/token.rb +48 -0
  55. data/lib/lingo/language/word.rb +130 -0
  56. data/lib/lingo/language/word_form.rb +83 -0
  57. data/lib/lingo/reportable.rb +59 -0
  58. data/lib/lingo/version.rb +1 -1
  59. data/lingo-all.cfg +14 -10
  60. data/lingo-call.cfg +5 -5
  61. data/lingo.cfg +14 -12
  62. data/lingo.rb +26 -0
  63. data/lir.cfg +13 -9
  64. data/spec/spec_helper.rb +1 -0
  65. data/test.cfg +11 -11
  66. data/test/attendee/ts_abbreviator.rb +0 -6
  67. data/test/attendee/ts_decomposer.rb +0 -6
  68. data/test/attendee/{ts_multiworder.rb → ts_multi_worder.rb} +1 -7
  69. data/test/attendee/ts_noneword_filter.rb +1 -7
  70. data/test/attendee/{ts_objectfilter.rb → ts_object_filter.rb} +1 -7
  71. data/test/attendee/ts_sequencer.rb +0 -6
  72. data/test/attendee/ts_synonymer.rb +0 -6
  73. data/test/attendee/{ts_textreader.rb → ts_text_reader.rb} +1 -7
  74. data/test/attendee/{ts_textwriter.rb → ts_text_writer.rb} +1 -7
  75. data/test/attendee/ts_tokenizer.rb +0 -6
  76. data/test/attendee/ts_variator.rb +0 -6
  77. data/test/attendee/ts_vector_filter.rb +1 -7
  78. data/test/attendee/{ts_wordsearcher.rb → ts_word_searcher.rb} +1 -7
  79. data/test/ref/artikel.non +2 -29
  80. data/test/ref/artikel.seq +13 -8
  81. data/test/ref/artikel.vec +30 -15
  82. data/test/ref/artikel.ven +29 -14
  83. data/test/ref/artikel.ver +58 -43
  84. data/test/ref/lir.csv +146 -145
  85. data/test/ref/lir.non +186 -210
  86. data/test/ref/lir.seq +54 -50
  87. data/test/test_helper.rb +41 -36
  88. data/test/ts_database.rb +12 -11
  89. data/test/ts_language.rb +118 -68
  90. metadata +67 -29
  91. data/lib/lingo/attendee/multiworder.rb +0 -301
  92. data/lib/lingo/attendee/objectfilter.rb +0 -86
  93. data/lib/lingo/attendee/textreader.rb +0 -237
  94. data/lib/lingo/attendee/textwriter.rb +0 -196
  95. data/lib/lingo/attendee/wordsearcher.rb +0 -96
  96. data/lib/lingo/attendees.rb +0 -289
  97. data/lib/lingo/const.rb +0 -131
  98. data/lib/lingo/modules.rb +0 -98
  99. data/lib/lingo/types.rb +0 -285
  100. data/lib/lingo/utilities.rb +0 -40
@@ -2,11 +2,7 @@
2
2
 
3
3
  require_relative '../test_helper'
4
4
 
5
- ################################################################################
6
- #
7
- # Attendee Vector_filter
8
- #
9
- class TestAttendeeVector_filter < AttendeeTestCase
5
+ class TestAttendeeVectorFilter < AttendeeTestCase
10
6
 
11
7
  def setup
12
8
  @input = [
@@ -58,5 +54,3 @@ class TestAttendeeVector_filter < AttendeeTestCase
58
54
  end
59
55
 
60
56
  end
61
- #
62
- ################################################################################
@@ -2,11 +2,7 @@
2
2
 
3
3
  require_relative '../test_helper'
4
4
 
5
- ################################################################################
6
- #
7
- # Attendee Wordsearcher
8
- #
9
- class TestAttendeeWordsearcher < AttendeeTestCase
5
+ class TestAttendeeWordSearcher < AttendeeTestCase
10
6
 
11
7
  def setup
12
8
  @test_synonyms = [
@@ -115,5 +111,3 @@ class TestAttendeeWordsearcher < AttendeeTestCase
115
111
  end
116
112
 
117
113
  end
118
- #
119
- ################################################################################
@@ -8,8 +8,6 @@ air
8
8
  akl
9
9
  allg
10
10
  als
11
- am
12
- an
13
11
  ansetzung
14
12
  ansetzungsform
15
13
  ansetzungsformen
@@ -27,7 +25,6 @@ beschreibt15
27
25
  bezeichungen
28
26
  bibliotheks-
29
27
  biebricher
30
- bildretrieval
31
28
  bzw
32
29
  c
33
30
  canal
@@ -57,13 +54,11 @@ ersten
57
54
  erster
58
55
  etc
59
56
  eversberg
60
- fordert
61
57
  formal-
62
58
  g
63
59
  geographic
64
60
  getty
65
61
  ggf
66
- gibt
67
62
  giovanni
68
63
  gkd
69
64
  gödert
@@ -73,7 +68,6 @@ hrsg
73
68
  i
74
69
  idx
75
70
  ii
76
- im
77
71
  indentifiziert
78
72
  informations-
79
73
  insb
@@ -83,9 +77,9 @@ könnnen
83
77
  leonard
84
78
  leonardus
85
79
  lepsky
86
- liefert
87
80
  ließe
88
81
  lionardo
82
+ list
89
83
  listen-
90
84
  london5
91
85
  m
@@ -96,7 +90,6 @@ musealen
96
90
  n
97
91
  nfd
98
92
  normierungsvokabularien
99
- notdürftig
100
93
  of
101
94
  p
102
95
  personen-
@@ -112,20 +105,6 @@ relationierten
112
105
  relationierung
113
106
  relevance
114
107
  research
115
- retrieval
116
- retrievalbedingungen
117
- retrievalfähig
118
- retrievalfähigkeit
119
- retrievalgründen
120
- retrievalinstrumente
121
- retrievalmöglichkeiten
122
- retrievalorientierte
123
- retrievals
124
- retrievalsituation
125
- retrievalsystemen
126
- retrievaltauglich
127
- retrievaltechnisch
128
- retrievalumgebungen
129
108
  retrokonversion
130
109
  retrokonvertierungstätigkeit
131
110
  rswk
@@ -143,17 +122,11 @@ swd
143
122
  tel
144
123
  tgn
145
124
  the
146
- um
147
125
  vedutenmalerei
148
126
  vgl
149
- vielfalt
150
127
  vinci
151
128
  vincius
152
129
  vokabularien
153
130
  vom
154
- von
155
131
  vor
156
- vorzüge
157
- wortbleitungen
158
- zustand
159
- öl
132
+ wortbleitungen
@@ -20,7 +20,7 @@
20
20
  2 kollektion, heterogen erschlossen
21
21
  2 malerei, venezianisch
22
22
  2 normierung, begrifflich
23
- 2 quell, terminologisch
23
+ 2 quelle, terminologisch
24
24
  2 ressource, terminologisch
25
25
  2 suche, kontrolliert
26
26
  2 vokabular, kontrolliert
@@ -103,6 +103,7 @@
103
103
  1 erschließungssituation, unbefriedigend
104
104
  1 erschließungssystem, unterschiedlich
105
105
  1 erschließungswelt, heterogen
106
+ 1 erschließungswelt, sehr heterogen
106
107
  1 fall, unser
107
108
  1 form, bevorzugt
108
109
  1 form, substantivisch
@@ -137,8 +138,6 @@
137
138
  1 instrument, gepflegt
138
139
  1 instrument, nützlich
139
140
  1 instrument, zentral gepflegt
140
- 1 intellektuelle, normiert
141
- 1 intellektuelle, stark
142
141
  1 katalogmerkmal, typisch
143
142
  1 katalogorientieren, allen
144
143
  1 kategorie, allen
@@ -184,10 +183,10 @@
184
183
  1 prinzip, wirksam
185
184
  1 problem, existierend
186
185
  1 problem, hervorgerufen
187
- 1 quell, lexikalisch
188
- 1 quell, verwendend terminologisch
189
- 1 quell, vorhanden terminologisch
190
- 1 rahm, methodisch
186
+ 1 quelle, lexikalisch
187
+ 1 quelle, verwendend terminologisch
188
+ 1 quelle, vorhanden terminologisch
189
+ 1 rahmen, methodisch
191
190
  1 rahmenbedingung, eng
192
191
  1 rahmenbedingung, normierend
193
192
  1 rahmenbedingung, streng normierend
@@ -197,6 +196,10 @@
197
196
  1 ressource, gering personell
198
197
  1 ressource, personell
199
198
  1 ressource, stehend terminologisch
199
+ 1 retrievalbedingung, bessere
200
+ 1 retrievalbedingung, deutlich bessere
201
+ 1 retrievalbedingung, unter
202
+ 1 retrievaltauglich, eingeschränkt
200
203
  1 richtlinie, lokal
201
204
  1 rolle, erheblich
202
205
  1 rolle, gleich groß
@@ -209,6 +212,7 @@
209
212
  1 schritt, vermutlich schwer
210
213
  1 standard, gemeinsam
211
214
  1 steiger, leicht
215
+ 1 steiger, sehr leicht
212
216
  1 stilmerkmal, spezifisch
213
217
  1 suche, alle
214
218
  1 suche, erfolgreich
@@ -247,6 +251,7 @@
247
251
  1 vereinheitlichung, grammatikalisch
248
252
  1 verweisungsstruktur, dazugehörig
249
253
  1 verwendung, gemeinsam
254
+ 1 vielfalt, existierend
250
255
  1 vokabular, genormt
251
256
  1 vokabularverbesserung, deutlich
252
257
  1 voraussetzung, ungenannt
@@ -255,7 +260,7 @@
255
260
  1 weg, einfach
256
261
  1 wendung, fest
257
262
  1 werk, aller
258
- 1 wörterbuchquell, unterschiedlich
263
+ 1 wörterbuchquelle, unterschiedlich
259
264
  1 zahl, ausreichend
260
265
  1 zahl, gering
261
266
  1 zahl, groß
@@ -21,8 +21,8 @@
21
21
  12 intellektuell
22
22
  12 verfahren
23
23
  11 indexterm
24
- 11 intellektuelle
25
24
  11 kontrolliert
25
+ 11 retrieval
26
26
  11 thesaurus
27
27
  11 unterschiedlich
28
28
  10 kollektion
@@ -48,13 +48,12 @@
48
48
  8 sollen
49
49
  8 term
50
50
  8 vokabular
51
+ 7 begriff
51
52
  7 bestehen
52
53
  7 bilderschließung
53
54
  7 einsatz
54
55
  7 erreichen
55
56
  7 frei
56
- 7 freie
57
- 7 freien
58
57
  7 gleich
59
58
  7 heterogen
60
59
  7 künstlername
@@ -99,6 +98,7 @@
99
98
  5 frankfurt
100
99
  5 frauenkirche
101
100
  5 führen
101
+ 5 geben
102
102
  5 genormt
103
103
  5 homogen
104
104
  5 inhaltserschließung
@@ -154,15 +154,13 @@
154
154
  4 methode
155
155
  4 pflegen
156
156
  4 qualität
157
- 4 quell
158
157
  4 quelle
159
- 4 quellen
160
158
  4 rahmen
161
159
  4 recht
162
160
  4 relativ
163
161
  4 ressource
164
162
  4 schlagwortnormdatei
165
- 4 sehren
163
+ 4 sehr
166
164
  4 stehen
167
165
  4 terminologie
168
166
  4 unternehmen
@@ -214,6 +212,7 @@
214
212
  3 institut
215
213
  3 kommen
216
214
  3 lebrecht
215
+ 3 liefern
217
216
  3 liege
218
217
  3 liegen
219
218
  3 main
@@ -225,6 +224,7 @@
225
224
  3 pflege
226
225
  3 rahmenbedingung
227
226
  3 realistisch
227
+ 3 retrievalbedingung
228
228
  3 sinnvoll
229
229
  3 sondern
230
230
  3 stelle
@@ -238,6 +238,7 @@
238
238
  3 verbindung
239
239
  3 verwendung
240
240
  3 verzichten
241
+ 3 vorzug
241
242
  3 völlig
242
243
  3 weg
243
244
  3 wenig
@@ -350,7 +351,7 @@
350
351
  2 modell
351
352
  2 nicht-ansetzungsformen
352
353
  2 normierend
353
- 2 normierungsquell
354
+ 2 normierungsquelle
354
355
  2 notation
355
356
  2 nutzung
356
357
  2 nützlich
@@ -361,7 +362,6 @@
361
362
  2 potenziell
362
363
  2 praxis
363
364
  2 prinzip
364
- 2 rahm
365
365
  2 rechten
366
366
  2 regel
367
367
  2 regeln
@@ -407,6 +407,7 @@
407
407
  2 verweisungsform
408
408
  2 verweisungsstruktur
409
409
  2 verzicht
410
+ 2 vielfalt
410
411
  2 vorliegend
411
412
  2 vorzugsbenennung
412
413
  2 warschau
@@ -506,6 +507,7 @@
506
507
  1 bilddokumentation
507
508
  1 bilden
508
509
  1 bildinhalt
510
+ 1 bildretrieval
509
511
  1 binden
510
512
  1 brauchbar
511
513
  1 canaletto-bild
@@ -587,6 +589,7 @@
587
589
  1 fax
588
590
  1 fest
589
591
  1 finanziell
592
+ 1 fordern
590
593
  1 formalerschließung
591
594
  1 formen
592
595
  1 formulieren
@@ -705,7 +708,6 @@
705
708
  1 leser
706
709
  1 letzte
707
710
  1 linie
708
- 1 list
709
711
  1 listentauglich
710
712
  1 los
711
713
  1 lose
@@ -742,6 +744,7 @@
742
744
  1 normend
743
745
  1 normierungselement
744
746
  1 normierungsinstrument
747
+ 1 notdürftig
745
748
  1 nötig
746
749
  1 nötigen
747
750
  1 oberhaus
@@ -761,15 +764,26 @@
761
764
  1 radierer
762
765
  1 rahmenfaktor
763
766
  1 rahmenumgebung
764
- 1 ranglist
767
+ 1 rangliste
765
768
  1 recall-erhöhung
766
769
  1 recherche
767
770
  1 recherchemöglichkeit
768
771
  1 register
769
- 1 registerbegreifen
772
+ 1 registerbegriff
770
773
  1 registergestützt
771
774
  1 relation
772
775
  1 resultat
776
+ 1 retrievalfähig
777
+ 1 retrievalfähigkeit
778
+ 1 retrievalgründen
779
+ 1 retrievalinstrument
780
+ 1 retrievalmöglichkeit
781
+ 1 retrievalorientieren
782
+ 1 retrievalsituation
783
+ 1 retrievalsystem
784
+ 1 retrievaltauglich
785
+ 1 retrievaltechnisch
786
+ 1 retrievalumgebung
773
787
  1 richtlinie
774
788
  1 richtung
775
789
  1 rswk-ketten
@@ -809,7 +823,7 @@
809
823
  1 strukturiert
810
824
  1 substantiv
811
825
  1 substantivisch
812
- 1 suchbegreifen
826
+ 1 suchbegriff
813
827
  1 sucheinstieg
814
828
  1 suchindex
815
829
  1 suchkonstellation
@@ -829,7 +843,7 @@
829
843
  1 thematik
830
844
  1 theoretisch
831
845
  1 theorie
832
- 1 trefferlisten
846
+ 1 trefferliste
833
847
  1 treffermenge
834
848
  1 trennen
835
849
  1 trennung
@@ -889,7 +903,6 @@
889
903
  1 vorstellbar
890
904
  1 vorstellung
891
905
  1 vorwort
892
- 1 vorzug
893
906
  1 vorzugsform
894
907
  1 wachsen
895
908
  1 weisen
@@ -902,7 +915,7 @@
902
915
  1 wortableitung
903
916
  1 worthäufigkeit
904
917
  1 wunsch
905
- 1 wörterbuchquell
918
+ 1 wörterbuchquelle
906
919
  1 würde
907
920
  1 zeichner
908
921
  1 zeigen
@@ -919,10 +932,12 @@
919
932
  1 zusammenfassend
920
933
  1 zusammengefasst
921
934
  1 zusammenhang
935
+ 1 zustand
922
936
  1 zuweisungsverfahren
923
937
  1 zweckmäßig
924
938
  1 äquivalent
925
939
  1 öffentlich
940
+ 1 öl
926
941
  1 überblick
927
942
  1 überspitzen
928
943
  1 überspitzt
@@ -89,6 +89,7 @@ bedingung
89
89
  begegnen
90
90
  begegnet
91
91
  begreifen
92
+ begriff
92
93
  begrifflich
93
94
  beharrungsvermögen
94
95
  beitrag
@@ -150,6 +151,7 @@ bilddokumentation
150
151
  bilden
151
152
  bilderschließung
152
153
  bildinhalt
154
+ bildretrieval
153
155
  bildung
154
156
  binden
155
157
  bleiben
@@ -302,6 +304,7 @@ festlegung
302
304
  finanziell
303
305
  finden
304
306
  folgend
307
+ fordern
305
308
  form
306
309
  formal
307
310
  formalerschließung
@@ -315,8 +318,6 @@ fragen
315
318
  frankfurt
316
319
  frauenkirche
317
320
  frei
318
- freie
319
- freien
320
321
  friedhof
321
322
  funktionalität
322
323
  funktionsspektrum
@@ -330,6 +331,7 @@ gar
330
331
  garantieren
331
332
  garantiert
332
333
  garen
334
+ geben
333
335
  gebrauchen
334
336
  gebraucht
335
337
  gebunden
@@ -430,7 +432,6 @@ institut
430
432
  instrument
431
433
  integration
432
434
  intellektuell
433
- intellektuelle
434
435
  interesse
435
436
  invertierung
436
437
  italia
@@ -512,11 +513,11 @@ leonardo
512
513
  leser
513
514
  letzte
514
515
  lexikalisch
516
+ liefern
515
517
  liege
516
518
  liegen
517
519
  linguistisch
518
520
  linie
519
- list
520
521
  listentauglich
521
522
  lokal
522
523
  los
@@ -581,8 +582,9 @@ normiert
581
582
  normierung
582
583
  normierungselement
583
584
  normierungsinstrument
584
- normierungsquell
585
+ normierungsquelle
585
586
  notation
587
+ notdürftig
586
588
  nutzen
587
589
  nutzung
588
590
  nötig
@@ -616,16 +618,13 @@ problematik
616
618
  problemsituation
617
619
  qualität
618
620
  quasi-erschließungsstandard
619
- quell
620
621
  quelle
621
- quellen
622
622
  radierer
623
- rahm
624
623
  rahmen
625
624
  rahmenbedingung
626
625
  rahmenfaktor
627
626
  rahmenumgebung
628
- ranglist
627
+ rangliste
629
628
  realistisch
630
629
  recall-erhöhung
631
630
  recherche
@@ -635,12 +634,25 @@ rechten
635
634
  regel
636
635
  regeln
637
636
  register
638
- registerbegreifen
637
+ registerbegriff
639
638
  registergestützt
640
639
  relation
641
640
  relativ
642
641
  ressource
643
642
  resultat
643
+ retrieval
644
+ retrievalbedingung
645
+ retrievalfähig
646
+ retrievalfähigkeit
647
+ retrievalgründen
648
+ retrievalinstrument
649
+ retrievalmöglichkeit
650
+ retrievalorientieren
651
+ retrievalsituation
652
+ retrievalsystem
653
+ retrievaltauglich
654
+ retrievaltechnisch
655
+ retrievalumgebung
644
656
  richtlinie
645
657
  richtung
646
658
  rolle
@@ -664,7 +676,7 @@ schritt
664
676
  schwach
665
677
  schwer
666
678
  sehen
667
- sehren
679
+ sehr
668
680
  sein
669
681
  selbstverständlich
670
682
  selten
@@ -715,7 +727,7 @@ strukturieren
715
727
  strukturiert
716
728
  substantiv
717
729
  substantivisch
718
- suchbegreifen
730
+ suchbegriff
719
731
  suche
720
732
  sucheinstieg
721
733
  suchen
@@ -753,7 +765,7 @@ thesaurus
753
765
  these
754
766
  titelstichwort
755
767
  treffen
756
- trefferlisten
768
+ trefferliste
757
769
  treffermenge
758
770
  trennen
759
771
  trennung
@@ -833,6 +845,7 @@ verzicht
833
845
  verzichten
834
846
  verzichtet
835
847
  veränderung
848
+ vielfalt
836
849
  vielzahl
837
850
  virtuell
838
851
  visuell
@@ -883,7 +896,7 @@ wohl
883
896
  wortableitung
884
897
  worthäufigkeit
885
898
  wunsch
886
- wörterbuchquell
899
+ wörterbuchquelle
887
900
  würde
888
901
  zahl
889
902
  zahlen
@@ -912,6 +925,7 @@ zusammenführen
912
925
  zusammenführung
913
926
  zusammengefasst
914
927
  zusammenhang
928
+ zustand
915
929
  zusätzlich
916
930
  zuteilung
917
931
  zuweisen
@@ -923,6 +937,7 @@ zweitausendeins
923
937
  ähnlich
924
938
  äquivalent
925
939
  öffentlich
940
+ öl
926
941
  überblick
927
942
  überspitzen
928
943
  überspitzt