lingo 1.8.0 → 1.8.1

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
Files changed (100) hide show
  1. data/ChangeLog +13 -0
  2. data/README +49 -29
  3. data/Rakefile +28 -4
  4. data/TODO +2 -9
  5. data/bin/lingo +24 -0
  6. data/bin/lingoctl +24 -0
  7. data/de/lingo-dic.txt +559 -74
  8. data/info/gpl-hdr.txt +21 -24
  9. data/lib/lingo.rb +83 -112
  10. data/lib/lingo/agenda_item.rb +53 -0
  11. data/lib/lingo/attendee.rb +261 -0
  12. data/lib/lingo/attendee/abbreviator.rb +95 -97
  13. data/lib/lingo/attendee/debugger.rb +94 -93
  14. data/lib/lingo/attendee/decomposer.rb +76 -83
  15. data/lib/lingo/attendee/dehyphenizer.rb +141 -144
  16. data/lib/lingo/attendee/formatter.rb +65 -0
  17. data/lib/lingo/attendee/multi_worder.rb +302 -0
  18. data/lib/lingo/attendee/noneword_filter.rb +89 -84
  19. data/lib/lingo/attendee/object_filter.rb +91 -0
  20. data/lib/lingo/attendee/sequencer.rb +159 -158
  21. data/lib/lingo/attendee/synonymer.rb +81 -84
  22. data/lib/lingo/attendee/text_reader.rb +242 -0
  23. data/lib/lingo/attendee/text_writer.rb +169 -0
  24. data/lib/lingo/attendee/tokenizer.rb +192 -191
  25. data/lib/lingo/attendee/variator.rb +152 -156
  26. data/lib/lingo/attendee/vector_filter.rb +140 -135
  27. data/lib/lingo/attendee/word_searcher.rb +98 -0
  28. data/lib/lingo/buffered_attendee.rb +69 -0
  29. data/lib/lingo/cachable.rb +58 -0
  30. data/lib/lingo/call.rb +72 -0
  31. data/lib/lingo/cli.rb +26 -0
  32. data/lib/lingo/config.rb +23 -26
  33. data/lib/lingo/core_ext.rb +42 -0
  34. data/lib/lingo/ctl.rb +239 -173
  35. data/lib/lingo/database.rb +148 -496
  36. data/lib/lingo/database/crypter.rb +85 -0
  37. data/lib/lingo/database/gdbm_store.rb +49 -0
  38. data/lib/lingo/database/hash_store.rb +67 -0
  39. data/lib/lingo/database/libcdb_store.rb +58 -0
  40. data/lib/lingo/database/sdbm_store.rb +64 -0
  41. data/lib/lingo/database/show_progress.rb +81 -0
  42. data/lib/lingo/database/source.rb +134 -0
  43. data/lib/lingo/database/source/key_value.rb +62 -0
  44. data/lib/lingo/database/source/multi_key.rb +65 -0
  45. data/lib/lingo/database/source/multi_value.rb +65 -0
  46. data/lib/lingo/database/source/single_word.rb +60 -0
  47. data/lib/lingo/database/source/word_class.rb +64 -0
  48. data/lib/lingo/error.rb +122 -0
  49. data/lib/lingo/language.rb +78 -518
  50. data/lib/lingo/language/dictionary.rb +173 -0
  51. data/lib/lingo/language/grammar.rb +211 -0
  52. data/lib/lingo/language/lexical.rb +66 -0
  53. data/lib/lingo/language/lexical_hash.rb +88 -0
  54. data/lib/lingo/language/token.rb +48 -0
  55. data/lib/lingo/language/word.rb +130 -0
  56. data/lib/lingo/language/word_form.rb +83 -0
  57. data/lib/lingo/reportable.rb +59 -0
  58. data/lib/lingo/version.rb +1 -1
  59. data/lingo-all.cfg +14 -10
  60. data/lingo-call.cfg +5 -5
  61. data/lingo.cfg +14 -12
  62. data/lingo.rb +26 -0
  63. data/lir.cfg +13 -9
  64. data/spec/spec_helper.rb +1 -0
  65. data/test.cfg +11 -11
  66. data/test/attendee/ts_abbreviator.rb +0 -6
  67. data/test/attendee/ts_decomposer.rb +0 -6
  68. data/test/attendee/{ts_multiworder.rb → ts_multi_worder.rb} +1 -7
  69. data/test/attendee/ts_noneword_filter.rb +1 -7
  70. data/test/attendee/{ts_objectfilter.rb → ts_object_filter.rb} +1 -7
  71. data/test/attendee/ts_sequencer.rb +0 -6
  72. data/test/attendee/ts_synonymer.rb +0 -6
  73. data/test/attendee/{ts_textreader.rb → ts_text_reader.rb} +1 -7
  74. data/test/attendee/{ts_textwriter.rb → ts_text_writer.rb} +1 -7
  75. data/test/attendee/ts_tokenizer.rb +0 -6
  76. data/test/attendee/ts_variator.rb +0 -6
  77. data/test/attendee/ts_vector_filter.rb +1 -7
  78. data/test/attendee/{ts_wordsearcher.rb → ts_word_searcher.rb} +1 -7
  79. data/test/ref/artikel.non +2 -29
  80. data/test/ref/artikel.seq +13 -8
  81. data/test/ref/artikel.vec +30 -15
  82. data/test/ref/artikel.ven +29 -14
  83. data/test/ref/artikel.ver +58 -43
  84. data/test/ref/lir.csv +146 -145
  85. data/test/ref/lir.non +186 -210
  86. data/test/ref/lir.seq +54 -50
  87. data/test/test_helper.rb +41 -36
  88. data/test/ts_database.rb +12 -11
  89. data/test/ts_language.rb +118 -68
  90. metadata +67 -29
  91. data/lib/lingo/attendee/multiworder.rb +0 -301
  92. data/lib/lingo/attendee/objectfilter.rb +0 -86
  93. data/lib/lingo/attendee/textreader.rb +0 -237
  94. data/lib/lingo/attendee/textwriter.rb +0 -196
  95. data/lib/lingo/attendee/wordsearcher.rb +0 -96
  96. data/lib/lingo/attendees.rb +0 -289
  97. data/lib/lingo/const.rb +0 -131
  98. data/lib/lingo/modules.rb +0 -98
  99. data/lib/lingo/types.rb +0 -285
  100. data/lib/lingo/utilities.rb +0 -40
@@ -2,11 +2,7 @@
2
2
 
3
3
  require_relative '../test_helper'
4
4
 
5
- ################################################################################
6
- #
7
- # Attendee Vector_filter
8
- #
9
- class TestAttendeeVector_filter < AttendeeTestCase
5
+ class TestAttendeeVectorFilter < AttendeeTestCase
10
6
 
11
7
  def setup
12
8
  @input = [
@@ -58,5 +54,3 @@ class TestAttendeeVector_filter < AttendeeTestCase
58
54
  end
59
55
 
60
56
  end
61
- #
62
- ################################################################################
@@ -2,11 +2,7 @@
2
2
 
3
3
  require_relative '../test_helper'
4
4
 
5
- ################################################################################
6
- #
7
- # Attendee Wordsearcher
8
- #
9
- class TestAttendeeWordsearcher < AttendeeTestCase
5
+ class TestAttendeeWordSearcher < AttendeeTestCase
10
6
 
11
7
  def setup
12
8
  @test_synonyms = [
@@ -115,5 +111,3 @@ class TestAttendeeWordsearcher < AttendeeTestCase
115
111
  end
116
112
 
117
113
  end
118
- #
119
- ################################################################################
@@ -8,8 +8,6 @@ air
8
8
  akl
9
9
  allg
10
10
  als
11
- am
12
- an
13
11
  ansetzung
14
12
  ansetzungsform
15
13
  ansetzungsformen
@@ -27,7 +25,6 @@ beschreibt15
27
25
  bezeichungen
28
26
  bibliotheks-
29
27
  biebricher
30
- bildretrieval
31
28
  bzw
32
29
  c
33
30
  canal
@@ -57,13 +54,11 @@ ersten
57
54
  erster
58
55
  etc
59
56
  eversberg
60
- fordert
61
57
  formal-
62
58
  g
63
59
  geographic
64
60
  getty
65
61
  ggf
66
- gibt
67
62
  giovanni
68
63
  gkd
69
64
  gödert
@@ -73,7 +68,6 @@ hrsg
73
68
  i
74
69
  idx
75
70
  ii
76
- im
77
71
  indentifiziert
78
72
  informations-
79
73
  insb
@@ -83,9 +77,9 @@ könnnen
83
77
  leonard
84
78
  leonardus
85
79
  lepsky
86
- liefert
87
80
  ließe
88
81
  lionardo
82
+ list
89
83
  listen-
90
84
  london5
91
85
  m
@@ -96,7 +90,6 @@ musealen
96
90
  n
97
91
  nfd
98
92
  normierungsvokabularien
99
- notdürftig
100
93
  of
101
94
  p
102
95
  personen-
@@ -112,20 +105,6 @@ relationierten
112
105
  relationierung
113
106
  relevance
114
107
  research
115
- retrieval
116
- retrievalbedingungen
117
- retrievalfähig
118
- retrievalfähigkeit
119
- retrievalgründen
120
- retrievalinstrumente
121
- retrievalmöglichkeiten
122
- retrievalorientierte
123
- retrievals
124
- retrievalsituation
125
- retrievalsystemen
126
- retrievaltauglich
127
- retrievaltechnisch
128
- retrievalumgebungen
129
108
  retrokonversion
130
109
  retrokonvertierungstätigkeit
131
110
  rswk
@@ -143,17 +122,11 @@ swd
143
122
  tel
144
123
  tgn
145
124
  the
146
- um
147
125
  vedutenmalerei
148
126
  vgl
149
- vielfalt
150
127
  vinci
151
128
  vincius
152
129
  vokabularien
153
130
  vom
154
- von
155
131
  vor
156
- vorzüge
157
- wortbleitungen
158
- zustand
159
- öl
132
+ wortbleitungen
@@ -20,7 +20,7 @@
20
20
  2 kollektion, heterogen erschlossen
21
21
  2 malerei, venezianisch
22
22
  2 normierung, begrifflich
23
- 2 quell, terminologisch
23
+ 2 quelle, terminologisch
24
24
  2 ressource, terminologisch
25
25
  2 suche, kontrolliert
26
26
  2 vokabular, kontrolliert
@@ -103,6 +103,7 @@
103
103
  1 erschließungssituation, unbefriedigend
104
104
  1 erschließungssystem, unterschiedlich
105
105
  1 erschließungswelt, heterogen
106
+ 1 erschließungswelt, sehr heterogen
106
107
  1 fall, unser
107
108
  1 form, bevorzugt
108
109
  1 form, substantivisch
@@ -137,8 +138,6 @@
137
138
  1 instrument, gepflegt
138
139
  1 instrument, nützlich
139
140
  1 instrument, zentral gepflegt
140
- 1 intellektuelle, normiert
141
- 1 intellektuelle, stark
142
141
  1 katalogmerkmal, typisch
143
142
  1 katalogorientieren, allen
144
143
  1 kategorie, allen
@@ -184,10 +183,10 @@
184
183
  1 prinzip, wirksam
185
184
  1 problem, existierend
186
185
  1 problem, hervorgerufen
187
- 1 quell, lexikalisch
188
- 1 quell, verwendend terminologisch
189
- 1 quell, vorhanden terminologisch
190
- 1 rahm, methodisch
186
+ 1 quelle, lexikalisch
187
+ 1 quelle, verwendend terminologisch
188
+ 1 quelle, vorhanden terminologisch
189
+ 1 rahmen, methodisch
191
190
  1 rahmenbedingung, eng
192
191
  1 rahmenbedingung, normierend
193
192
  1 rahmenbedingung, streng normierend
@@ -197,6 +196,10 @@
197
196
  1 ressource, gering personell
198
197
  1 ressource, personell
199
198
  1 ressource, stehend terminologisch
199
+ 1 retrievalbedingung, bessere
200
+ 1 retrievalbedingung, deutlich bessere
201
+ 1 retrievalbedingung, unter
202
+ 1 retrievaltauglich, eingeschränkt
200
203
  1 richtlinie, lokal
201
204
  1 rolle, erheblich
202
205
  1 rolle, gleich groß
@@ -209,6 +212,7 @@
209
212
  1 schritt, vermutlich schwer
210
213
  1 standard, gemeinsam
211
214
  1 steiger, leicht
215
+ 1 steiger, sehr leicht
212
216
  1 stilmerkmal, spezifisch
213
217
  1 suche, alle
214
218
  1 suche, erfolgreich
@@ -247,6 +251,7 @@
247
251
  1 vereinheitlichung, grammatikalisch
248
252
  1 verweisungsstruktur, dazugehörig
249
253
  1 verwendung, gemeinsam
254
+ 1 vielfalt, existierend
250
255
  1 vokabular, genormt
251
256
  1 vokabularverbesserung, deutlich
252
257
  1 voraussetzung, ungenannt
@@ -255,7 +260,7 @@
255
260
  1 weg, einfach
256
261
  1 wendung, fest
257
262
  1 werk, aller
258
- 1 wörterbuchquell, unterschiedlich
263
+ 1 wörterbuchquelle, unterschiedlich
259
264
  1 zahl, ausreichend
260
265
  1 zahl, gering
261
266
  1 zahl, groß
@@ -21,8 +21,8 @@
21
21
  12 intellektuell
22
22
  12 verfahren
23
23
  11 indexterm
24
- 11 intellektuelle
25
24
  11 kontrolliert
25
+ 11 retrieval
26
26
  11 thesaurus
27
27
  11 unterschiedlich
28
28
  10 kollektion
@@ -48,13 +48,12 @@
48
48
  8 sollen
49
49
  8 term
50
50
  8 vokabular
51
+ 7 begriff
51
52
  7 bestehen
52
53
  7 bilderschließung
53
54
  7 einsatz
54
55
  7 erreichen
55
56
  7 frei
56
- 7 freie
57
- 7 freien
58
57
  7 gleich
59
58
  7 heterogen
60
59
  7 künstlername
@@ -99,6 +98,7 @@
99
98
  5 frankfurt
100
99
  5 frauenkirche
101
100
  5 führen
101
+ 5 geben
102
102
  5 genormt
103
103
  5 homogen
104
104
  5 inhaltserschließung
@@ -154,15 +154,13 @@
154
154
  4 methode
155
155
  4 pflegen
156
156
  4 qualität
157
- 4 quell
158
157
  4 quelle
159
- 4 quellen
160
158
  4 rahmen
161
159
  4 recht
162
160
  4 relativ
163
161
  4 ressource
164
162
  4 schlagwortnormdatei
165
- 4 sehren
163
+ 4 sehr
166
164
  4 stehen
167
165
  4 terminologie
168
166
  4 unternehmen
@@ -214,6 +212,7 @@
214
212
  3 institut
215
213
  3 kommen
216
214
  3 lebrecht
215
+ 3 liefern
217
216
  3 liege
218
217
  3 liegen
219
218
  3 main
@@ -225,6 +224,7 @@
225
224
  3 pflege
226
225
  3 rahmenbedingung
227
226
  3 realistisch
227
+ 3 retrievalbedingung
228
228
  3 sinnvoll
229
229
  3 sondern
230
230
  3 stelle
@@ -238,6 +238,7 @@
238
238
  3 verbindung
239
239
  3 verwendung
240
240
  3 verzichten
241
+ 3 vorzug
241
242
  3 völlig
242
243
  3 weg
243
244
  3 wenig
@@ -350,7 +351,7 @@
350
351
  2 modell
351
352
  2 nicht-ansetzungsformen
352
353
  2 normierend
353
- 2 normierungsquell
354
+ 2 normierungsquelle
354
355
  2 notation
355
356
  2 nutzung
356
357
  2 nützlich
@@ -361,7 +362,6 @@
361
362
  2 potenziell
362
363
  2 praxis
363
364
  2 prinzip
364
- 2 rahm
365
365
  2 rechten
366
366
  2 regel
367
367
  2 regeln
@@ -407,6 +407,7 @@
407
407
  2 verweisungsform
408
408
  2 verweisungsstruktur
409
409
  2 verzicht
410
+ 2 vielfalt
410
411
  2 vorliegend
411
412
  2 vorzugsbenennung
412
413
  2 warschau
@@ -506,6 +507,7 @@
506
507
  1 bilddokumentation
507
508
  1 bilden
508
509
  1 bildinhalt
510
+ 1 bildretrieval
509
511
  1 binden
510
512
  1 brauchbar
511
513
  1 canaletto-bild
@@ -587,6 +589,7 @@
587
589
  1 fax
588
590
  1 fest
589
591
  1 finanziell
592
+ 1 fordern
590
593
  1 formalerschließung
591
594
  1 formen
592
595
  1 formulieren
@@ -705,7 +708,6 @@
705
708
  1 leser
706
709
  1 letzte
707
710
  1 linie
708
- 1 list
709
711
  1 listentauglich
710
712
  1 los
711
713
  1 lose
@@ -742,6 +744,7 @@
742
744
  1 normend
743
745
  1 normierungselement
744
746
  1 normierungsinstrument
747
+ 1 notdürftig
745
748
  1 nötig
746
749
  1 nötigen
747
750
  1 oberhaus
@@ -761,15 +764,26 @@
761
764
  1 radierer
762
765
  1 rahmenfaktor
763
766
  1 rahmenumgebung
764
- 1 ranglist
767
+ 1 rangliste
765
768
  1 recall-erhöhung
766
769
  1 recherche
767
770
  1 recherchemöglichkeit
768
771
  1 register
769
- 1 registerbegreifen
772
+ 1 registerbegriff
770
773
  1 registergestützt
771
774
  1 relation
772
775
  1 resultat
776
+ 1 retrievalfähig
777
+ 1 retrievalfähigkeit
778
+ 1 retrievalgründen
779
+ 1 retrievalinstrument
780
+ 1 retrievalmöglichkeit
781
+ 1 retrievalorientieren
782
+ 1 retrievalsituation
783
+ 1 retrievalsystem
784
+ 1 retrievaltauglich
785
+ 1 retrievaltechnisch
786
+ 1 retrievalumgebung
773
787
  1 richtlinie
774
788
  1 richtung
775
789
  1 rswk-ketten
@@ -809,7 +823,7 @@
809
823
  1 strukturiert
810
824
  1 substantiv
811
825
  1 substantivisch
812
- 1 suchbegreifen
826
+ 1 suchbegriff
813
827
  1 sucheinstieg
814
828
  1 suchindex
815
829
  1 suchkonstellation
@@ -829,7 +843,7 @@
829
843
  1 thematik
830
844
  1 theoretisch
831
845
  1 theorie
832
- 1 trefferlisten
846
+ 1 trefferliste
833
847
  1 treffermenge
834
848
  1 trennen
835
849
  1 trennung
@@ -889,7 +903,6 @@
889
903
  1 vorstellbar
890
904
  1 vorstellung
891
905
  1 vorwort
892
- 1 vorzug
893
906
  1 vorzugsform
894
907
  1 wachsen
895
908
  1 weisen
@@ -902,7 +915,7 @@
902
915
  1 wortableitung
903
916
  1 worthäufigkeit
904
917
  1 wunsch
905
- 1 wörterbuchquell
918
+ 1 wörterbuchquelle
906
919
  1 würde
907
920
  1 zeichner
908
921
  1 zeigen
@@ -919,10 +932,12 @@
919
932
  1 zusammenfassend
920
933
  1 zusammengefasst
921
934
  1 zusammenhang
935
+ 1 zustand
922
936
  1 zuweisungsverfahren
923
937
  1 zweckmäßig
924
938
  1 äquivalent
925
939
  1 öffentlich
940
+ 1 öl
926
941
  1 überblick
927
942
  1 überspitzen
928
943
  1 überspitzt
@@ -89,6 +89,7 @@ bedingung
89
89
  begegnen
90
90
  begegnet
91
91
  begreifen
92
+ begriff
92
93
  begrifflich
93
94
  beharrungsvermögen
94
95
  beitrag
@@ -150,6 +151,7 @@ bilddokumentation
150
151
  bilden
151
152
  bilderschließung
152
153
  bildinhalt
154
+ bildretrieval
153
155
  bildung
154
156
  binden
155
157
  bleiben
@@ -302,6 +304,7 @@ festlegung
302
304
  finanziell
303
305
  finden
304
306
  folgend
307
+ fordern
305
308
  form
306
309
  formal
307
310
  formalerschließung
@@ -315,8 +318,6 @@ fragen
315
318
  frankfurt
316
319
  frauenkirche
317
320
  frei
318
- freie
319
- freien
320
321
  friedhof
321
322
  funktionalität
322
323
  funktionsspektrum
@@ -330,6 +331,7 @@ gar
330
331
  garantieren
331
332
  garantiert
332
333
  garen
334
+ geben
333
335
  gebrauchen
334
336
  gebraucht
335
337
  gebunden
@@ -430,7 +432,6 @@ institut
430
432
  instrument
431
433
  integration
432
434
  intellektuell
433
- intellektuelle
434
435
  interesse
435
436
  invertierung
436
437
  italia
@@ -512,11 +513,11 @@ leonardo
512
513
  leser
513
514
  letzte
514
515
  lexikalisch
516
+ liefern
515
517
  liege
516
518
  liegen
517
519
  linguistisch
518
520
  linie
519
- list
520
521
  listentauglich
521
522
  lokal
522
523
  los
@@ -581,8 +582,9 @@ normiert
581
582
  normierung
582
583
  normierungselement
583
584
  normierungsinstrument
584
- normierungsquell
585
+ normierungsquelle
585
586
  notation
587
+ notdürftig
586
588
  nutzen
587
589
  nutzung
588
590
  nötig
@@ -616,16 +618,13 @@ problematik
616
618
  problemsituation
617
619
  qualität
618
620
  quasi-erschließungsstandard
619
- quell
620
621
  quelle
621
- quellen
622
622
  radierer
623
- rahm
624
623
  rahmen
625
624
  rahmenbedingung
626
625
  rahmenfaktor
627
626
  rahmenumgebung
628
- ranglist
627
+ rangliste
629
628
  realistisch
630
629
  recall-erhöhung
631
630
  recherche
@@ -635,12 +634,25 @@ rechten
635
634
  regel
636
635
  regeln
637
636
  register
638
- registerbegreifen
637
+ registerbegriff
639
638
  registergestützt
640
639
  relation
641
640
  relativ
642
641
  ressource
643
642
  resultat
643
+ retrieval
644
+ retrievalbedingung
645
+ retrievalfähig
646
+ retrievalfähigkeit
647
+ retrievalgründen
648
+ retrievalinstrument
649
+ retrievalmöglichkeit
650
+ retrievalorientieren
651
+ retrievalsituation
652
+ retrievalsystem
653
+ retrievaltauglich
654
+ retrievaltechnisch
655
+ retrievalumgebung
644
656
  richtlinie
645
657
  richtung
646
658
  rolle
@@ -664,7 +676,7 @@ schritt
664
676
  schwach
665
677
  schwer
666
678
  sehen
667
- sehren
679
+ sehr
668
680
  sein
669
681
  selbstverständlich
670
682
  selten
@@ -715,7 +727,7 @@ strukturieren
715
727
  strukturiert
716
728
  substantiv
717
729
  substantivisch
718
- suchbegreifen
730
+ suchbegriff
719
731
  suche
720
732
  sucheinstieg
721
733
  suchen
@@ -753,7 +765,7 @@ thesaurus
753
765
  these
754
766
  titelstichwort
755
767
  treffen
756
- trefferlisten
768
+ trefferliste
757
769
  treffermenge
758
770
  trennen
759
771
  trennung
@@ -833,6 +845,7 @@ verzicht
833
845
  verzichten
834
846
  verzichtet
835
847
  veränderung
848
+ vielfalt
836
849
  vielzahl
837
850
  virtuell
838
851
  visuell
@@ -883,7 +896,7 @@ wohl
883
896
  wortableitung
884
897
  worthäufigkeit
885
898
  wunsch
886
- wörterbuchquell
899
+ wörterbuchquelle
887
900
  würde
888
901
  zahl
889
902
  zahlen
@@ -912,6 +925,7 @@ zusammenführen
912
925
  zusammenführung
913
926
  zusammengefasst
914
927
  zusammenhang
928
+ zustand
915
929
  zusätzlich
916
930
  zuteilung
917
931
  zuweisen
@@ -923,6 +937,7 @@ zweitausendeins
923
937
  ähnlich
924
938
  äquivalent
925
939
  öffentlich
940
+ öl
926
941
  überblick
927
942
  überspitzen
928
943
  überspitzt