RubyGems - classifier-reborn - Versions diffs - 2.0.3 → 2.0.4 - Mend

classifier-reborn 2.0.3 → 2.0.4

This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.

Files changed (28) hide show

checksums.yaml +4 -4
data/README.markdown +130 -14
data/data/stopwords/ca +126 -0
data/data/stopwords/cs +138 -0
data/data/stopwords/da +101 -0
data/data/stopwords/de +604 -0
data/data/stopwords/en +80 -0
data/data/stopwords/es +351 -0
data/data/stopwords/fi +747 -0
data/data/stopwords/fr +463 -0
data/data/stopwords/hu +35 -0
data/data/stopwords/it +430 -0
data/data/stopwords/nl +48 -0
data/data/stopwords/no +119 -0
data/data/stopwords/pl +93 -0
data/data/stopwords/pt +356 -0
data/data/stopwords/se +386 -0
data/data/stopwords/tr +114 -0
data/lib/classifier-reborn/bayes.rb +86 -16
data/lib/classifier-reborn/category_namer.rb +3 -1
data/lib/classifier-reborn/extensions/hasher.rb +25 -100
data/lib/classifier-reborn/extensions/vector.rb +0 -1
data/lib/classifier-reborn/lsi.rb +36 -25
data/lib/classifier-reborn/lsi/cached_content_node.rb +48 -0
data/lib/classifier-reborn/lsi/content_node.rb +27 -10
data/lib/classifier-reborn/lsi/summarizer.rb +2 -2
data/lib/classifier-reborn/version.rb +1 -1
metadata +37 -3

data/data/stopwords/se ADDED

@@ -0,0 +1,386 @@
+aderton
+adertonde
+adjö
+aldrig
+alla
+allas
+allt
+alltid
+alltså
+än
+andra
+andras
+annan
+annat
+ännu
+artonde
+artonn
+åtminstone
+att
+åtta
+åttio
+åttionde
+åttonde
+av
+även
+båda
+bådas
+bakom
+bara
+bäst
+bättre
+behöva
+behövas
+behövde
+behövt
+beslut
+beslutat
+beslutit
+bland
+blev
+bli
+blir
+blivit
+bort
+borta
+bra
+då
+dag
+dagar
+dagarna
+dagen
+där
+därför
+de
+del
+delen
+dem
+den
+deras
+dess
+det
+detta
+dig
+din
+dina
+dit
+ditt
+dock
+du
+efter
+eftersom
+elfte
+eller
+elva
+en
+enkel
+enkelt
+enkla
+enligt
+er
+era
+ert
+ett
+ettusen
+få
+fanns
+får
+fått
+fem
+femte
+femtio
+femtionde
+femton
+femtonde
+fick
+fin
+finnas
+finns
+fjärde
+fjorton
+fjortonde
+fler
+flera
+flesta
+följande
+för
+före
+förlåt
+förra
+första
+fram
+framför
+från
+fyra
+fyrtio
+fyrtionde
+gå
+gälla
+gäller
+gällt
+går
+gärna
+gått
+genast
+genom
+gick
+gjorde
+gjort
+god
+goda
+godare
+godast
+gör
+göra
+gott
+ha
+hade
+haft
+han
+hans
+har
+här
+heller
+hellre
+helst
+helt
+henne
+hennes
+hit
+hög
+höger
+högre
+högst
+hon
+honom
+hundra
+hundraen
+hundraett
+hur
+i
+ibland
+idag
+igår
+igen
+imorgon
+in
+inför
+inga
+ingen
+ingenting
+inget
+innan
+inne
+inom
+inte
+inuti
+ja
+jag
+jämfört
+kan
+kanske
+knappast
+kom
+komma
+kommer
+kommit
+kr
+kunde
+kunna
+kunnat
+kvar
+länge
+längre
+långsam
+långsammare
+långsammast
+långsamt
+längst
+långt
+lätt
+lättare
+lättast
+legat
+ligga
+ligger
+lika
+likställd
+likställda
+lilla
+lite
+liten
+litet
+man
+många
+måste
+med
+mellan
+men
+mer
+mera
+mest
+mig
+min
+mina
+mindre
+minst
+mitt
+mittemot
+möjlig
+möjligen
+möjligt
+möjligtvis
+mot
+mycket
+någon
+någonting
+något
+några
+när
+nästa
+ned
+nederst
+nedersta
+nedre
+nej
+ner
+ni
+nio
+nionde
+nittio
+nittionde
+nitton
+nittonde
+nödvändig
+nödvändiga
+nödvändigt
+nödvändigtvis
+nog
+noll
+nr
+nu
+nummer
+och
+också
+ofta
+oftast
+olika
+olikt
+om
+oss
+över
+övermorgon
+överst
+övre
+på
+rakt
+rätt
+redan
+så
+sade
+säga
+säger
+sagt
+samma
+sämre
+sämst
+sedan
+senare
+senast
+sent
+sex
+sextio
+sextionde
+sexton
+sextonde
+sig
+sin
+sina
+sist
+sista
+siste
+sitt
+sjätte
+sju
+sjunde
+sjuttio
+sjuttionde
+sjutton
+sjuttonde
+ska
+skall
+skulle
+slutligen
+små
+smått
+snart
+som
+stor
+stora
+större
+störst
+stort
+tack
+tidig
+tidigare
+tidigast
+tidigt
+till
+tills
+tillsammans
+tio
+tionde
+tjugo
+tjugoen
+tjugoett
+tjugonde
+tjugotre
+tjugotvå
+tjungo
+tolfte
+tolv
+tre
+tredje
+trettio
+trettionde
+tretton
+trettonde
+två
+tvåhundra
+under
+upp
+ur
+ursäkt
+ut
+utan
+utanför
+ute
+vad
+vänster
+vänstra
+var
+vår
+vara
+våra
+varför
+varifrån
+varit
+varken
+värre
+varsågod
+vart
+vårt
+vem
+vems
+verkligen
+vi
+vid
+vidare
+viktig
+viktigare
+viktigast
+viktigt
+vilka
+vilken
+vilket
+vill

data/data/stopwords/tr ADDED

@@ -0,0 +1,114 @@
+acaba
+altmýþ
+altý
+ama
+bana
+bazý
+belki
+ben
+benden
+beni
+benim
+beþ
+bin
+bir
+biri
+birkaç
+birkez
+birþey
+birþeyi
+biz
+bizden
+bizi
+bizim
+bu
+buna
+bunda
+bundan
+bunu
+bunun
+da
+daha
+dahi
+de
+defa
+diye
+doksan
+dokuz
+dört
+elli
+en
+gibi
+hem
+hep
+hepsi
+her
+hiç
+iki
+ile
+INSERmi
+ise
+için
+katrilyon
+kez
+ki
+kim
+kimden
+kime
+kimi
+kýrk
+milyar
+milyon
+mu
+mü
+mý
+nasýl
+ne
+neden
+nerde
+nerede
+nereye
+niye
+niçin
+on
+ona
+ondan
+onlar
+onlardan
+onlari
+onlarýn
+onu
+otuz
+sanki
+sekiz
+seksen
+sen
+senden
+seni
+senin
+siz
+sizden
+sizi
+sizin
+trilyon
+tüm
+ve
+veya
+ya
+yani
+yedi
+yetmiþ
+yirmi
+yüz
+çok
+çünkü
+üç
+þey
+þeyden
+þeyi
+þeyler
+þu
+þuna
+þunda
+þundan
+þunu