stopwords-filter 0.2.1 → 0.5.0

checksums.yaml

@@ -0,0 +1,7 @@
+---
+SHA1:
+  metadata.gz: ab6ffb4c393600755245462bd24815191b9a589a
+  data.tar.gz: 0a23aeeb9caaf8c65341a7bb7f2e8760fe8df9a9
+SHA512:
+  metadata.gz: f6d2c6f8524c2fceb16fa069fa95458e6346ebc0a0cd8c10746d018a4f0339b05bb91511e0edc6ca87b5f55e84d689f78fcdba174ef1c7e2d60926d2e29704ae
+  data.tar.gz: 3b51a3de282c95b86d1d0720d885d375cd21976af16ae987ffab49e0e0b9d380597f0170a5d76949f4529d96db63e6ba6d85a24f2278bbfb9b7b8d8aae83faf1

data/CHANGELOG

@@ -1,3 +1,15 @@
+0.5.0:
+  * Added Greek stopwords based on Lucene [@vrypan] [#13]
+  * Fixed CSV format for sv and ru locales [@woto] [#14]
+  * Fixed romanian and polish CSV not being included in the gemspec.
+0.4.1:
+  * Dummy version to fix metadata in gemspec
+0.4.0:
+  * Added Polish stopwords based on https://pl.wikipedia.org/wiki/Wikipedia:Stopwords [@grzegorzblaszczyk] [#9]
+  * Added info when no locale is found on snowball filter [@nerde] [#10]
+0.3.0:
+ * Added custom words list to snowball filter [@sbeckeriv]
+ * Fixed problem about initialization: https://github.com/brenes/stopwords-filter/issues/3 [@zackxu1]
 0.2.0:
  * Added stopword? method [@s2gatev]
  * Added Sieve class [@s2gatev]

data/Gemfile

@@ -2,6 +2,6 @@
 source "https://rubygems.org"
 
 group :test do
-  gem "rspec", "2.11"
+  gem "rspec"
   gem "jeweler", "1.8.4"
 end

data/Gemfile.lock

@@ -1,29 +1,35 @@
 GEM
   remote: https://rubygems.org/
   specs:
-    diff-lcs (1.1.3)
-    git (1.2.5)
+    diff-lcs (1.3)
+    git (1.3.0)
     jeweler (1.8.4)
       bundler (~> 1.0)
       git (>= 1.2.5)
       rake
       rdoc
-    json (1.7.4)
-    rake (0.9.2.2)
-    rdoc (3.12)
-      json (~> 1.4)
-    rspec (2.11.0)
-      rspec-core (~> 2.11.0)
-      rspec-expectations (~> 2.11.0)
-      rspec-mocks (~> 2.11.0)
-    rspec-core (2.11.1)
-    rspec-expectations (2.11.2)
-      diff-lcs (~> 1.1.3)
-    rspec-mocks (2.11.2)
+    rake (12.0.0)
+    rdoc (5.0.0)
+    rspec (3.5.0)
+      rspec-core (~> 3.5.0)
+      rspec-expectations (~> 3.5.0)
+      rspec-mocks (~> 3.5.0)
+    rspec-core (3.5.4)
+      rspec-support (~> 3.5.0)
+    rspec-expectations (3.5.0)
+      diff-lcs (>= 1.2.0, < 2.0)
+      rspec-support (~> 3.5.0)
+    rspec-mocks (3.5.0)
+      diff-lcs (>= 1.2.0, < 2.0)
+      rspec-support (~> 3.5.0)
+    rspec-support (3.5.0)
 
 PLATFORMS
   ruby
 
 DEPENDENCIES
   jeweler (= 1.8.4)
-  rspec (= 2.11)
+  rspec
+
+BUNDLED WITH
+   1.13.6

data/README.md

@@ -1,6 +1,8 @@
 Stopwords Filter
 ================
 
+[![Build Status](https://travis-ci.org/brenes/stopwords-filter.svg?branch=master)](https://travis-ci.org/brenes/stopwords-filter)
+
 This project is a very simple and naive implementation of a stopwords filter that remove a list of banned words (stopwords) from a sentence.
 
 Quick guide
@@ -17,7 +19,8 @@ gem install stopwords-filter
 or
 
 ```
-gem 'stopwords-filter'
+# Don't forget the 'require:'
+gem 'stopwords-filter', require: 'stopwords'
 ```
 
 in your Gemfile.

data/VERSION

@@ -1 +1 @@
-0.2.0
+0.5.0

data/lib/stopwords/filter.rb

@@ -1,17 +1,21 @@
-class Stopwords::Filter
+module Stopwords
 
-  attr_reader :stopwords
+  class Filter
 
-  def initialize stopwords
-    @stopwords = stopwords
-  end
+    attr_reader :stopwords
 
-  def filter words
-    words - @stopwords
-  end
+    def initialize stopwords
+      @stopwords = stopwords
+    end
+
+    def filter words
+      words - @stopwords
+    end
+
+    def stopword? word
+      stopwords.include? word
+    end
 
-  def stopword? word
-    stopwords.include? word
   end
 
 end

data/lib/stopwords/snowball/filter.rb

@@ -1,19 +1,16 @@
-class Stopwords::Snowball::Filter < Stopwords::Filter
-
-
-  attr_reader :locale
-  attr_reader :locale_filename
-
-  def initialize locale
-
-    @locale = locale
-    @locale_filename = "#{File.dirname(__FILE__)}/locales/#{locale}.csv"
-
-    raise "Unknown locale" unless File.exists?(@locale_filename)
-
-    super File.read(@locale_filename).split(",")
-
+module Stopwords
+  module Snowball
+    class Filter < Stopwords::Filter
+      attr_reader :locale
+      attr_reader :locale_filename
+
+      def initialize locale, custom_list = []
+        @locale = locale
+        @locale_filename = "#{File.dirname(__FILE__)}/locales/#{locale}.csv"
+
+        raise ArgumentError.new("Unknown locale: #{locale.inspect}") unless File.exists?(@locale_filename)
+        super File.read(@locale_filename).split(",") + custom_list
+      end
+    end
   end
-
-
-end
+end

data/lib/stopwords/snowball/locales/el.csv

@@ -0,0 +1 @@
+ο,η,το,οι,τα,του,τησ,των,τον,την,και,κι,κ,ειμαι,εισαι,ειναι,ειμαστε,ειστε,στο,στον,στη,στην,μα,αλλα,απο,για,προσ,με,σε,ωσ,παρα,αντι,κατα,μετα,θα,να,δε,δεν,μη,μην,επι,ενω,εαν,αν,τοτε,που,πωσ,ποιοσ,ποια,ποιο,ποιοι,ποιεσ,ποιων,ποιουσ,αυτοσ,αυτη,αυτο,αυτοι,αυτων,αυτουσ,αυτεσ,αυτα,εκεινοσ,εκεινη,εκεινο,εκεινοι,εκεινεσ,εκεινα,εκεινων,εκεινουσ,οπωσ,ομωσ,ισωσ,οσο,οτι

data/lib/stopwords/snowball/locales/pl.csv

@@ -0,0 +1 @@
+a,aby,ach,acz,aczkolwiek,aj,albo,ale,ależ,ani,aż,bardziej,bardzo,bo,bowiem,by,byli,bynajmniej,być,był,była,było,były,będzie,będą,cali,cała,cały,ci,cię,ciebie,co,cokolwiek,coś,czasami,czasem,czemu,czy,czyli,daleko,dla,dlaczego,dlatego,do,dobrze,dokąd,dość,dużo,dwa,dwaj,dwie,dwoje,dziś,dzisiaj,gdy,gdyby,gdyż,gdzie,gdziekolwiek,gdzieś,i,ich,ile,im,inna,inne,inny,innych,iż,ja,ją,jak,jakaś,jakby,jaki,jakichś,jakie,jakiś,jakiż,jakkolwiek,jako,jakoś,je,jeden,jedna,jedno,jednak,jednakże,jego,jej,jemu,jest,jestem,jeszcze,jeśli,jeżeli,już,ją,każdy,kiedy,kilka,kimś,kto,ktokolwiek,ktoś,która,które,którego,której,który,których,którym,którzy,ku,lat,lecz,lub,ma,mają,mało,mam,mi,mimo,między,mną,mnie,mogą,moi,moim,moja,moje,może,możliwe,można,mój,mu,musi,my,na,nad,nam,nami,nas,nasi,nasz,nasza,nasze,naszego,naszych,natomiast,natychmiast,nawet,nią,nic,nich,nie,niech,niego,niej,niemu,nigdy,nim,nimi,niż,no,o,obok,od,około,on,ona,one,oni,ono,oraz,oto,owszem,pan,pana,pani,po,pod,podczas,pomimo,ponad,ponieważ,powinien,powinna,powinni,powinno,poza,prawie,przecież,przed,przede,przedtem,przez,przy,roku,również,sama,są,się,skąd,sobie,sobą,sposób,swoje,ta,tak,taka,taki,takie,także,tam,te,tego,tej,temu,ten,teraz,też,to,tobą,tobie,toteż,trzeba,tu,tutaj,twoi,twoim,twoja,twoje,twym,twój,ty,tych,tylko,tym,u,w,wam,wami,was,wasz,wasza,wasze,we,według,wiele,wielu,więc,więcej,wszyscy,wszystkich,wszystkie,wszystkim,wszystko,wtedy,wy,właśnie,z,za,zapewne,zawsze,ze,zł,znowu,znów,został,żaden,żadna,żadne,żadnych,że,żeby

data/lib/stopwords/snowball/locales/ro.csv

@@ -0,0 +1 @@
+acea,aceasta,această,aceea,acei,aceia,acel,acela,acele,acelea,acest,acesta,aceste,acestea,aceşti,aceştia,acolo,acord,acum,ai,aia,aibă,aici,al,ăla,ale,alea,ălea,altceva,altcineva,am,ar,are,aş,aşadar,asemenea,asta,ăsta,astăzi,astea,ăstea,ăştia,asupra,aţi,au,avea,avem,aveţi,azi,bine,bucur,bună,ca,că,căci,când,care,cărei,căror,cărui,cât,câte,câţi,către,câtva,caut,ce,cel,ceva,chiar,cinci,cînd,cine,cineva,cît,cîte,cîţi,cîtva,contra,cu,cum,cumva,curând,curînd,da,dă,dacă,dar,dată,datorită,dau,de,deci,deja,deoarece,departe,deşi,din,dinaintea,dintr-,dintre,doi,doilea,două,drept,după,ea,ei,el,ele,eram,este,eşti,eu,face,fără,fata,fi,fie,fiecare,fii,fim,fiţi,fiu,frumos,graţie,halbă,iar,ieri,îi,îl,îmi,împotriva,în ,înainte,înaintea,încât,încît,încotro,între,întrucât,întrucît,îţi,la,lângă,le,li,lîngă,lor,lui,mă,mai,mâine,mea,mei,mele,mereu,meu,mi,mie,mîine,mine,mult,multă,mulţi,mulţumesc,ne,nevoie,nicăieri,nici,nimeni,nimeri,nimic,nişte,noastră,noastre,noi,noroc,noştri,nostru,nouă,nu,opt,ori,oricând,oricare,oricât,orice,oricînd,oricine,oricît,oricum,oriunde,până,patra,patru,patrulea,pe,pentru,peste,pic,pînă,poate,pot,prea,prima,primul,prin,puţin,puţina,puţină,rog,sa,să,săi,sale,şapte,şase,sau,său,se,şi,sînt,sîntem,sînteţi,spate,spre,ştiu,sub,sunt,suntem,sunteţi,sută,ta,tăi,tale,tău,te,ţi,ţie,timp,tine,toată,toate,tot,toţi,totuşi,trei,treia,treilea,tu,un,una,unde,undeva,unei,uneia,unele,uneori,unii,unor,unora,unu,unui,unuia,unul,vă,vi,voastră,voastre,voi,voştri,vostru,vouă,vreme,vreo,vreun,zece,zero,zi,zice

data/lib/stopwords/snowball/locales/ru.csv

@@ -1,159 +1 @@
-É
-×
-×Ï
-ÎÅ
-ÞÔÏ
-ÏÎ
-ÎÁ
-Ñ
-Ó
-ÓÏ
-ËÁË
-Á
-ÔÏ
-×ÓÅ
-ÏÎÁ
-ÔÁË
-ÅÇÏ
-ÎÏ
-ÄÁ
-ÔÙ
-Ë
-Õ
-ÖÅ
-×Ù
-ÚÁ
-ÂÙ
-ÐÏ
-ÔÏÌØËÏ
-ÅÅ
-ÍÎÅ
-ÂÙÌÏ
-×ÏÔ
-ÏÔ
-ÍÅÎÑ
-ÅÝÅ
-ÎÅÔ
-Ï
-ÉÚ
-ÅÍÕ
-ÔÅÐÅÒØ
-ËÏÇÄÁ
-ÄÁÖÅ
-ÎÕ
-×ÄÒÕÇ
-ÌÉ
-ÅÓÌÉ
-ÕÖÅ
-ÉÌÉ
-ÎÉ
-ÂÙÔØ
-ÂÙÌ
-ÎÅÇÏ
-ÄÏ
-×ÁÓ
-ÎÉÂÕÄØ
-ÏÐÑÔØ
-ÕÖ
-×ÁÍ
-ÓËÁÚÁÌ
-×ÅÄØ
-ÔÁÍ
-ÐÏÔÏÍ
-ÓÅÂÑ
-ÎÉÞÅÇÏ
-ÅÊ
-ÍÏÖÅÔ
-ÏÎÉ
-ÔÕÔ
-ÇÄÅ
-ÅÓÔØ
-ÎÁÄÏ
-ÎÅÊ
-ÄÌÑ
-ÍÙ
-ÔÅÂÑ
-ÉÈ
-ÞÅÍ
-ÂÙÌÁ
-ÓÁÍ
-ÞÔÏÂ
-ÂÅÚ
-ÂÕÄÔÏ
-ÞÅÌÏ×ÅË
-ÞÅÇÏ
-ÒÁÚ
-ÔÏÖÅ
-ÓÅÂÅ
-ÐÏÄ
-ÖÉÚÎØ
-ÂÕÄÅÔ
-Ö
-ÔÏÇÄÁ
-ËÔÏ
-ÜÔÏÔ
-ÇÏ×ÏÒÉÌ
-ÔÏÇÏ
-ÐÏÔÏÍÕ
-ÜÔÏÇÏ
-ËÁËÏÊ
-ÓÏ×ÓÅÍ
-ÎÉÍ
-ÚÄÅÓØ
-ÜÔÏÍ
-ÏÄÉÎ
-ÐÏÞÔÉ
-ÍÏÊ
-ÔÅÍ
-ÞÔÏÂÙ
-ÎÅÅ
-ËÁÖÅÔÓÑ
-ÓÅÊÞÁÓ
-ÂÙÌÉ
-ËÕÄÁ
-ÚÁÞÅÍ
-ÓËÁÚÁÔØ
-×ÓÅÈ
-ÎÉËÏÇÄÁ
-ÓÅÇÏÄÎÑ
-ÍÏÖÎÏ
-ÐÒÉ
-ÎÁËÏÎÅÃ
-Ä×Á
-ÏÂ
-ÄÒÕÇÏÊ
-ÈÏÔØ
-ÐÏÓÌÅ
-ÎÁÄ
-ÂÏÌØÛÅ
-ÔÏÔ
-ÞÅÒÅÚ
-ÜÔÉ
-ÎÁÓ
-ÐÒÏ
-×ÓÅÇÏ
-ÎÉÈ
-ËÁËÁÑ
-ÍÎÏÇÏ
-ÒÁÚ×Å
-ÓËÁÚÁÌÁ
-ÔÒÉ
-ÜÔÕ
-ÍÏÑ
-×ÐÒÏÞÅÍ
-ÈÏÒÏÛÏ
-Ó×ÏÀ
-ÜÔÏÊ
-ÐÅÒÅÄ
-ÉÎÏÇÄÁ
-ÌÕÞÛÅ
-ÞÕÔØ
-ÔÏÍ
-ÎÅÌØÚÑ
-ÔÁËÏÊ
-ÉÍ
-ÂÏÌÅÅ
-×ÓÅÇÄÁ
-ËÏÎÅÞÎÏ
-×ÓÀ
-ÍÅÖÄÕ
+и,в,во,не,что,он,на,я,с,со,как,а,то,все,она,так,его,но,да,ты,к,у,же,вы,за,бы,по,только,ее,мне,было,вот,от,меня,еще,нет,о,из,ему,теперь,когда,даже,ну,вдруг,ли,если,уже,или,ни,быть,был,него,до,вас,нибудь,опять,уж,вам,сказал,ведь,там,потом,себя,ничего,ей,может,они,тут,где,есть,надо,ней,для,мы,тебя,их,чем,была,сам,чтоб,без,будто,человек,чего,раз,тоже,себе,под,жизнь,будет,ж,тогда,кто,этот,говорил,того,потому,этого,какой,совсем,ним,здесь,этом,один,почти,мой,тем,чтобы,нее,кажется,сейчас,были,куда,зачем,сказать,всех,никогда,сегодня,можно,при,наконец,два,об,другой,хоть,после,над,больше,тот,через,эти,нас,про,всего,них,какая,много,разве,сказала,три,эту,моя,впрочем,хорошо,свою,этой,перед,иногда,лучше,чуть,том,нельзя,такой,им,более,всегда,конечно,всю,между

data/lib/stopwords/snowball/locales/sv.csv

@@ -1,114 +1 @@
-och
-det
-att
-i
-en
-jag
-hon
-som
-han
-på
-den
-med
-var
-sig
-för
-så
-till
-är
-men
-ett
-om
-hade
-de
-av
-icke
-mig
-du
-henne
-då
-sin
-nu
-har
-inte
-hans
-honom
-skulle
-hennes
-där
-min
-man
-ej
-vid
-kunde
-något
-från
-ut
-när
-efter
-upp
-vi
-dem
-vara
-vad
-över
-än
-dig
-kan
-sina
-här
-ha
-mot
-alla
-under
-någon
-eller
-allt
-mycket
-sedan
-ju
-denna
-själv
-detta
-åt
-utan
-varit
-hur
-ingen
-mitt
-ni
-bli
-blev
-oss
-din
-dessa
-några
-deras
-blir
-mina
-samma
-vilken
-er
-sådan
-vår
-blivit
-dess
-inom
-mellan
-sådant
-varför
-varje
-vilka
-ditt
-vem
-vilket
-sitta
-sådana
-vart
-dina
-vars
-vårt
-våra
-ert
-era
-vilkas
+och,det,att,i,en,jag,hon,som,han,på,den,med,var,sig,för,så,till,är,men,ett,om,hade,de,av,icke,mig,du,henne,då,sin,nu,har,inte,hans,honom,skulle,hennes,där,min,man,ej,vid,kunde,något,från,ut,när,efter,upp,vi,dem,vara,vad,över,än,dig,kan,sina,här,ha,mot,alla,under,någon,eller,allt,mycket,sedan,ju,denna,själv,detta,åt,utan,varit,hur,ingen,mitt,ni,bli,blev,oss,din,dessa,några,deras,blir,mina,samma,vilken,er,sådan,vår,blivit,dess,inom,mellan,sådant,varför,varje,vilka,ditt,vem,vilket,sitta,sådana,vart,dina,vars,vårt,våra,ert,era,vilkas,

data/lib/stopwords/snowball/wordsieve.rb

@@ -1,16 +1,20 @@
-class Stopwords::Snowball::WordSieve
-  def initialize
-    @filters = Dir[File.dirname(__FILE__) + '/locales/*.csv'].each_with_object({}) do |file, filters|
-      lang = File.basename(file, '.csv').to_sym
-      filters[lang] = Stopwords::Snowball::Filter.new lang
-    end
-  end
+module Stopwords
+  module Snowball
+    class Stopwords::Snowball::WordSieve
+      def initialize custom_list = []
+        @filters = Dir[File.dirname(__FILE__) + '/locales/*.csv'].each_with_object({}) do |file, filters|
+          lang = File.basename(file, '.csv').to_sym
+          filters[lang] = Stopwords::Snowball::Filter.new lang, custom_list
+        end
+      end
 
-  def stopword? args={}
-    args[:lang] ? @filters[args[:lang]].stopword?(args[:word] ) : false
-  end
+      def stopword? args={}
+        args[:lang] ? @filters[args[:lang]].stopword?(args[:word] ) : false
+      end
 
-  def filter args={}
-    args[:lang] ? @filters[args[:lang]].filter(args[:words] ) : args[:words]
+      def filter args={}
+        args[:lang] ? @filters[args[:lang]].filter(args[:words] ) : args[:words]
+      end
+    end
   end
-end
+end

data/spec/lib/filter_spec.rb

@@ -9,9 +9,9 @@ describe Stopwords::Filter do
 
     subject { filter }
 
-    it("should remove the stopwords for the list of words to be filtered") { filter.filter("desde Santurce a Bilbao".split).should == ["Santurce", "Bilbao"]}
+    it("should remove the stopwords for the list of words to be filtered") { expect(filter.filter("desde Santurce a Bilbao".split)).to eq ["Santurce", "Bilbao"]}
 
   end
 
 
-end
+end

data/spec/lib/snowball_filter_spec.rb

@@ -9,11 +9,32 @@ describe Stopwords::Snowball::Filter do
 
     subject { filter }
 
-    its(:stopwords) { should == ["de", "la", "que", "el", "en", "y", "a", "los", "del", "se", "las", "por", "un", "para", "con", "no", "una", "su", "al", "lo", "como", "más", "pero", "sus", "le", "ya", "o", "este", "sí", "porque", "esta", "entre", "cuando", "muy", "sin", "sobre", "también", "me", "hasta", "hay", "donde", "quien", "desde", "todo", "nos", "durante", "todos", "uno", "les", "ni", "contra", "otros", "ese", "eso", "ante", "ellos", "e", "esto", "mí", "antes", "algunos", "qué", "unos", "yo", "otro", "otras", "otra", "él", "tanto", "esa", "estos", "mucho", "quienes", "nada", "muchos", "cual", "poco", "ella", "estar", "estas", "algunas", "algo", "nosotros", "mi", "mis", "tú", "te", "ti", "tu", "tus", "ellas", "nosotras", "vosotros", "vosotras", "os", "mío", "mía", "míos", "mías", "tuyo", "tuya", "tuyos", "tuyas", "suyo", "suya", "suyos", "suyas", "nuestro", "nuestra", "nuestros", "nuestras", "vuestro", "vuestra", "vuestros", "vuestras", "esos", "esas", "estoy", "estás", "está", "estamos", "estáis", "están", "esté", "estés", "estemos", "estéis", "estén", "estaré", "estarás", "estará", "estaremos", "estaréis", "estarán", "estaría", "estarías", "estaríamos", "estaríais", "estarían", "estaba", "estabas", "estábamos", "estabais", "estaban", "estuve", "estuviste", "estuvo", "estuvimos", "estuvisteis", "estuvieron", "estuviera", "estuvieras", "estuviéramos", "estuvierais", "estuvieran", "estuviese", "estuvieses", "estuviésemos", "estuvieseis", "estuviesen", "estando", "estado", "estada", "estados", "estadas", "estad", "he", "has", "ha", "hemos", "habéis", "han", "haya", "hayas", "hayamos", "hayáis", "hayan", "habré", "habrás", "habrá", "habremos", "habréis", "habrán", "habría", "habrías", "habríamos", "habríais", "habrían", "había", "habías", "habíamos", "habíais", "habían", "hube", "hubiste", "hubo", "hubimos", "hubisteis", "hubieron", "hubiera", "hubieras", "hubiéramos", "hubierais", "hubieran", "hubiese", "hubieses", "hubiésemos", "hubieseis", "hubiesen", "habiendo", "habido", "habida", "habidos", "habidas", "soy", "eres", "es", "somos", "sois", "son", "sea", "seas", "seamos", "seáis", "sean", "seré", "serás", "será", "seremos", "seréis", "serán", "sería", "serías", "seríamos", "seríais", "serían", "era", "eras", "éramos", "erais", "eran", "fui", "fuiste", "fue", "fuimos", "fuisteis", "fueron", "fuera", "fueras", "fuéramos", "fuerais", "fueran", "fuese", "fueses", "fuésemos", "fueseis", "fuesen", "siendo", "sido", "tengo", "tienes", "tiene", "tenemos", "tenéis", "tienen", "tenga", "tengas", "tengamos", "tengáis", "tengan", "tendré", "tendrás", "tendrá", "tendremos", "tendréis", "tendrán", "tendría", "tendrías", "tendríamos", "tendríais", "tendrían", "tenía", "tenías", "teníamos", "teníais", "tenían", "tuve", "tuviste", "tuvo", "tuvimos", "tuvisteis", "tuvieron", "tuviera", "tuvieras", "tuviéramos", "tuvierais", "tuvieran", "tuviese", "tuvieses", "tuviésemos", "tuvieseis", "tuviesen", "teniendo", "tenido", "tenida", "tenidos", "tenidas", "tened"]}
+    it("should have the appropiate stopwords") { expect(subject.stopwords).to eq ["de", "la", "que", "el", "en", "y", "a", "los", "del", "se", "las", "por", "un", "para", "con", "no", "una", "su", "al", "lo", "como", "más", "pero", "sus", "le", "ya", "o", "este", "sí", "porque", "esta", "entre", "cuando", "muy", "sin", "sobre", "también", "me", "hasta", "hay", "donde", "quien", "desde", "todo", "nos", "durante", "todos", "uno", "les", "ni", "contra", "otros", "ese", "eso", "ante", "ellos", "e", "esto", "mí", "antes", "algunos", "qué", "unos", "yo", "otro", "otras", "otra", "él", "tanto", "esa", "estos", "mucho", "quienes", "nada", "muchos", "cual", "poco", "ella", "estar", "estas", "algunas", "algo", "nosotros", "mi", "mis", "tú", "te", "ti", "tu", "tus", "ellas", "nosotras", "vosotros", "vosotras", "os", "mío", "mía", "míos", "mías", "tuyo", "tuya", "tuyos", "tuyas", "suyo", "suya", "suyos", "suyas", "nuestro", "nuestra", "nuestros", "nuestras", "vuestro", "vuestra", "vuestros", "vuestras", "esos", "esas", "estoy", "estás", "está", "estamos", "estáis", "están", "esté", "estés", "estemos", "estéis", "estén", "estaré", "estarás", "estará", "estaremos", "estaréis", "estarán", "estaría", "estarías", "estaríamos", "estaríais", "estarían", "estaba", "estabas", "estábamos", "estabais", "estaban", "estuve", "estuviste", "estuvo", "estuvimos", "estuvisteis", "estuvieron", "estuviera", "estuvieras", "estuviéramos", "estuvierais", "estuvieran", "estuviese", "estuvieses", "estuviésemos", "estuvieseis", "estuviesen", "estando", "estado", "estada", "estados", "estadas", "estad", "he", "has", "ha", "hemos", "habéis", "han", "haya", "hayas", "hayamos", "hayáis", "hayan", "habré", "habrás", "habrá", "habremos", "habréis", "habrán", "habría", "habrías", "habríamos", "habríais", "habrían", "había", "habías", "habíamos", "habíais", "habían", "hube", "hubiste", "hubo", "hubimos", "hubisteis", "hubieron", "hubiera", "hubieras", "hubiéramos", "hubierais", "hubieran", "hubiese", "hubieses", "hubiésemos", "hubieseis", "hubiesen", "habiendo", "habido", "habida", "habidos", "habidas", "soy", "eres", "es", "somos", "sois", "son", "sea", "seas", "seamos", "seáis", "sean", "seré", "serás", "será", "seremos", "seréis", "serán", "sería", "serías", "seríamos", "seríais", "serían", "era", "eras", "éramos", "erais", "eran", "fui", "fuiste", "fue", "fuimos", "fuisteis", "fueron", "fuera", "fueras", "fuéramos", "fuerais", "fueran", "fuese", "fueses", "fuésemos", "fueseis", "fuesen", "siendo", "sido", "tengo", "tienes", "tiene", "tenemos", "tenéis", "tienen", "tenga", "tengas", "tengamos", "tengáis", "tengan", "tendré", "tendrás", "tendrá", "tendremos", "tendréis", "tendrán", "tendría", "tendrías", "tendríamos", "tendríais", "tendrían", "tenía", "tenías", "teníamos", "teníais", "tenían", "tuve", "tuviste", "tuvo", "tuvimos", "tuvisteis", "tuvieron", "tuviera", "tuvieras", "tuviéramos", "tuvierais", "tuvieran", "tuviese", "tuvieses", "tuviésemos", "tuvieseis", "tuviesen", "teniendo", "tenido", "tenida", "tenidos", "tenidas", "tened"]}
 
-    it("should remove the stopwords for the list of words to be filtered") { filter.filter("desde Santurce a Bilbao".split).should == ["Santurce", "Bilbao"]}
+    it("should remove the stopwords for the list of words to be filtered") { expect(filter.filter("desde Santurce a Bilbao".split)).to eq ["Santurce", "Bilbao"]}
 
   end
 
+  context "when custom list" do
 
-end
+    let (:filter) { Stopwords::Snowball::Filter.new "es", ["Santurce"] }
+
+    subject { filter }
+
+    it("should remove the stopwords for the list of words to be filtered") { expect(filter.filter("desde Santurce a Bilbao".split)).to eq ["Bilbao"]}
+
+  end
+
+  context "when locale is not found" do
+
+    let (:filter) { Stopwords::Snowball::Filter.new "no-real" }
+
+    subject { filter }
+
+    it("should throw an error explaining the locale not found") { expect{filter}.to raise_error(ArgumentError)}
+
+  end
+
+
+
+end

metadata

@@ -1,42 +1,39 @@
---- !ruby/object:Gem::Specification 
+--- !ruby/object:Gem::Specification
 name: stopwords-filter
-version: !ruby/object:Gem::Version 
-  prerelease: 
-  version: 0.2.1
+version: !ruby/object:Gem::Version
+  version: 0.5.0
 platform: ruby
-authors: 
+authors:
 - David J. Brenes
 autorequire: 
 bindir: bin
 cert_chain: []
-
-date: 2013-02-03 00:00:00 Z
+date: 2021-06-09 00:00:00.000000000 Z
 dependencies: []
-
-description: Small library that allows you to create a simple stopwords filter or use some based on Snowball stopwords lists
+description: Small library that allows you to create a simple stopwords filter or
+  use some based on Snowball stopwords lists
 email: davidjbrenes@gmail.com
 executables: []
-
 extensions: []
-
-extra_rdoc_files: 
+extra_rdoc_files:
 - CHANGELOG
 - LICENSE.txt
 - README.md
-files: 
+files:
 - CHANGELOG
 - Gemfile
 - Gemfile.lock
+- LICENSE.txt
 - README.md
 - VERSION
 - lib/stopwords.rb
 - lib/stopwords/filter.rb
 - lib/stopwords/snowball.rb
 - lib/stopwords/snowball/filter.rb
-- lib/stopwords/snowball/wordsieve.rb
 - lib/stopwords/snowball/locales/bg.csv
 - lib/stopwords/snowball/locales/da.csv
 - lib/stopwords/snowball/locales/de.csv
+- lib/stopwords/snowball/locales/el.csv
 - lib/stopwords/snowball/locales/en.csv
 - lib/stopwords/snowball/locales/es.csv
 - lib/stopwords/snowball/locales/fn.csv
@@ -44,39 +41,37 @@ files:
 - lib/stopwords/snowball/locales/hu.csv
 - lib/stopwords/snowball/locales/it.csv
 - lib/stopwords/snowball/locales/nl.csv
+- lib/stopwords/snowball/locales/pl.csv
 - lib/stopwords/snowball/locales/pt.csv
+- lib/stopwords/snowball/locales/ro.csv
 - lib/stopwords/snowball/locales/ru.csv
 - lib/stopwords/snowball/locales/sv.csv
+- lib/stopwords/snowball/wordsieve.rb
 - spec/lib/filter_spec.rb
 - spec/lib/snowball_filter_spec.rb
 - spec/spec_helper.rb
-- LICENSE.txt
 homepage: http://github.com/brenes/stopwords-filter
-licenses: 
+licenses:
 - MIT
+metadata: {}
 post_install_message: 
 rdoc_options: []
-
-require_paths: 
+require_paths:
 - lib
-required_ruby_version: !ruby/object:Gem::Requirement 
-  none: false
-  requirements: 
+required_ruby_version: !ruby/object:Gem::Requirement
+  requirements:
   - - ">="
-    - !ruby/object:Gem::Version 
-      version: "0"
-required_rubygems_version: !ruby/object:Gem::Requirement 
-  none: false
-  requirements: 
+    - !ruby/object:Gem::Version
+      version: '0'
+required_rubygems_version: !ruby/object:Gem::Requirement
+  requirements:
   - - ">="
-    - !ruby/object:Gem::Version 
-      version: "0"
+    - !ruby/object:Gem::Version
+      version: '0'
 requirements: []
-
 rubyforge_project: 
-rubygems_version: 1.8.24
+rubygems_version: 2.5.1
 signing_key: 
-specification_version: 3
+specification_version: 4
 summary: Snowball based filters for stopwords
 test_files: []
-