rutils 0.2.5 → 1.0.0

data/lib/transliteration/bidi.rb

@@ -1,78 +1,21 @@
-# Реализует транслитерацию "в обе стороны", дающую возможность автоматически использовать URL как ключ записи.
-# Перед применением убедитесь что среди ваших пользователей не осталось ни одного человека, пользующегося 
-# любым другим алфавитом на земле кроме русского и латинского. К примеру можете таких пользователей лично истребить.
-# 
-# Перед тем как использовать этот модуль подумайте - скорее всего вы строите приложение в котором Юникод использован
-# неправильно или не полностью. Честно.
+# -*- encoding: utf-8 -*- 
+# ++DEPRECATED++ Этот модуль удален и присутствует только для выдачи сообщения об ошибке.
 module RuTils::Transliteration::BiDi
-  TABLE_TO = {
-    "А"=>"A","Б"=>"B","В"=>"V","Г"=>"G","Д"=>"D",
-    "Е"=>"E","Ё"=>"JO","Ж"=>"ZH","З"=>"Z","И"=>"I",
-    "Й"=>"JJ","К"=>"K","Л"=>"L","М"=>"M","Н"=>"N",
-    "О"=>"O","П"=>"P","Р"=>"R","С"=>"S","Т"=>"T",
-    "У"=>"U","Ф"=>"F","Х"=>"KH","Ц"=>"C","Ч"=>"CH",
-    "Ш"=>"SH","Щ"=>"SHH","Ъ"=>"_~","Ы"=>"Y","Ь"=>"_'",
-    "Э"=>"EH","Ю"=>"JU","Я"=>"JA","а"=>"a","б"=>"b",
-    "в"=>"v","г"=>"g","д"=>"d","е"=>"e","ё"=>"jo",
-    "ж"=>"zh","з"=>"z","и"=>"i","й"=>"jj","к"=>"k",
-    "л"=>"l","м"=>"m","н"=>"n","о"=>"o","п"=>"p",
-    "р"=>"r","с"=>"s","т"=>"t","у"=>"u","ф"=>"f",
-    "х"=>"kh","ц"=>"c","ч"=>"ch","ш"=>"sh","щ"=>"shh",
-    "ъ"=>"~","ы"=>"y","ь"=>"'","э"=>"eh","ю"=>"ju",
-    "я"=>"ja",
-    # " "=>"__","_"=>"__"
-    # так сразу не получится, будут проблемы с "Ь"=>"_'"
-  }.sort do |one, two|
-    two[1].split(//).size <=> one[1].split(//).size
-  end
-
-  TABLE_FROM = TABLE_TO.unshift([" ","__"]).clone
-  TABLE_TO.unshift(["_","__"])
-
-  #:startdoc:
+  ERR = "Equivalent bidirectional transliteration for URLs is malpractive. BiDi translit has been removed from RuTils"
   
-  def self.translify(str, allow_slashes = true)
-    slash = allow_slashes ? '/' : '';
-
-    s = str.clone.gsub(/[^\- _0-9a-zA-ZА-ёЁ#{slash}]/, '')
-    lang_fr = s.scan(/[А-ёЁ ]+/)
-    lang_fr.each do |fr|
-      TABLE_TO.each do | translation |
-        fr.gsub!(/#{translation[0]}/, translation[1])
-      end
-    end
-
-    lang_sr = s.scan(/[0-9A-Za-z\_\-\.\/\']+/)
-
-    string = ""
-    if s =~ /\A[А-ёЁ ]/
-      lang_fr, lang_sr = lang_sr, lang_fr
-      string = "+"
-    end
-
-    0.upto([lang_fr.length, lang_sr.length].min-1) do |x|
-      string += lang_sr[x] + "+" + lang_fr[x] + "+";
-    end
-
-    if (lang_fr.length < lang_sr.length)
-      string += lang_sr[lang_sr.length-1]
-    else
-      string[0, string.length-1]
-    end
+  extend self
+  
+  # ++DEPRECATED++ 
+  def translify(str, allow_slashes = true)
+    bail!
   end
 
-  def self.detranslify(str, allow_slashes = true)
-    slash = allow_slashes ? '/' : '';
-
-    str.split('/').inject(out = "") do |out, pg|
-      strings = pg.split('+')
-      1.step(strings.length-1, 2) do |x|
-        TABLE_FROM.each do | translation |
-          strings[x].gsub!(/#{translation[1]}/, translation[0])
-        end
-      end
-      out << slash << strings.to_s
-    end
-    out[slash.length, out.length-slash.length]
+  # ++DEPRECATED++ 
+  def detranslify(str, allow_slashes = true)
+    bail!
+  end
+  
+  def bail! #:nodoc:
+    raise RuTils::RemovedFeature, ERR
   end
 end

data/lib/transliteration/simple.rb

@@ -1,3 +1,4 @@
+# -*- encoding: utf-8 -*- 
 # Реализует простейшую транслитерацию
 #   "вот мы и здесь".translify => "vot my i zdes"
 #   "vot my i zdes".detranslify => "вот мы и здесь"

data/lib/transliteration/transliteration.rb

@@ -1,11 +1,13 @@
+# -*- encoding: utf-8 -*- 
 module RuTils
   module Transliteration #:nodoc:
   end
 end
 
 require File.join(File.dirname(__FILE__), 'simple')
-require File.join(File.dirname(__FILE__), 'bidi')
 
+# Заглушка
+require File.join(File.dirname(__FILE__), 'bidi')
     
 # Реализует транслитерацию любого объекта, реализующего String или to_s
 module RuTils::Transliteration::StringFormatting
@@ -25,24 +27,24 @@ module RuTils::Transliteration::StringFormatting
     RuTils::Transliteration::Simple::dirify(self.to_s)
   end
   
-  # Транслитерирует строку (взаимно-однозначный транслит), и возвращает измененную строку
+  # ++DEPRECATED++ Вызывает ошибку
   def bidi_translify(allow_slashes = true)
-    RuTils::Transliteration::BiDi::translify(self.to_s, allow_slashes)
+    RuTils::Transliteration::BiDi.bail!
   end
   
-  # Транслитерирует строку (взаимно-однозначный транслит), меняя объект
+  # ++DEPRECATED++ Вызывает ошибку
   def bidi_translify!(allow_slashes = true)
-    self.replace(RuTils::Transliteration::BiDi::translify(self.to_s, allow_slashes))
+    RuTils::Transliteration::BiDi.bail!
   end
 
-  # Заменяет латиницу на кириллицу (взаимно-однозначный транслит), меняя объект
+  # ++DEPRECATED++ Вызывает ошибку
   def bidi_detranslify!(allow_slashes = true)
-    self.replace(RuTils::Transliteration::BiDi::detranslify(self.to_s, allow_slashes))
+    RuTils::Transliteration::BiDi.bail!
   end
   
-  # Заменяет латиницу на кириллицу (взаимно-однозначный транслит), и возвращает измененную строку
+  # ++DEPRECATED++ Вызывает ошибку
   def bidi_detranslify(allow_slashes = true)
-    RuTils::Transliteration::BiDi::detranslify(self.to_s, allow_slashes)
+    RuTils::Transliteration::BiDi.bail!
   end
 end
 

data/lib/version.rb

@@ -0,0 +1,5 @@
+# -*- encoding: utf-8 -*- 
+module RuTils
+  # Версия RuTils
+  VERSION = '1.0.0'
+end

data/test/extras/integration_bluecloth.rb

@@ -0,0 +1,13 @@
+# -*- encoding: utf-8 -*- 
+require 'bluecloth'
+
+# Интеграция с BlueCloth - Markdown
+# Сам Markdown никакой обработки типографики не производит (это делает RubyPants, но вряд ли его кто-то юзает на практике)
+class BlueclothIntegrationTest < Test::Unit::TestCase
+  C = RuTils::Gilenson::BlueClothExtra
+  
+  def test_integration_markdown
+    assert_equal "<p>И вот&#160;&#171;они пошли туда&#187;, и&#160;шли шли&#160;шли</p>", 
+      C.new('И вот "они пошли туда", и шли шли шли').to_html
+  end
+end

data/test/extras/integration_maruku.rb

@@ -0,0 +1,15 @@
+# -*- encoding: utf-8 -*- 
+require 'maruku'
+
+# Интеграция с BlueCloth - Markdown
+# Сам Markdown никакой обработки типографики не производит (это делает RubyPants, но вряд ли его кто-то юзает на практике)
+class MarukuIntegrationTest < Test::Unit::TestCase
+  C = RuTils::Gilenson::MarukuExtra
+  
+  def test_integration_maruku
+    
+    assert_equal "<p>И вот&#160;&#171;они пошли туда&#187;, и&#160;шли шли&#160;шли</p>", 
+      C.new('И вот "они пошли туда", и шли шли шли').to_html
+    
+  end
+end

data/test/{test_rails_filter.rb → extras/integration_rails_filter.rb}

@@ -1,5 +1,7 @@
+# -*- encoding: utf-8 -*- 
+require 'action_controller'
 require 'action_controller/test_process'
-require File.dirname(__FILE__) +  '/../init.rb'
+require File.dirname(__FILE__) +  '/../../init.rb'
 
 ActionController::Routing::Routes.draw {  |map| map.connect ':controller/:action/:id' }
 

data/test/extras/integration_rails_gilenson_helpers.rb

@@ -0,0 +1,80 @@
+# -*- encoding: utf-8 -*- 
+
+require 'action_controller'
+require 'action_view'
+
+require 'action_controller/test_process'
+require File.dirname(__FILE__) +  '/../../init.rb'
+
+# Перегрузка helper'ов Rails
+class RailsGilensonHelpersTest < Test::Unit::TestCase
+  
+  class Kontroller < ActionController::Base
+    def action_with_gilensize
+      render :inline => "<%= gilensize('Они пришли -- туда -- к А. П. Чехову') %>"
+    end
+    
+    def action_with_gilensize_and_options
+      render :inline => "<%= gilensize('Они пришли -- туда -- к А. П. Чехову', :raw_output => true) %>"
+    end
+    
+    def action_with_textilize
+      render :inline => "<%= textilize('Они пришли -- туда -- к А. П. Чехову') %>"
+    end
+    
+    def action_with_textilize_without_overrides
+      RuTils.overrides = false
+      render :inline => "<%= textilize('Они пришли -- туда -- к А. П. Чехову') %>"
+    end
+    
+    def action_with_markdown
+      render :inline => "<%= markdown('Они пришли -- туда -- к А. П. Чехову') %>"
+    end
+
+    def action_with_markdown_without_overrides
+      RuTils.overrides = false
+      render :inline => "<%= markdown('Они пришли -- туда -- к А. П. Чехову') %>"
+    end
+    
+    def rescue_action(e)
+      raise e
+    end
+  end
+  
+  def setup
+    @request = ActionController::TestRequest.new
+    @response = ActionController::TestResponse.new
+    @controller = Kontroller.new
+  end
+  
+  def test_action_with_gilensize
+    get :action_with_gilensize
+    assert_equal 'Они&#160;пришли &#8212; туда &#8212; к&#160;А.П.&#8201;Чехову', @response.body
+  end
+  
+  def test_action_with_gilensize_and_options
+    get :action_with_gilensize_and_options
+    assert_equal "Они пришли — туда — к А.П. Чехову", @response.body
+  end
+  
+  def test_action_with_textilize
+    get :action_with_textilize
+    assert_equal "<p>Они пришли &#8212; туда &#8212; к&#160;А.П.&#8201;Чехову</p>", @response.body
+  end
+  
+  def test_action_with_textilize_without_overrides
+    get :action_with_textilize_without_overrides
+    assert_equal "<p>Они пришли &#8212; туда &#8212; к А. П. Чехову</p>", @response.body, "Initials should not be formatted"
+  end
+  
+  def test_action_with_markdown
+    get :action_with_markdown
+    assert_equal "<p>Они пришли &#8212; туда &#8212; к&#160;А.П.&#8201;Чехову</p>", @response.body
+  end
+  
+  def test_action_with_markdown_without_overrides
+    get :action_with_markdown_without_overrides
+    assert_equal "<p>Они пришли -- туда -- к А. П. Чехову</p>", @response.body
+  end
+  
+end

data/test/{test_rails_helpers.rb → extras/integration_rails_helpers.rb}

@@ -1,8 +1,21 @@
-TEST_DATE = Date.parse("1983-10-15") # coincidentially...
-TEST_TIME = Time.local(1983, 10, 15, 12, 15) # also coincidentially...
+# -*- encoding: utf-8 -*- 
+
+require 'action_controller'
+require 'action_view'
+
+require 'action_controller/test_process'
+require File.dirname(__FILE__) +  '/../../init.rb'
+require 'action_pack/version'
+
+ma, mi, ti = ActionPack::VERSION::MAJOR, ActionPack::VERSION::MINOR, ActionPack::VERSION::TINY 
+
+raise LoadError, "RuTils is not 2.2.2 compat" if (ma >= 2 && mi >= 2 && ti >= 1)
 
 # Перегрузка helper'ов Rails
 class RailsHelpersOverrideTest < Test::Unit::TestCase
+  TEST_DATE = Date.parse("1983-10-15") # coincidentially...
+  TEST_TIME = Time.local(1983, 10, 15, 12, 15) # also coincidentially...
+  
   # Вспомогательный класс для тестирования перегруженного DateHelper
   class HelperStub
     # для тестирования to_datetime_select_tag
@@ -21,7 +34,6 @@ class RailsHelpersOverrideTest < Test::Unit::TestCase
     assert_equal "20 минут", @stub.distance_of_time_in_words(Time.now - 20.minutes, Time.now)
   end
   
-  # TODO - TextMate это не хайлайтит, и это _крайне_ достает
   def test_select_month
     assert_match /июль/, @stub.select_month(TEST_DATE), 
       "Месяц в выборе месяца должен быть указан в именительном падеже"

data/test/extras/integration_rdiscount.rb

@@ -0,0 +1,15 @@
+# -*- encoding: utf-8 -*- 
+require 'rdiscount'
+
+# Интеграция с BlueCloth - Markdown
+# Сам Markdown никакой обработки типографики не производит (это делает RubyPants, но вряд ли его кто-то юзает на практике)
+class RdiscountIntegrationTest < Test::Unit::TestCase
+  C = RuTils::Gilenson::RDiscountExtra
+  
+  def test_integration_markdown
+    
+    assert_equal "<p>И вот&#160;&#171;они пошли туда&#187;, и&#160;шли шли&#160;шли</p>", 
+      C.new('И вот "они пошли туда", и шли шли шли').to_html
+    
+  end
+end

data/test/extras/integration_redcloth3.rb

@@ -0,0 +1,18 @@
+# -*- encoding: utf-8 -*- 
+require 'redcloth'
+raise LoadError, "need RedCloth 3.x" unless RedCloth::VERSION.to_s =~ /^3/
+
+# Интеграция с RedCloth - Textile.
+# Нужно иметь в виду что Textile осуществляет свою обработку типографики, которую мы подменяем!
+class Redcloth3IntegrationTest < Test::Unit::TestCase
+  C = RuTils::Gilenson::RedClothExtra
+  def test_integration_with_redcloth_3
+    
+    assert_equal "<p>И&#160;вот &#171;они пошли туда&#187;, и&#160;шли шли&#160;шли</p>", 
+      C.new('И вот "они пошли туда", и шли шли шли').to_html
+    
+    assert_equal '<p><strong>strong text</strong> and <em>emphasized text</em></p>',
+      C.new("*strong text* and _emphasized text_").to_html,
+        "Spaces should be preserved"
+  end
+end

data/test/extras/integration_redcloth4.rb

@@ -0,0 +1,19 @@
+# -*- encoding: utf-8 -*- 
+require 'redcloth'
+raise LoadError, "need RedCloth 4.x" unless RedCloth::VERSION.to_s =~ /^4/
+
+# Интеграция с RedCloth 4 - Textile.
+class Redcloth4IntegrationTest < Test::Unit::TestCase
+  C = RuTils::Gilenson::RedClothExtra
+  
+  def test_integration_with_redcloth_4
+    
+    assert_equal "<p>И вот&#160;&#171;они пошли туда&#187;, и&#160;шли шли&#160;шли</p>", 
+      C.new('И вот "они пошли туда", и шли шли шли').to_html
+    
+    assert_equal '<p><strong>strong text</strong> and&#160;<em>emphasized text</em></p>',
+      C.new("*strong text* and _emphasized text_").to_html,
+        "Spaces should be preserved"
+    
+  end
+end

data/test/run_tests.rb

@@ -1,4 +1,4 @@
 Dir.entries(File.dirname(__FILE__)).each do | it|
-  next unless it =~ /^t_/
-  require File.dirname(__FILE__) + '/' + it.gsub(/\.rb$/, '')
+  next unless it =~ /^test_/
+  require File.dirname(__FILE__) + '/' + it
 end

data/test/{t_datetime.rb → test_datetime.rb}

@@ -1,3 +1,4 @@
+# -*- encoding: utf-8 -*- 
 $KCODE = 'u'
 require 'test/unit'
 require File.dirname(__FILE__) + '/../lib/rutils'
@@ -116,7 +117,6 @@ class StrftimeTest < Test::Unit::TestCase
         RuTils::overrides = true
         sleep(rand(10)/200.0)
         assert_equal "11 декабря", Time.local(1985, "dec", 11).strftime("%d %B")
-        RuTils::overrides = false
       end
     end
     
@@ -125,7 +125,6 @@ class StrftimeTest < Test::Unit::TestCase
         RuTils::overrides = false
         sleep(rand(10)/200.0)
         assert_equal "11 December", Time.local(1985, "dec", 11).strftime("%d %B")
-        RuTils::overrides = true
       end
     end
     

data/test/{t_gilenson.rb → test_gilenson.rb}

@@ -1,3 +1,4 @@
+# -*- encoding: utf-8 -*- 
 $KCODE = 'u'
 require 'test/unit'
 require File.dirname(__FILE__) + '/../lib/rutils'
@@ -63,10 +64,23 @@ class GilensonOwnTest < Test::Unit::TestCase
     assert_equal '&#34; &#38; &#39; &#62; &#60; &#160; &#167; &#169; &#171; &#174; &#176; &#177; &#183; &#187; &#8211; &#8212; &#8216; &#8217; &#8220; &#8221; &#8222; &#8226; &#8230; &#8482; &#8722;', '&quot; &amp; &apos; &gt; &lt; &nbsp; &sect; &copy; &laquo; &reg; &deg; &plusmn; &middot; &raquo; &ndash; &mdash; &lsquo; &rsquo; &ldquo; &rdquo; &bdquo; &bull; &hellip; &trade; &minus;'.gilensize
   end
 
-  def test_ugly_entities_replace1 # not_correct_number
+  def test_non_displayable_entities_replace1 # not_correct_number
     assert_equal '&#8222; &#8230; &#39; &#8220; &#8221; &#8226; &#8211; &#8212; &#8482;', '&#132; &#133; &#146; &#147; &#148; &#149; &#150; &#151; &#153;'.gilensize
   end
+  
+  def test_non_displayable_entities_replace2 # copy&paste
+    @gilenson.configure!(:copypaste => true)
+    assert_equal '&#171; &#160; &#187; &#167; &#169; &#174; &#176; &#177; &#182; &#183; &#8211; &#8212; &#8216; &#8217; &#8220; &#8221; &#8222; &#8226; &#8230; &#8470; &#8482; &#8722; &#8201; &#8243;', @gilenson.process('«   » § © ® ° ± ¶ · – — ‘ ’ “ ” „ • … № ™ −   ″')
+  end
+
+  def test_nbsp_removed_on_anchor_start
+    assert_equal 'abcd', @gilenson.process(' abcd')
+  end
 
+  def test_nbsp_removed_on_anchor_end
+    assert_equal 'abcd', @gilenson.process('abcd ')
+  end
+  
   def test_specials
     assert_equal '&#169; 2002, &#169; 2003, &#169; 2004, &#169; 2005 &#8212; тоже без&#160;пробелов: &#169;2002, &#169;Кукуц. однако: варианты (а) и&#160;(с)', '(с) 2002, (С) 2003, (c) 2004, (C) 2005 -- тоже без пробелов: (с)2002, (c)Кукуц. однако: варианты (а) и (с)'.gilensize
     assert_equal '+5&#176;С, +7&#176;C, &#8211;5&#176;F', '+5^С, +17^C, -275^F'.gilensize
@@ -347,11 +361,6 @@ class GilensonConfigurationTest < Test::Unit::TestCase
       @gilenson.process('скажи ,мне, ведь не даром !Москва, клеймённая пожаром .Французу отдана')
   end
   
-  def test_ugly_entities_replace2 # copy&paste
-    @gilenson.configure!(:copypaste => true)
-    assert_equal '&#160; &#171; &#187; &#167; &#169; &#174; &#176; &#177; &#182; &#183; &#8211; &#8212; &#8216; &#8217; &#8220; &#8221; &#8222; &#8226; &#8230; &#8470; &#8482; &#8722; &#8201; &#8243;', @gilenson.process('  « » § © ® ° ± ¶ · – — ‘ ’ “ ” „ • … № ™ −   ″')
-  end
-  
   def test_raise_on_unknown_setting
     assert_raise(RuTils::Gilenson::UnknownSetting) { @gilenson.configure!(:bararara => true) }
   end

data/test/test_integration.rb

@@ -0,0 +1,22 @@
+# -*- encoding: utf-8 -*- 
+$KCODE = 'u'
+require 'test/unit'
+
+require File.dirname(__FILE__) + '/../lib/rutils'
+
+# Load all the prereqs
+integration_tests = ['rubygems', 'multi_rails_init'] + Dir.glob(File.dirname(__FILE__) + '/extras/integration_*.rb')
+
+# Specifically for Ruby 1.9.1 (too early at this point)
+if ENV['NO_RAILS'] || RUBY_VERSION =~ /^1\.9/
+  STDERR.puts "Skipping Rails tests - NO_RAILS set in ENV or running on Ruby 1.9+"
+  integration_tests.reject! {|t| t.include?("rails") }
+end
+
+integration_tests.each do | integration_test |
+  begin
+    require integration_test
+  rescue LoadError => e
+    STDERR.puts "Skipping integration test #{File.basename(integration_test)} - deps not met (#{e.message})"
+  end
+end