rotuka-rutils 0.2.4

data/lib/datetime/datetime.rb

@@ -0,0 +1,87 @@
+module RuTils
+  module DateTime
+  
+    def self.distance_of_time_in_words(from_time, to_time = 0, include_seconds = false, absolute = false) #nodoc
+      from_time = from_time.to_time if from_time.respond_to?(:to_time)
+      to_time = to_time.to_time if to_time.respond_to?(:to_time)
+      distance_in_minutes = (((to_time - from_time).abs)/60).round
+      distance_in_seconds = ((to_time - from_time).abs).round
+      
+      case distance_in_minutes
+        when 0..1
+          return (distance_in_minutes==0) ? 'меньше минуты' : '1 минуту' unless include_seconds
+        
+        case distance_in_seconds
+           when 0..5   then 'менее 5 секунд'
+           when 6..10   then 'менее 10 секунд'
+           when 11..20 then 'менее 20 секунд'
+           when 21..40 then 'пол-минуты'
+           when 41..59 then 'меньше минуты'
+           else          '1 минуту'
+         end
+        
+         when 2..45       then distance_in_minutes.to_s + 
+                              " " + distance_in_minutes.items("минута", "минуты", "минут") 
+         when 46..90     then 'около часа'
+         # исключение, сдвигаем на один влево чтобы соответствовать падежу
+         when 90..1440   then "около " + (distance_in_minutes.to_f / 60.0).round.to_s + 
+                              " " + (distance_in_minutes.to_f / 60.0).round.items("часа", 'часов', 'часов')
+         when 1441..2880 then '1 день'
+         else                  (distance_in_minutes / 1440).round.to_s + 
+                              " " + (distance_in_minutes / 1440).round.items("день", "дня", "дней")
+       end
+    end
+    
+    @@ignored = "\xFF\xFF\xFF\xFF" # %% == Literal "%" character 
+    
+    def self.ru_strftime(date='%d.%m.%Y', time='')
+      date.gsub!(/%%/, @@ignored)
+      date.gsub!(/%a/, Date::RU_ABBR_DAYNAMES[time.wday])
+      date.gsub!(/%A/, Date::RU_DAYNAMES[time.wday])
+      date.gsub!(/%b/, Date::RU_ABBR_MONTHNAMES[time.mon])
+      date.gsub!(/%d(\s)*%B/, time.day.to_s + '\1' + Date::RU_INFLECTED_MONTHNAMES[time.mon])
+      date.gsub!(/%B/, Date::RU_MONTHNAMES[time.mon])
+      date.gsub!(@@ignored, '%%')
+    end
+  end
+end
+
+class Date
+  RU_MONTHNAMES = [nil] + %w{ январь февраль март апрель май июнь июль август сентябрь октябрь ноябрь декабрь }
+  RU_DAYNAMES = %w(воскресенье понедельник вторник среда четверг пятница суббота)
+  RU_ABBR_MONTHNAMES = [nil] + %w{ янв фев мар апр май июн июл авг сен окт ноя дек }
+  RU_ABBR_DAYNAMES = %w(вск пн вт ср чт пт сб)
+  RU_INFLECTED_MONTHNAMES = [nil] + %w{ января февраля марта апреля мая июня июля августа сентября октября ноября декабря }
+  # RU_DAYNAMES_E -- оставить?
+  RU_DAYNAMES_E = [nil] + %w{первое второе третье четвёртое пятое шестое седьмое восьмое девятое десятое одиннадцатое двенадцатое тринадцатое четырнадцатое пятнадцатое шестнадцатое семнадцатое восемнадцатое девятнадцатое двадцатое двадцать тридцатое тридцатьпервое}
+end
+
+class Time
+  alias_method :strftime_norutils, :strftime
+  
+  def strftime(fmt)
+    fmt = fmt.dup
+    RuTils::DateTime::ru_strftime(fmt, self) if RuTils::overrides_enabled?
+    strftime_norutils(fmt)
+  end
+end
+
+class Date
+
+  # Inside rails we have date formatting
+  if self.instance_methods.include?('strftime')
+    alias_method :strftime_norutils, :strftime
+    def strftime(fmt='%F')
+      fmt = fmt.dup
+      RuTils::DateTime::ru_strftime(fmt, self) if RuTils::overrides_enabled?
+      strftime_norutils(fmt)
+    end
+
+  else
+    def strftime(fmt='%F')
+      RuTils::DateTime::ru_strftime(fmt, self) if RuTils::overrides_enabled?
+      self.to_time.strftime(fmt)
+    end
+  end
+  
+end

data/lib/gilenson/gilenson.rb

@@ -0,0 +1,642 @@
+module RuTils
+  module Gilenson
+    # Позволяет возвращать класс форматтера при вызове
+    #  RuTils::Gilenson.new
+    def self.new(*args) #:nodoc:
+      RuTils::Gilenson::Formatter.new(*args)
+    end
+    
+    # Загружаем "старый" Гиленсон если он будет нужен
+    def self.const_missing(const) #:nodoc:
+      super(const) unless const == :Obsolete
+      require File.dirname(__FILE__) + '/gilenson_port'
+      return RuTils::Gilenson::Obsolete
+    end
+  end
+end
+
+# ==Что такое Gilenson  
+# Обработчик типографских символов в HTML согласно общепринятым правилам.
+# Посвящается П.Г.Гиленсону[http://www.rudtp.ru/lib.php?book=172], благодаря которому русские правила тех.
+# редактуры еще как минимум 20 лет таки останутся бессмысленно старомодными.
+#
+# Gilenson расставит в тексте "умные" правильные кавычки (русские - для кириллицы, английские - для латиницы),
+# заменит "хитрые" пунктуационные символы на entities и отформатирует знаки типа (c), (tm), телефоны и адреса.
+#
+# Gilenson базируется на коде Typografica[http://pixel-apes.com/typografica] от PixelApes,
+# который был приведен к положенному в Ruby стандарту. Основные отличия Gilenson от Typografica на PHP:
+#   * работа только и полностью в UTF-8 (включая entities, применимые в XML)
+#   * поддержка "raw"-вывода (символов вместо entities) - текст выводимый Gilenson можно верстать на бумаге
+#
+# Если вам нужно получать идентичный Typografica вывод, пользуйтесь RuTils::Gilenson::Obsolete
+# вместо RuTils::Gilenson::Formatter.
+#
+# ==Использование
+# Быстрее всего - через метод ++gilensize++ для любой строковой переменной
+#   %{ И вот они таки "приехали"}.gilensize => 'И вот они таки «приехали»'
+# Все дополнительные настройки в таком случае передаются форматтеру
+#   %{ И вот они таки "приехали"}.gilensize(:laquo=>false) => 'И вот они таки "приехали"'
+#
+# Если форматтер надо настроить более тонко, можно использовать его и так:
+#   typ = RuTils::Gilenson.new('Эти "так называемые" великие деятели')
+#   typ.to_html => 'Эти «так называемые» великие деятели'
+# 
+# или как фильтр
+#   formatter = RuTils::Gilenson.new
+#   formatter.configure(:dash=>true)
+#   for string in strings
+#     puts formatter.process(string)
+#   end
+#
+# ==Настройки
+# Настройки регулируются через методы
+#   formatter.dashglue = true
+# или ассоциированным хешем
+#   formatter.configure!(:dash=>true, :quotes=>false)
+#
+# Хеш также можно передавать как последний аргумент методам process и to_html,
+# в таком случае настройки будут применены только при этом вызове
+#
+#   beautified = formatter.process(my_text, :dash=>true)
+#
+# В параметры можно подставить также ключ :all чтобы временно включить или выключить все фильтры
+#
+#   beautified = formatter.process(my_text, :all=>true)
+#
+# Помимо этого можно пользоваться каждым фильтром по отдельности используя метод +apply+
+#
+# Можно менять глифы, которые форматтер использует для подстановок. К примеру,
+#   formatter.glyph[:nbsp] = ' '
+# заставит форматтер расставлять "традиционные" неразрывные пробелы. Именно это - большая глупость,
+# но другие глифы заменить может быть нужно.
+#
+# ==Настройки форматтера
+#   "inches" - преобразовывать дюймы в знак дюйма;
+#   "laquo" - кавычки-ёлочки
+#   "quotes" - кавычки-английские лапки
+#   "dash" -  проставлять короткое тире (150)
+#   "emdash" - длинное тире двумя минусами (151)
+#   "initials" - проставлять тонкие шпации в инициалах
+#   "copypaste" - замена непечатных и "специальных" юникодных символов на entities
+#   "(c)" - обрабатывать знак копирайта
+#   "(r)", "(tm)", "(p)", "+-" - спецсимволы, какие - понятно
+#   "acronyms" - сворачивание пояснений к аббревиатурам (пояснение - в скобках после аббревиатуры
+#                без пробела). В текстовой версии пояснение будет "приклеено" к аббревиатуре
+#                полукруглой шпацией
+#   "degrees" - знак градуса
+#   "dashglue", "wordglue" - приклеивание предлогов и дефисов
+#   "spacing" - запятые и пробелы, перестановка
+#   "phones" - обработка телефонов
+#   "html" - при false - запрет использования тагов html
+#   "de_nobr" - при true все <nobr/> заменяются на <span class="nobr"/>
+#   "raw_output" - (по умолчанию false) - при true вместо entities выводятся UTF-символы
+#   "skip_attr" - (по умолчанию false) - при true не отрабатывать типографику в атрибутах тегов (title, alt)
+#   "skip_code" - (по умолчанию true) - при true не отрабатывать типографику внутри <code/>, <tt/>, CDATA
+class RuTils::Gilenson::Formatter
+  attr_accessor :glyph
+  attr_accessor :settings
+  
+  SETTINGS = {
+     "inches"    => true,    # преобразовывать дюймы в знак дюйма;
+     "laquo"     => true,    # кавычки-ёлочки
+     "quotes"    => true,    # кавычки-английские лапки
+     "dash"      => true,    # короткое тире (150)
+     "emdash"    => true,    # длинное тире двумя минусами (151)
+     "initials"  => true,    # тонкие шпации в инициалах
+     "copypaste" => false,   # замена непечатных и "специальных" юникодных символов на entities
+     "(c)"       => true,    # обрабатывать знак копирайта
+     "(r)"       => true,
+     "(tm)"      => true,
+     "(p)"       => true,
+     "acronyms"  => true,    # Акронимы с пояснениями - ЖЗЛ(Жизнь Замечатльных Людей)
+     "+-"        => true,    # спецсимволы, какие - понятно
+     "degrees"   => true,    # знак градуса
+     "dashglue"  => true, "wordglue" => true, # приклеивание предлогов и дефисов
+     "spacing"   => true,    # запятые и пробелы, перестановка
+     "phones"    => true,    # обработка телефонов
+     "html"      => true,    # разрешение использования тагов html
+     "de_nobr"   => false,   # при true все <nobr/> заменяются на <span class="nobr"/>
+     "raw_output" => false,  # выводить UTF-8 вместо entities
+     "skip_attr" => false,   # при true не отрабатывать типографику в атрибутах тегов
+     "skip_code" => true,    # при true не отрабатывать типографику внутри <code/>, <tt/>, CDATA
+  } #:nodoc:
+  
+  SETTINGS.freeze
+     
+  # Глифы, использующиеся в подстановках по-умолчанию
+  GLYPHS = {
+    :quot       => "&#34;",     # quotation mark
+    :amp        => "&#38;",     # ampersand
+    :apos       => "&#39;",     # apos
+    :gt         => "&#62;",     # greater-than sign
+    :lt         => "&#60;",     # less-than sign
+    :nbsp       => "&#160;",    # non-breaking space
+    :sect       => "&#167;",    # section sign
+    :copy       => "&#169;",    # copyright sign
+    :laquo      => "&#171;",    # left-pointing double angle quotation mark = left pointing guillemet
+    :reg        => "&#174;",    # registered sign = registered trade mark sign
+    :deg        => "&#176;",    # degree sign
+    :plusmn     => "&#177;",    # plus-minus sign = plus-or-minus sign
+    :para       => "&#182;",    # pilcrow sign = paragraph sign
+    :middot     => "&#183;",    # middle dot = Georgian comma = Greek middle dot
+    :raquo      => "&#187;",    # right-pointing double angle quotation mark = right pointing guillemet
+    :ndash      => "&#8211;",   # en dash
+    :mdash      => "&#8212;",   # em dash
+    :lsquo      => "&#8216;",   # left single quotation mark
+    :rsquo      => "&#8217;",   # right single quotation mark
+    :ldquo      => "&#8220;",   # left double quotation mark
+    :rdquo      => "&#8221;",   # right double quotation mark
+    :bdquo      => "&#8222;",   # double low-9 quotation mark
+    :bull       => "&#8226;",   # bullet = black small circle
+    :hellip     => "&#8230;",   # horizontal ellipsis = three dot leader
+    :numero     => "&#8470;",   # numero
+    :trade      => "&#8482;",   # trade mark sign
+    :minus      => "&#8722;",   # minus sign
+    :inch       => "&#8243;",   # inch/second sign (u0x2033) (не путать с кавычками!)
+    :thinsp     => "&#8201;",   # полукруглая шпация (тонкий пробел)
+    :nob_open   => '<span class="nobr">',    # открывающий блок без переноса слов
+    :nob_close  => '</span>',    # закрывающий блок без переноса слов
+  } #:nodoc:
+  
+  GLYPHS.freeze
+  # Нормальные "типографские" символы в UTF-виде. Браузерами обрабатываются плохонько, поэтому
+  # лучше заменять их на entities.
+  VERBATIM_GLYPHS = {
+    ' '         => :nbsp,# alt+0160 (NBSP here)
+    '«'         => :laquo,
+    '»'         => :raquo,
+    '§'         => :sect,
+    '©'         => :copy,
+    '®'         => :reg,
+    '°'         => :deg,
+    '±'         => :plusmn,
+    '¶'         => :para,
+    '·'         => :middot,
+    '–'         => :ndash,
+    '—'         => :mdash,
+    '‘'         => :lsquo,
+    '’'         => :rsquo,
+    '“'         => :ldquo,
+    '”'         => :rdquo,
+    '„'         => :bdquo,
+    '•'         => :bull,
+    '…'         => :hellip,
+    '№'         => :numero,
+    '™'         => :trade,
+    '−'         => :minus,
+    ' '         => :thinsp,
+    '″'         => :inch,
+   }
+   VERBATIM_GLYPHS.freeze #:nodoc:
+      
+   # Для маркера мы применяем UTF-BOM чтобы его НЕЛЬЗЯ было перепутать с частью
+   # любого другого мультибайтного глифа. Thanks to huNter.
+   REPLACEMENT_MARKER = RuTils::SUBSTITUTION_MARKER.freeze #:nodoc:
+   
+   # Кто придумал &#147;? Не учите людей плохому...
+   # Привет А.Лебедеву http://www.artlebedev.ru/kovodstvo/62/
+   # Используем символы, потом берем по символам из glyphs форматтера.
+   # Молодец mash!
+   FORBIDDEN_NUMERIC_ENTITIES = {
+     '132'       => :bdquo,
+     '133'       => :hellip,
+     '146'       => :apos,
+     '147'       => :ldquo,
+     '148'       => :rdquo,
+     '149'       => :bull,
+     '150'       => :ndash,
+     '151'       => :mdash,
+     '153'       => :trade,
+   }
+   FORBIDDEN_NUMERIC_ENTITIES.freeze #:nodoc:
+   
+   PROTECTED_SETTINGS = [ :raw_output ] #:nodoc:
+         
+   def initialize(*args)
+     @_text = args[0].is_a?(String) ? args[0] : ''
+     setup_default_settings!
+     accept_configuration_arguments!(args.last) if args.last.is_a?(Hash)
+   end
+    
+   # Настраивает форматтер ассоциированным хешем
+   #  formatter.configure!(:dash=>true, :wordglue=>false)
+   def configure!(*config)
+     accept_configuration_arguments!(config.last) if config.last.is_a?(Hash)
+   end
+   
+   alias :configure :configure! #Дружественный API
+   
+   # Неизвестные методы - настройки. С = - установка ключа, без - получение значения
+   def method_missing(meth, *args) #:nodoc:
+     setting = meth.to_s.gsub(/=$/, '')
+     super(meth, *args) unless @settings.has_key?(setting) #this will pop the exception if we have no such setting
+   
+     return (@settings[setting] = args[0])
+   end
+
+   # Обрабатывает text_to_process с сохранением настроек, присвоенных обьекту-форматтеру
+   # Дополнительные аргументы передаются как параметры форматтера и не сохраняются после прогона.
+   def process(text_to_process, *args)
+     @_text = text_to_process
+     if args.last.is_a?(Hash)
+       with_configuration(args.last) { self.to_html }
+     else
+       self.to_html
+     end
+   end
+
+   # Обрабатывает текст, присвоенный форматтеру при создании и возвращает результат обработки.
+   def to_html()
+     return '' unless @_text
+     
+     text = @_text.strip
+   
+     # -4. запрет тагов html
+     process_escape_html(text) unless @settings["html"]
+   
+     # -3. Никогда (вы слышите?!) не пущать лабуду &#not_correct_number;
+     FORBIDDEN_NUMERIC_ENTITIES.dup.each_pair do | key, rep |
+       text.gsub!(/&##{key};/, glyph[rep])
+     end
+   
+     # -2. Чистим copy&paste
+     process_copy_paste_clearing(text) if @settings['copypaste']
+   
+     # -1. Замена &entity_name; на входе ('&nbsp;' => '&#160;' и т.д.)
+     process_html_entities(text)
+   
+     # 0. Вырезаем таги
+     tags = lift_ignored_elements(text) if @skip_tags
+   
+     # 1. Запятые и пробелы
+     process_spacing(text) if @settings["spacing"]
+   
+     # 3. Спецсимволы
+     # 0. дюймы с цифрами
+     # заменено на инчи
+     process_inches(text) if @settings["inches"]
+   
+     # 1. лапки
+     process_quotes(text) if @settings["quotes"]
+     
+     # 2. ёлочки
+     process_laquo(text) if @settings["laquo"]
+   
+     # 2b. одновременно ёлочки и лапки
+     process_compound_quotes(text) if (@settings["quotes"] && @settings["laquo"])
+   
+     # 3. тире
+     process_dash(text) if @settings["dash"]
+   
+     # 3a. тире длинное
+     process_emdash(text) if @settings["emdash"]
+   
+     # 5. +/-
+     process_plusmin(text) if @settings["+-"]
+   
+     # 5a. 12^C
+     process_degrees(text) if @settings["degrees"]
+   
+     # 6. телефоны
+     process_phones(text) if @settings["phones"]
+   
+     # 7. Короткие слова и &nbsp;
+     process_wordglue(text) if @settings["wordglue"]
+   
+     # 8. Склейка ласт. Тьфу! дефисов.
+     process_dashglue(text) if @settings["dashglue"]
+   
+     # 8a. Инициалы
+     process_initials(text) if @settings['initials']
+   
+     # 8b. Троеточия
+     process_ellipsises(text) if @settings["wordglue"]
+   
+     # 9. Акронимы от Текстиля
+     process_acronyms(text) if @settings["acronyms"]
+     
+     # БЕСКОНЕЧНОСТЬ. Вставляем таги обратно.
+     reinsert_fragments(text, tags) if @skip_tags
+   
+     # фуф, закончили.
+     process_span_instead_of_nobr(text) if @settings["de_nobr"]
+   
+     # заменяем entities на истинные символы
+     process_raw_output(text) if @settings["raw_output"]
+     
+     text.strip
+   end
+   
+    
+   # Применяет отдельный фильтр к text и возвращает результат. Например:
+   #  formatter.apply(:wordglue, "Вот так") => "Вот&#160;так"
+   # Удобно применять когда вам нужно задействовать отдельный фильтр Гиленсона, но не нужна остальная механика
+   # Последний аргумент определяет, нужно ли при применении фильтра сохранить в неприкосновенности таги и другие
+   # игнорируемые фрагменты текста (по умолчанию они сохраняются).
+   def apply(filter, text, lift_ignored_elements = true)
+     copy = text.dup
+     unless lift_ignored_elements
+       self.send("process_#{filter}".to_sym, copy)
+     else
+       lifting_fragments(copy) { self.send("process_#{filter}".to_sym, copy) }
+     end
+     copy
+   end
+          
+   private
+      
+   def setup_default_settings!
+      @skip_tags = true;
+      @ignore = /notypo/ # regex, который игнорируется. Этим надо воспользоваться для обработки pre и code
+   
+      @glueleft =  ['рис.', 'табл.', 'см.', 'им.', 'ул.', 'пер.', 'кв.', 'офис', 'оф.', 'г.']
+      @glueright = ['руб.', 'коп.', 'у.е.', 'мин.']
+   
+      # Установки можно менять в каждом экземпляре
+      @settings = SETTINGS.dup
+   
+      @mark_tag = REPLACEMENT_MARKER
+      # Глифы можено подменять в экземпляре форматтера поэтому копируем их из константы
+      @glyph = GLYPHS.dup
+      
+      @phonemasks = [[  /([0-9]{4})\-([0-9]{2})\-([0-9]{2}) ([0-9]{2}):([0-9]{2}):([0-9]{2})/,
+                        /([0-9]{4})\-([0-9]{2})\-([0-9]{2})/,
+                        /(\([0-9\+\-]+\)) ?([0-9]{3})\-([0-9]{2})\-([0-9]{2})/,
+                        /(\([0-9\+\-]+\)) ?([0-9]{2})\-([0-9]{2})\-([0-9]{2})/,
+                        /(\([0-9\+\-]+\)) ?([0-9]{3})\-([0-9]{2})/,
+                        /(\([0-9\+\-]+\)) ?([0-9]{2})\-([0-9]{3})/,
+                        /([0-9]{3})\-([0-9]{2})\-([0-9]{2})/,
+                        /([0-9]{2})\-([0-9]{2})\-([0-9]{2})/,
+                        /([0-9]{1})\-([0-9]{2})\-([0-9]{2})/,
+                        /([0-9]{2})\-([0-9]{3})/,
+                        /([0-9]+)\-([0-9]+)/,
+                      ],[    
+                       ':nob_open\1:ndash\2:ndash\3:nbsp\4:\5:\6:nob_close',
+                       ':nob_open\1:ndash\2:ndash\3:nob_close',
+                       ':nob_open\1:nbsp\2:ndash\3:ndash\4:nob_close',
+                       ':nob_open\1:nbsp\2:ndash\3:ndash\4:nob_close',
+                       ':nob_open\1:nbsp\2:ndash\3:nob_close',
+                       ':nob_open\1:nbsp\2:ndash\3:nob_close',
+                       ':nob_open\1:ndash\2:ndash\3:nob_close',
+                       ':nob_open\1:ndash\2:ndash\3:nob_close',
+                       ':nob_open\1:ndash\2:ndash\3:nob_close',
+                       ':nob_open\1:ndash\2:nob_close',
+                       ':nob_open\1:ndash\2:nob_close'
+                    ]]
+   end
+   
+   # Позволяет получить процедуру, при вызове возвращающую значение глифа
+   def lookup(glyph_to_lookup)
+     return Proc.new { self.glyph[glyph_to_lookup] }
+   end
+   
+   # Подставляет "символы" (двоеточие + имя глифа) на нужное значение глифа заданное в данном форматтере
+   def substitute_glyphs_in_string(str)
+     re = str.dup
+     @glyph.each_pair do | key, subst |
+       re.gsub!(":#{key.to_s}", subst)
+     end
+     re
+   end
+   
+   # Выполняет блок, временно включая настройки переданные в +hash+
+   def with_configuration(hash, &block)
+     old_settings, old_glyphs = @settings.dup, @glyph.dup
+     accept_configuration_arguments!(hash)
+       txt = yield
+     @settings, @glyph = old_settings, old_glyphs
+     
+     return txt
+   end
+   
+   def accept_configuration_arguments!(args_hash)
+     
+     # Специальный случай - :all=>true|false
+     if args_hash.has_key?(:all)
+       if args_hash[:all]
+         @settings.each_pair {|k, v| @settings[k] = true unless PROTECTED_SETTINGS.include?(k.to_sym)}
+       else
+         @settings.each_pair {|k, v| @settings[k] = false unless PROTECTED_SETTINGS.include?(k.to_sym)}
+       end
+     else     
+       
+       # Кинуть ошибку если настройка нам неизвестна
+       unknown_settings = args_hash.keys.collect{|k|k.to_s} - @settings.keys.collect { |k| k.to_s } 
+       raise RuTils::Gilenson::UnknownSetting, unknown_settings if unknown_settings.any?
+            
+       args_hash.each_pair do | key, value |
+         @settings[key.to_s] = (value ? true : false)
+       end
+     end
+   end
+   
+   # Вынимает игнорируемые фрагменты и заменяет их маркером, выполняет переданный блок и вставляет вынутое на место
+   def lifting_fragments(text, &block)
+     lifted = lift_ignored_elements(text)
+       yield
+     reinsert_fragments(text, lifted)
+   end
+   
+   #Вынимает фрагменты из текста и возвращает массив с фрагментами
+   def lift_ignored_elements(text)
+    #     re =  /<\/?[a-z0-9]+("+ # имя тага
+     #                              "\s+("+ # повторяющая конструкция: хотя бы один разделитель и тельце
+     #                                     "[a-z]+("+ # атрибут из букв, за которым может стоять знак равенства и потом
+     #                                              "=((\'[^\']*\')|(\"[^\"]*\")|([0-9@\-_a-z:\/?&=\.]+))"+ # 
+     #                                           ")?"+
+     #                                  ")?"+
+     #                            ")*\/?>|\xA2\xA2[^\n]*?==/i;
+   
+     re_skipcode = '((<(code|tt)[ >](.*?)<\/(code|tt)>)|(<!\[CDATA\[(.*?)\]\]>))|' if @settings['skip_code']
+     re =  /(#{re_skipcode}<\/?[a-z0-9]+(\s+([a-z]+(=((\'[^\']*\')|(\"[^\"]*\")|([0-9@\-_a-z:\/?&=\.]+)))?)?)*\/?>)/uim
+     tags = text.scan(re).map{ |tag| tag[0] } # первая группа!
+     text.gsub!(re, @mark_tag) #маркер тега, мы используем Invalid UTF-sequence для него
+     return tags
+   end
+   
+   def reinsert_fragments(text, fragments)
+     fragments.each do |fragment|
+       fragment.gsub!(/ (href|src|data)=((?:(\')([^\']*)(\'))|(?:(\")([^\"]*)(\")))/uim) do
+         " #{$1}=" + $2.gsub(/&(?!(#0*38)|(amp);)/, self.glyph[:amp])
+       end # unless @settings['raw_output'] -- делать это надо всегда (mash)
+       
+       unless @settings['skip_attr']
+         fragment.gsub!(/ (title|alt)=((?:(\')([^\']*)(\'))|(?:(\")([^\"]*)(\")))/uim) do
+           " #{$1}=#{$3}" + self.process($4.to_s) + "#{$5}#{$6}" + self.process($7.to_s) + "#{$8}"
+         end 
+       end
+       text.sub!(@mark_tag, fragment)
+     end
+   end
+   
+   ### Имплементации фильтров
+   def process_html_entities(text)
+     self.glyph.each { |key, value| text.gsub!(/&#{key};/, value)}
+   end
+   
+   def process_initials(text)
+     initials = /([А-Я])[\.]{1,2}[\s]*?([А-Я])[\.]*[\s]*?([А-Я])([а-я])/u
+     replacement = substitute_glyphs_in_string('\1.\2.:thinsp\3\4')
+     text.gsub!(initials, replacement)
+   end
+   
+   def process_copy_paste_clearing(text)
+     VERBATIM_GLYPHS.each {|key,value| text.gsub!(/#{key}/, glyph[value]) }
+   end
+   
+   def process_spacing(text)
+     text.gsub!( /(\s*)([,]*)/sui, '\2\1');
+     text.gsub!( /(\s*)([\.?!]*)(\s*[ЁА-ЯA-Z])/su, '\2\1\3');
+   end
+   
+   def process_dashglue(text)
+     text.gsub!( /([a-zа-яА-Я0-9]+(\-[a-zа-яА-Я0-9]+)+)/ui, glyph[:nob_open]+'\1'+glyph[:nob_close])
+   end
+    
+   def process_escape_html(text)
+     text.gsub!(/&/, glyph[:amp])
+     text.gsub!(/</, glyph[:lt])
+     text.gsub!(/>/, glyph[:gt])
+   end
+    
+   def process_span_instead_of_nobr(text)
+     text.gsub!(/<nobr>/, '<span class="nobr">')
+     text.gsub!(/<\/nobr>/, '</span>')
+   end
+    
+   def process_dash(text)
+     text.gsub!( /(\s|;)\-(\s)/ui, '\1'+self.glyph[:ndash]+'\2')
+   end
+    
+   def process_emdash(text)
+     text.gsub!( /(\s|;)\-\-(\s)/ui, '\1'+self.glyph[:mdash]+'\2')
+     # 4. (с)
+     text.gsub!(/\([сСcC]\)((?=\w)|(?=\s[0-9]+))/u, self.glyph[:copy]) if @settings["(c)"]
+     # 4a. (r)
+     text.gsub!( /\(r\)/ui, '<sup>'+self.glyph[:reg]+'</sup>') if @settings["(r)"]
+   
+     # 4b. (tm)
+     text.gsub!( /\(tm\)|\(тм\)/ui, self.glyph[:trade]) if @settings["(tm)"]
+     # 4c. (p)   
+     text.gsub!( /\(p\)/ui, self.glyph[:sect]) if @settings["(p)"]
+   end
+   
+   def process_ellipsises(text)
+     text.gsub!( '...', self.glyph[:hellip])
+   end
+    
+   def process_laquo(text)
+     text.gsub!( /\"\"/ui, self.glyph[:quot]*2);
+     text.gsub!( /(^|\s|#{@mark_tag}|>|\()\"((#{@mark_tag})*[~0-9ёЁA-Za-zА-Яа-я\-:\/\.])/ui, '\1'+self.glyph[:laquo]+'\2');
+     _text = '""';
+     until _text == text do
+       _text = text;
+       text.gsub!( /(#{self.glyph[:laquo]}([^\"]*)[ёЁA-Za-zА-Яа-я0-9\.\-:\/\?\!](#{@mark_tag})*)\"/sui, 
+         '\1'+self.glyph[:raquo])
+     end
+   end
+           
+   def process_quotes(text)
+     text.gsub!( /\"\"/ui, self.glyph[:quot]*2)
+     text.gsub!( /\"\.\"/ui, self.glyph[:quot]+"."+self.glyph[:quot])
+     _text = '""';
+     until _text == text do  
+       _text = text.dup
+       text.gsub!( /(^|\s|#{@mark_tag}|>)\"([0-9A-Za-z\'\!\s\.\?\,\-\&\;\:\_\#{@mark_tag}]+(\"|#{self.glyph[:rdquo]}))/ui, '\1'+self.glyph[:ldquo]+'\2')
+       #this doesnt work in-place. somehow.
+       text.gsub!( /(#{self.glyph[:ldquo]}([A-Za-z0-9\'\!\s\.\?\,\-\&\;\:\#{@mark_tag}\_]*).*[A-Za-z0-9][\#{@mark_tag}\?\.\!\,]*)\"/ui, '\1'+self.glyph[:rdquo])
+     end
+   end
+    
+   def process_compound_quotes(text)
+     text.gsub!(/(#{self.glyph[:ldquo]}(([A-Za-z0-9'!\.?,\-&;:]|\s|#{@mark_tag})*)#{self.glyph[:laquo]}(.*)#{self.glyph[:raquo]})#{self.glyph[:raquo]}/ui,'\1'+self.glyph[:rdquo]);
+   end
+   
+   def process_degrees(text)
+     text.gsub!( /-([0-9])+\^([FCС])/, self.glyph[:ndash]+'\1'+self.glyph[:deg]+'\2') #deg
+     text.gsub!( /\+([0-9])+\^([FCС])/, '+\1'+self.glyph[:deg]+'\2')
+     text.gsub!( /\^([FCС])/, self.glyph[:deg]+'\1')
+   end
+   
+   def process_wordglue(text)
+     text.replace(" " + text + " ")
+     _text = " " + text + " "
+     
+     until _text == text
+        _text = text
+        text.gsub!( /(\s+)([a-zа-яА-Я]{1,2})(\s+)([^\\s$])/ui, '\1\2' + glyph[:nbsp]+'\4')
+        text.gsub!( /(\s+)([a-zа-яА-Я]{3})(\s+)([^\\s$])/ui,   '\1\2' + glyph[:nbsp]+'\4')
+     end
+     
+     text.gsub!(/(\s+)([a-zа-яА-Я]{1,2}[\)\]\!\?,\.;]{0,3}\s$)/ui, glyph[:nbsp]+'\2')
+     
+     @glueleft.each { | i |  text.gsub!( /(\s)(#{i})(\s+)/sui, '\1\2' + glyph[:nbsp]) }
+     
+     @glueright.each { | i | text.gsub!( /(\s)(#{i})(\s+)/sui, glyph[:nbsp]+'\2\3') }
+     
+     text.strip!
+   end
+    
+   def process_phones(text)
+      @phonemasks[0].each_with_index do |pattern, i|
+        replacement = substitute_glyphs_in_string(@phonemasks[1][i])
+        text.gsub!(pattern, replacement)
+      end
+   end
+    
+   def process_acronyms(text)
+     acronym = /\b([A-ZА-Я][A-ZА-Я0-9]{2,})\b(?:[(]([^)]*)[)])/u
+     if @settings["raw_output"]
+       text.gsub!(acronym, '\1%s(\2)' % glyph[:thinsp])
+     else
+       text.gsub!(acronym) do
+         expl = $2.to_s; process_escape_html(expl)
+         "<acronym title=\"#{expl}\">#{$1}</acronym>"
+       end
+     end
+   end
+   
+   def process_inches(text)
+     text.gsub!(/\s([0-9]{1,2}([\.,][0-9]{1,2})?)\"/ui, ' \1'+self.glyph[:inch])
+   end
+   
+   def process_plusmin(text)
+     text.gsub!(/[^+]\+\-/ui, self.glyph[:plusmn]) 
+   end
+   
+   # Подменяет все юникодные entities в тексте на истинные UTF-8-символы
+   def process_raw_output(text)
+     # Все глифы
+     @glyph.values.each do | entity | 
+       next unless entity =~ /^&#(\d+);/
+       text.gsub!(/#{entity}/, entity_to_raw_utf8(entity))
+     end
+   end
+   
+   # Конвертирует юникодные entities в UTF-8-codepoints
+   def entity_to_raw_utf8(entity)
+     entity =~ /^&#(\d+);/
+     $1 ? [$1.to_i].pack("U") : entity 
+   end
+   
+end #end Gilenson
+
+# Выбрасывается если форматтеру задается неизвестная настройка
+class RuTils::Gilenson::UnknownSetting < RuntimeError
+end
+
+module RuTils::Gilenson::StringFormatting
+  # Форматирует строку с помощью Gilenson::Formatter. Все дополнительные опции передаются форматтеру.
+  def gilensize(*args)
+    opts = args.last.is_a?(Hash) ? args.last : {}
+    RuTils::Gilenson::Formatter.new(self, *opts).to_html
+  end
+  
+  # Форматирует строку с помощью Gilenson::Obsolete. Всe дополнительные опции передаются форматтеру.
+  def o_gilensize(*args)
+    opts = args.last.is_a?(Hash) ? args.last : {}
+    RuTils::Gilenson::Obsolete.new(self, *opts).to_html
+  end
+end
+
+Object::String.send(:include, RuTils::Gilenson::StringFormatting)