hitomalu_formatter 0.1.3 → 0.1.6

checksums.yaml

@@ -1,7 +1,7 @@
 ---
 SHA256:
-  metadata.gz: '04239c9c7d366f97db31ee7a67a15936ad16fe3900d0816b32409b9b6d944dec'
-  data.tar.gz: 6a26df5123e66d197952a98c30e1179a2d2c9c5620d07d1c5916aaddda9afd50
+  metadata.gz: 8d057802ad94435771493393f773043cbd9a36d6f61c6a0d28cced13ab87c0c4
+  data.tar.gz: 373d05bc1ebf63133106f0212f2f2473ad313383360c26af44a0cb233ca2d1c5
 SHA512:
-  metadata.gz: b2999cc3946c94771090f582c649359fac349209fe5aa953173767f9ab1235ec366c4b5dcb6c8d6432411527694970aae15663a749a8358c5f8e90d4a9a57e2b
-  data.tar.gz: bc946c6f1cea4481ca105cd42dc6cef6993baaa64d76e1b58e9a9644fb5f1a9effb1dbf40a527a11f5c9f386f427e5bde117523b57ce2006ec96dcd30be531d7
+  metadata.gz: ed90413307ccbd96dd5167db30d96768332b63f8feb9e19cbfdd5c179c24ccc13ab4c1b0db34616d607a94ff90875f5c0e2fe52f3a793e9566a6132ed03c4108
+  data.tar.gz: debadd8eeca99009687f43892aa7cc995e5c771e791483ee3e7b62517813bc8ddeb8b710157bcbc44281905fb9447dc4280c36c82d446c3ae7b7ba0af5b89aa8

data/CHANGELOG.md

@@ -1,5 +1,8 @@
 ## [Unreleased]
 
+## [0.1.6] - 2022-08-26
+## [0.1.5] - 2022-08-16
+## [0.1.4] - 2022-08-16
 ## [0.1.3] - 2022-08-04
 ## [0.1.2] - 2022-08-03
 

data/Gemfile.lock

@@ -1,7 +1,7 @@
 PATH
   remote: .
   specs:
-    hitomalu_formatter (0.1.3)
+    hitomalu_formatter (0.1.6)
 
 GEM
   remote: https://rubygems.org/

data/lib/hitomalu_formatter/formatter.rb

@@ -7,9 +7,15 @@ module Hitomalu
     # cf. https://developer.mozilla.org/ja/docs/Web/HTML/Inline_elements
     # rp と rt は上に記載がないが、改行させたくないので追加
     # node.name が 'comment' であるコメントノードもインライン扱い
-    INLINE_TAGS = [ 'a', 'abbr', 'acronym', 'audio', 'b', 'bdi', 'bdo', 'big', 'br', 'button', 'canvas', 'cite', 'code', 'comment', 'data', 'datalist', 'del', 'dfn', 'em', 'embed', 'i', 'iframe', 'img', 'input', 'ins', 'kbd', 'label', 'map', 'mark', 'meter', 'noscript', 'object', 'output', 'picture', 'progress', 'q', 'rp', 'rt', 'ruby', 's', 'samp', 'script', 'select', 'slot', 'small', 'span', 'strong', 'sub', 'sup', 'svg', 'template', 'textarea', 'time', 'u', 'tt', 'var', 'video', 'wbr' ]
+    INLINE_TAGS = [ 'a', 'abbr', 'acronym', 'audio', 'b', 'bdi', 'bdo', 'big', 'br', 'button', 'canvas', 'cite', 'code', 'comment', 'data', 'datalist', 'del', 'dfn', 'em', 'embed', 'i', 'iframe', 'img', 'input', 'ins', 'kbd', 'label', 'map', 'mark', 'meter', 'nobr', 'noscript', 'object', 'output', 'picture', 'progress', 'q', 'rp', 'rt', 'ruby', 's', 'samp', 'script', 'select', 'slot', 'small', 'span', 'strong', 'sub', 'sup', 'svg', 'template', 'text', 'textarea', 'time', 'u', 'tt', 'var', 'video', 'wbr' ]
     INLINE_TAGS_REGEXP = INLINE_TAGS.join('|')
 
+    ADD_BREAK_LINE_TAGS = [ 'br', 'hr', 'col' ]
+    ADD_BREAK_LINE_TAGS_REGEXP = ADD_BREAK_LINE_TAGS.join('|')
+
+    # フォーマットで改行が増えないタグ (改行が増えるタグで改行増殖を抑えるために使う)
+    BREAK_LINE_NOT_INCREASE_TAGS = INLINE_TAGS - ADD_BREAK_LINE_TAGS
+
     def self.format(html)
       # 改行コード \n を \r\n に統一しておく
       html = html.gsub(/(?<!\r)\n/, "\r\n")
@@ -23,17 +29,29 @@ module Hitomalu
       body = doc.at_css('body')
 
       body.traverse { |node|
+        # テキストノードが空白文字以外を含み、親が非インライン要素(=ブロックノード)でもpreでもないならば中身の先頭と最後のスペースを消す
+        # (親のブロック要素に接しているところ = 兄弟がいない方向のみ)
+        if node.instance_of?(Nokogiri::XML::Text) && /\S/.match(node.content) && !(INLINE_TAGS + CONTENT_NO_MODIFY_TAGS).include?(node.parent.name)
+          if node.previous_sibling.nil?
+            node.content = node.content.gsub(/(\A\s+)/, "")
+          end
+          if node.next_sibling.nil?
+            node.content = node.content.gsub(/(\s+\Z)/, "")
+          end
+        end
+
+
         # 中身がないと、li などの閉じタグ省略可能なタグについてNokogiriが閉じタグ省略を行い、整形をかけるたびに閉じタグがついたりなくなったりするので、
         # 中身がないかスペースだけの場合、仮文字列にして最後に空文字列に置換する
-        # ただし、 <img src="1.jpg"> <img src="2.jpg"> のようなインライン要素の間のスペースと改行は保持する必要があるので保持する。
         # <li></li> の中に |mykaramojiretsu| を入れるために + ではなく * が必要
-        if /\A[ ]*\Z/.match?(node.content) && (node.previous_sibling.nil? || !INLINE_TAGS.include?(node.previous_sibling.name))
-          node.content = "|mykaramojiretsu|"
+        if /\A[ ]*\Z/.match?(node.content)
+          node.content = node.content + "|mykaramojiretsu|"
         end
 
         # インライン要素は、ブロック内先頭やテキストノードやインライン要素の次では改行しない
         # (前がブロック要素の終わりやコメントノードだと改行する)
-        if INLINE_TAGS.include?(node.name) && (node.previous_sibling.nil? || (node.previous_sibling.instance_of?(Nokogiri::XML::Text) || INLINE_TAGS.include?(node.previous_sibling.name)))
+        # (前が最後に改行を足すタグの場合、|nobreakline| を足すとスペースが増えて、フォーマットをかける度に結果が変わるので、|nobreakline| を足しません)
+        if INLINE_TAGS.include?(node.name) && (node.previous_sibling.nil? || (INLINE_TAGS.include?(node.previous_sibling.name) && !ADD_BREAK_LINE_TAGS.include?(node.previous_sibling.name)))
           node.add_previous_sibling("|nobreakline|")
         end
 
@@ -51,13 +69,28 @@ module Hitomalu
         end
 
         # </span>\n</div> を </span>\n</div> のままにしたいが、Nokogiri は閉じタグ間の\nを消すので一旦 |mykaigyo| にする (整形を2回かけた時用)
-        if node.instance_of?(Nokogiri::XML::Element) && !node.next_sibling.nil? && /\A\s*(\n|\r\n)\s*\Z/.match?(node.next_sibling.content) && node.next_sibling.next_sibling.nil?
+        if node.instance_of?(Nokogiri::XML::Element) && !node.next_sibling.nil? && /\A\s*(\n|\r\n)\s*\Z/.match?(node.next_sibling.to_s) && node.next_sibling.next_sibling.nil?
           node.next_sibling.content = "|mykaigyo|"
         end
 
+        # この下の処理で先頭改行をスペースに置換している & ブロック要素閉じタグの後には改行を入れる処理の関係上、
+        # </summary>\r\nnakami のような ブロック要素閉じタグ直後に改行が来ている場合、スペースが増殖してしまう (= 2回フォーマットをかけると結果が変わってしまう)
+        # それを防ぐため、ブロック要素閉じタグ直後の場合は先頭の改行を削除する
+        if node.instance_of?(Nokogiri::XML::Text) && !node.previous_sibling.nil? && !BREAK_LINE_NOT_INCREASE_TAGS.include?(node.previous_sibling.name) && !CONTENT_NO_MODIFY_TAGS.include?(node.parent.name)
+          node.content = node.content.gsub(/\A *(\r\n|\n)*/, "")
+        end
+      
+        # 上の事を、直後がブロック要素開始タグの場合にも末尾の改行についてする
+        if node.instance_of?(Nokogiri::XML::Text) && !node.next_sibling.nil? && !BREAK_LINE_NOT_INCREASE_TAGS.include?(node.next_sibling.name) && !CONTENT_NO_MODIFY_TAGS.include?(node.parent.name)
+          node.content = node.content.gsub(/ *(\r\n|\n)*\Z/, "")
+        end
+
         # タグの中身を整形する(見やすくするため)
-        if node.instance_of?(Nokogiri::XML::Text) && !CONTENT_NO_MODIFY_TAGS.include?(node.parent.name)
-          node.content = node.content.strip.gsub(/\s{2,}/, " ")
+        # 英文など、スペースが重要な言語があるので、stripはしない (Hello <a href="#world">world</a> のような文でスペースが、stripで無くなってしまう)
+        # \r\n を 2文字で1つのもの扱いにするため \s ではなく () で列挙している
+        # 連続する改行・スペースをスペース1つにし、先頭と最後の改行・スペースを除去し、文中の改行を除去する
+        if node.instance_of?(Nokogiri::XML::Text) && (CONTENT_NO_MODIFY_TAGS & node.ancestors.map do |ancestor| ancestor.name end).empty?
+          node.content = node.content.gsub(/(\r\n|\n| |\t|\f){2,}/, " ").gsub(/(\A ?(\r\n|\n) ?| ?(\r\n|\n) ?\Z)/, " ").gsub("\r\n", " ")
         end
 
         # 閉じタグとテキストノードの間に改行がなければ入れる(見やすくするため)
@@ -83,10 +116,11 @@ module Hitomalu
 
       # 開始タグの前に改行がなければ改行を入れる (add_prev_sibling は重いので文字列処理でやる) (文章の先頭からは消す)
       # その後、使い終わった改行しない印を消す
-      body_str = body_str.gsub(/(?<!\r\n)(?<!\|nobreakline\|)(?<!\|nobreakline\| )<(?!\/)/, "\r\n<").gsub(/(\A\r\n|\|nobreakline\|)/, "")
+       # また、閉じタグしか無い行の先頭のスペースを消す (閉じタグで改行されるのはブロック要素の閉じタグだけであるため、pre以外ならスペースを消して問題ない)
+      body_str = body_str.gsub(/(?<!\r\n)(?<!\|nobreakline\|)(?<!\|nobreakline\| )<(?!\/)/, "\r\n<").gsub(/(\A\r\n|\|nobreakline\|)/, "").gsub(/^ *(?!<\/pre>)(<\/[a-z]+>)$/, "\\1")
       
       # <br> や <hr> や <col> の後ろに改行がなければ改行を入れる (add_next_sibling は重いので文字列処理でやる)
-      body_str = body_str.gsub(/(<(?:br|hr|col)>)(?!\r\n)/, "\\1\r\n")
+      body_str = body_str.gsub(/(<(?:#{ADD_BREAK_LINE_TAGS_REGEXP})>)(?!\r\n)/, "\\1\r\n")
     end
   end
 end

data/lib/hitomalu_formatter/version.rb

@@ -1,5 +1,5 @@
 # frozen_string_literal: true
 
 module HitomaluFormatter
-  VERSION = "0.1.3"
+  VERSION = "0.1.6"
 end

metadata

@@ -1,14 +1,14 @@
 --- !ruby/object:Gem::Specification
 name: hitomalu_formatter
 version: !ruby/object:Gem::Version
-  version: 0.1.3
+  version: 0.1.6
 platform: ruby
 authors:
 - t-hazawa
 autorequire: 
 bindir: exe
 cert_chain: []
-date: 2022-08-04 00:00:00.000000000 Z
+date: 2022-08-25 00:00:00.000000000 Z
 dependencies: []
 description: 
 email: []