bluefeather 0.33 → 0.40

data/doc/author-and-license.html

@@ -18,7 +18,7 @@
 <li><a href="http://ja.wikipedia.org/wiki/GNU_General_Public_License">Wikipedia - GNU General Public License</a></li>
 </ul>
 
-<p>BlueFeather への要望、ご意見、バグ報告などがありましたら、<a href="http://ruby.morphball.net/bluefeather/">BlueFeather 配布サイト</a>よりメッセージを送信していただくか、もしくは Dice（<a href="&#x6D;&#097;&#x69;l&#116;&#x6F;:&#x74;&#101;&#116;&#x72;a&#x64;&#x69;&#099;&#x65;&#064;&#103;&#109;a&#105;&#x6C;&#x2E;&#x63;&#x6F;&#109;">&#x74;&#101;&#116;&#x72;a&#x64;&#x69;&#099;&#x65;&#064;&#103;&#109;a&#105;&#x6C;&#x2E;&#x63;&#x6F;&#109;</a>）までメールでご連絡していただけるよう、よろしくお願いします。</p>
+<p>BlueFeather への要望、ご意見、バグ報告などがありましたら、<a href="http://ruby.morphball.net/bluefeather/">BlueFeather 配布サイト</a>よりメッセージを送信していただくか、もしくは Dice（<a href="m&#x61;&#105;&#108;&#116;&#111;:&#116;&#x65;&#x74;&#x72;&#x61;&#100;&#x69;&#099;&#101;&#x40;&#103;&#109;&#x61;&#x69;&#x6C;&#046;c&#111;&#109;">&#116;&#x65;&#x74;&#x72;&#x61;&#100;&#x69;&#099;&#101;&#x40;&#103;&#109;&#x61;&#x69;&#x6C;&#046;c&#111;&#109;</a>）までメールでご連絡していただけるよう、よろしくお願いします。</p>
 
 </body>
 </html>

data/doc/basic-usage.bfdoc

@@ -176,7 +176,7 @@ test3.html
 `-e NAME`, `--encoding NAME`
 :
 変換するテキストファイルのエンコーディングを、指定したエンコーディングとして解釈します。
-（`shift-jis` / `euc-jp` / `utf-8` / `none` のうちいずれか、もしくは最初の数文字。標準では `utf-8`）
+（`shift-jis` / `euc-jp` / `utf-8` / `ascii` のうちいずれか、もしくは最初の数文字。標準では `utf-8`）
 
 `-f TYPE`, `--format TYPE`
 :

data/doc/basic-usage.html

@@ -190,7 +190,7 @@ Test paragraph.
   <dt><code>-e NAME</code>, <code>--encoding NAME</code></dt>
   <dd>
 変換するテキストファイルのエンコーディングを、指定したエンコーディングとして解釈します。
-（<code>shift-jis</code> / <code>euc-jp</code> / <code>utf-8</code> / <code>none</code> のうちいずれか、もしくは最初の数文字。標準では <code>utf-8</code>）</dd>
+（<code>shift-jis</code> / <code>euc-jp</code> / <code>utf-8</code> / <code>ascii</code> のうちいずれか、もしくは最初の数文字。標準では <code>utf-8</code>）</dd>
   <dt><code>-f TYPE</code>, <code>--format TYPE</code></dt>
   <dd>
 出力するhtmlの種別を特定します。

data/doc/en/author-and-license.html

@@ -24,7 +24,7 @@
 <p>If you want to send requests, comments, or bug reports to BlueFeather, please
 feel free to post messages from
 <a href="http://ruby.morphball.net/bluefeather/index_en.html">http://ruby.morphball.net/bluefeather/index_en.html</a> or to send mail to Dice.
-(<a href="&#x6D;&#097;&#x69;&#x6C;&#x74;&#111;:&#116;&#x65;&#116;&#114;&#x61;d&#x69;&#x63;&#x65;&#x40;&#x67;&#x6D;&#097;&#x69;l.c&#111;&#x6D;">&#116;&#x65;&#116;&#114;&#x61;d&#x69;&#x63;&#x65;&#x40;&#x67;&#x6D;&#097;&#x69;l.c&#111;&#x6D;</a>)</p>
+(<a href="&#109;&#097;&#105;&#108;&#x74;&#111;:&#116;&#x65;&#116;&#x72;&#097;&#100;&#x69;&#099;&#x65;&#x40;&#x67;m&#x61;&#105;&#x6C;&#046;&#x63;&#x6F;&#109;">&#116;&#x65;&#116;&#x72;&#097;&#100;&#x69;&#099;&#x65;&#x40;&#x67;m&#x61;&#105;&#x6C;&#046;&#x63;&#x6F;&#109;</a>)</p>
 
 </body>
 </html>

data/doc/en/encoding-rule.bfdoc

@@ -37,8 +37,8 @@ BlueFeather uses the following order.
 If you want to know about encoding header, see the [Metadata reference](metadata-reference.html).
 
 You can specify encoding.
-If you use with [`parse_document`](class-reference.html#parse_document) or [`parse_document_file`](class-reference.html#parse_document), you must use 2nd argument of these methods for it.
 If you use `bluefeather` command, you must use -e (--encoding) option for it.
+If you use with [`parse_document`](class-reference.html#parse_document) or [`parse_document_file`](class-reference.html#parse_document), you must use 2nd argument of these methods for it.
 
 
 

data/doc/en/encoding-rule.html

@@ -40,8 +40,8 @@ Else if ruby 1.9.x later, it is based on encoding which String object has.</p>
 <p>If you want to know about encoding header, see the <a href="metadata-reference.html">Metadata reference</a>.</p>
 
 <p>You can specify encoding.
-If you use with <a href="class-reference.html#parse_document"><code>parse_document</code></a> or <a href="class-reference.html#parse_document"><code>parse_document_file</code></a>, you must use 2nd argument of these methods for it.
-If you use <code>bluefeather</code> command, you must use -e (--encoding) option for it.</p>
+If you use <code>bluefeather</code> command, you must use -e (--encoding) option for it.
+If you use with <a href="class-reference.html#parse_document"><code>parse_document</code></a> or <a href="class-reference.html#parse_document"><code>parse_document_file</code></a>, you must use 2nd argument of these methods for it.</p>
 
 </body>
 </html>

data/doc/en/index.bfdoc

@@ -10,7 +10,7 @@ BlueFeather Manual
 
 -> [Japanese version (original)](../index.html)
 
-(2009-11-22: this document based on version 0.33)
+(2010-04-29: this document based on version 0.40)
 
  BlueFeather is software for converting text written by extended Markdown like 
 [PHP Markdown Extra][] to html. It is pair of command-line tool and pure Ruby

data/doc/en/index.html

@@ -12,7 +12,7 @@
 
 <p>-> <a href="../index.html">Japanese version (original)</a></p>
 
-<p>(2009-11-22: this document based on version 0.33)</p>
+<p>(2010-04-29: this document based on version 0.40)</p>
 
 <p>BlueFeather is software for converting text written by extended Markdown like 
 <a href="http://michelf.com/projects/php-markdown/extra/">PHP Markdown Extra</a> to html. It is pair of command-line tool and pure Ruby

data/doc/encoding-rule.bfdoc

@@ -31,9 +31,12 @@ CSS: black.css
 3. UTF-8
 
 
-「文書メタデータの Encoding ヘッダ」については、[メタデータリファレンス](metadata-reference.html)内の[説明](metadata-reference.html#encoding)を参照してください。
+「1. 文書メタデータの Encoding ヘッダ」についての詳細は、[メタデータリファレンス](metadata-reference.html)内の[説明](metadata-reference.html#encoding)を参照してください。
 
-変換時のエンコーディング指定は、[`parse_document`](class-reference.html#parse_document) メソッドや [`parse_document_file`](class-reference.html#parse_document) メソッドによる変換時にはメソッドの第二引数（default_enc）で、`bluefeather` コマンドであれば -e (--encoding) オプションで、それぞれ指定することが可能です。
+「2. 変換時に指定したエンコーディング」とは、以下のものを指します。
+
+* `bluefeather` コマンドによる変換時は、 -e (--encoding) オプションで指定したエンコーディング。
+* [`parse_document`](class-reference.html#parse_document) メソッドや [`parse_document_file`](class-reference.html#parse_document) メソッドによる変換時は、メソッドの第二引数（default_enc）で指定したエンコーディング。
 
 
 

data/doc/encoding-rule.html

@@ -36,9 +36,14 @@
 <li>UTF-8</li>
 </ol>
 
-<p>「文書メタデータの Encoding ヘッダ」については、<a href="metadata-reference.html">メタデータリファレンス</a>内の<a href="metadata-reference.html#encoding">説明</a>を参照してください。</p>
+<p>「1. 文書メタデータの Encoding ヘッダ」についての詳細は、<a href="metadata-reference.html">メタデータリファレンス</a>内の<a href="metadata-reference.html#encoding">説明</a>を参照してください。</p>
 
-<p>変換時のエンコーディング指定は、<a href="class-reference.html#parse_document"><code>parse_document</code></a> メソッドや <a href="class-reference.html#parse_document"><code>parse_document_file</code></a> メソッドによる変換時にはメソッドの第二引数（default_enc）で、<code>bluefeather</code> コマンドであれば -e (--encoding) オプションで、それぞれ指定することが可能です。</p>
+<p>「2. 変換時に指定したエンコーディング」とは、以下のものを指します。</p>
+
+<ul>
+<li><code>bluefeather</code> コマンドによる変換時は、 -e (--encoding) オプションで指定したエンコーディング。</li>
+<li><a href="class-reference.html#parse_document"><code>parse_document</code></a> メソッドや <a href="class-reference.html#parse_document"><code>parse_document_file</code></a> メソッドによる変換時は、メソッドの第二引数（default_enc）で指定したエンコーディング。</li>
+</ul>
 
 </body>
 </html>

data/doc/index.bfdoc

@@ -9,7 +9,7 @@ BlueFeather マニュアル
 → [English version](en/index.html)
 
 
-（2009-11-22 バージョン 0.33 準拠）
+（2010-04-29 バージョン 0.40 準拠）
 
 BlueFeather は、拡張 Markdown 記法で書かれたテキストを html に変換するソフトウェアです。
 コマンドラインツールと、Ruby スクリプト内で変換を行うためのライブラリがセットになっています。

data/doc/index.html

@@ -13,7 +13,7 @@
 
 <p>→ <a href="en/index.html">English version</a></p>
 
-<p>（2009-11-22 バージョン 0.33 準拠）</p>
+<p>（2010-04-29 バージョン 0.40 準拠）</p>
 
 <p>BlueFeather は、拡張 Markdown 記法で書かれたテキストを html に変換するソフトウェアです。
 コマンドラインツールと、Ruby スクリプト内で変換を行うためのライブラリがセットになっています。</p>

data/doc/metadata-reference.bfdoc

@@ -36,7 +36,7 @@ CSS スタイルシートの URL。生成される html 文書の head 要素内
 
 	Encoding: utf-8
 
-その文書のマルチバイトエンコーディングを表す。utf-8, euc-jp, shift-jis, ascii のいずれかが有効（小文字と大文字は区別しない）。
+その文書のマルチバイトエンコーディングを表す。utf-8, euc-jp, shift_jis (shift-jis), ascii のいずれかが有効（小文字と大文字は区別しない）。
 html の head 要素内に出力される Content-Type の値、および変換処理に影響する。
 
 なお、他のヘッダーの値をマルチバイト文字列で記述する場合、 *Encoding はそれらのヘッダーよりも先に記述されていなければならない。*

data/doc/metadata-reference.html

@@ -57,7 +57,7 @@ Atom-Feed: info/atom.xml
 <pre><code>Encoding: utf-8
 </code></pre>
 
-<p>その文書のマルチバイトエンコーディングを表す。utf-8, euc-jp, shift-jis, ascii のいずれかが有効（小文字と大文字は区別しない）。
+<p>その文書のマルチバイトエンコーディングを表す。utf-8, euc-jp, shift_jis (shift-jis), ascii のいずれかが有効（小文字と大文字は区別しない）。
 html の head 要素内に出力される Content-Type の値、および変換処理に影響する。</p>
 
 <p>なお、他のヘッダーの値をマルチバイト文字列で記述する場合、 <em>Encoding はそれらのヘッダーよりも先に記述されていなければならない。</em>

data/lib/bluefeather.rb

@@ -42,9 +42,9 @@ require 'uri'
 
 
 module BlueFeather
-	VERSION = '0.33'
-	VERSION_NUMBER = 0.33
-	RELEASE_DATE = '2009-11-22'
+	VERSION = '0.40'
+	VERSION_NUMBER = 0.40
+	RELEASE_DATE = '2010-04-29'
 	VERSION_LABEL = "#{VERSION} (#{RELEASE_DATE})"
 	
 	UTF8_BOM = "\xef\xbb\xbf"
@@ -98,11 +98,16 @@ module BlueFeather
 		end
 	end
 	
+	module HeaderIDType
+		MD5 = 'md5'
+		ESCAPE = 'escape'
+	end
+	
 	module EncodingType
 		EUC = 'euc-jp'
 		EUCJP = EUC_JP = EUC
 		
-		SJIS = 'shift-jis'
+		SJIS = 'shift_jis'
 		SHIFT_JIS = SJIS
 		
 		UTF8 = 'utf-8'
@@ -111,19 +116,34 @@ module BlueFeather
 		ASCII = 'ascii'
 		US_ASCII = ASCII
 		
-		def self.type_to_kcode(type)
+		def self.regulate(str_value)
+			case str_value.downcase
+			when 'shift-jis', 'shift_jis'
+				SJIS
+			when 'euc-jp'
+				EUC
+			when 'utf-8'
+				UTF8
+			when 'ascii'
+				ASCII
+			else
+				raise EncodingError, "not adapted encoding type - #{str_value} (shift[-_]jis, euc-jp, utf-8, or ascii)"
+			end
+		end
+		
+		def self.convert_to_kcode(str_value)
+			type = self.regulate(str_value)
 			case type
 			when EUC, SJIS, UTF8
 				type
 			when ASCII
 				'none'
-			else
-				raise EncodingError, "not adapted encoding type - #{type} (shift-jis, euc-jp, utf-8, or ascii)"
 			end
 		end
 
 		
-		def self.type_to_charset(type)
+		def self.convert_to_charset(str_value)
+			type = self.regulate(str_value)
 			case type
 			when EUC
 				'euc-jp'
@@ -131,10 +151,8 @@ module BlueFeather
 				'shift_jis'
 			when UTF8
 				'utf-8'
-			when ASCII, nil
+			when ASCII
 				nil
-			else
-				raise EncodingError, "not adapted encoding type - #{type} (shift-jis, euc-jp, utf-8, or ascii)"
 			end
 		end
 
@@ -185,6 +203,23 @@ module BlueFeather
 				end
 			end # if defined?
 		end # def
+		
+		
+		def utf8_bom?(str)
+			if str.respond_to?(:getbyte) and str.respond_to?(:bytesize) then
+				if str.bytesize >= 3 and
+				str.getbyte(0) == UTF8_BOM.getbyte(0) and
+				str.getbyte(1) == UTF8_BOM.getbyte(1) and
+				str.getbyte(2) == UTF8_BOM.getbyte(2) then
+					return true
+				else
+					return false
+				end
+				
+			else
+				return(str =~ UTF8_BOM_PATTERN ? true : false)
+			end
+		end
 	end
 	
 	class Document
@@ -201,8 +236,9 @@ module BlueFeather
 				headers = {}
 				body = nil
 				first_pos = input.pos
+				default_enc = EncodingType.regulate(default_enc)
 				
-				Util.change_kcode(EncodingType.type_to_kcode(default_enc)){
+				Util.change_kcode(EncodingType.convert_to_kcode(default_enc)){
 					# default encoding
 					if defined?(Encoding) then
 						input.set_encoding(Encoding.find(default_enc))
@@ -219,7 +255,7 @@ module BlueFeather
 						line = input.gets
 						
 						# cut UTF-8 BOM
-						if first_line and line =~ UTF8_BOM_PATTERN then
+						if first_line and Util.utf8_bom?(line) then
 							line.slice!(UTF8_BOM_PATTERN)
 						end	
 						first_line = false
@@ -228,9 +264,9 @@ module BlueFeather
 							key = $1.downcase; value = $2
 							
 							if key == 'encoding' and not headers.include?('encoding') then
-								kc = EncodingType.type_to_kcode(value.downcase)
+								kc = EncodingType.convert_to_kcode(value.downcase)
 								if input.respond_to?(:set_encoding) then
-									input.set_encoding(value.downcase)
+									input.set_encoding(EncodingType.regulate(value))
 									
 									# rewind (reason => [ruby-list:45988])
 									input.pos = first_pos
@@ -284,7 +320,10 @@ module BlueFeather
 		
 		
 		def initialize(headers = {}, body = '')
-			@headers = headers
+			@headers = {}
+			headers.each do |k, v|
+				self[k] = v
+			end
 			@body = body
 		end
 		
@@ -325,11 +364,15 @@ module BlueFeather
 		end
 		
 		def encoding_type
-			(@headers['encoding'] ? @headers['encoding'].downcase : 'utf-8')
+			@headers['encoding'] || EncodingType::UTF8
+		end
+		
+		def header_id_type
+			(@headers['header-id-type'] || HeaderIDType::MD5).downcase
 		end
 		
 		def kcode
-			self.encoding_type && EncodingType.type_to_kcode(self.encoding_type)
+			self.encoding_type && EncodingType.convert_to_kcode(self.encoding_type)
 		end
 		
 		def to_html
@@ -352,6 +395,7 @@ module BlueFeather
 			# BlueFeather Extension
 			attr_accessor :footnotes, :found_footnote_ids, :warnings
 			attr_accessor :headers, :block_transform_depth
+			attr_accessor :header_id_type # option switch
 			attr_accessor :numbering, :numbering_start_level # option switch
 			alias numbering? numbering
 			
@@ -361,6 +405,7 @@ module BlueFeather
 				@footnotes, @found_footnote_ids, @warnings = {}, [], []
 				@headers = []
 				@block_transform_depth = 0
+				@header_id_type = HeaderIDType::MD5
 				@numbering = false
 				@numbering_start_level = 2
 			end
@@ -446,6 +491,13 @@ module BlueFeather
 		### unused, though that may change in the future.
 		def parse_text(source, rs = nil)
 			rs ||= RenderState.new
+			
+			# check
+			case rs.header_id_type
+			when HeaderIDType::MD5, HeaderIDType::ESCAPE
+			else
+				rs.warnings << "illegal header id type - #{rs.header_id_type}"
+			end
 	
 			# Create a StringScanner we can reuse for various lexing tasks
 			@scanner = StringScanner::new( '' )
@@ -562,6 +614,7 @@ module BlueFeather
 				rs.numbering = true
 			end
 			rs.numbering_start_level = doc.numbering_start_level
+			rs.header_id_type = doc.header_id_type
 			
 			body_html = nil
 			
@@ -584,7 +637,7 @@ module BlueFeather
 			# head
 			out.puts %Q|<head>|
 			
-			if doc.encoding_type and (charset = EncodingType.type_to_charset(doc.encoding_type)) then
+			if doc.encoding_type and (charset = EncodingType.convert_to_charset(doc.encoding_type)) then
 				out.puts %Q|<meta http-equiv="Content-Type" content="text/html; charset=#{charset}" />|
 			end
 			
@@ -1553,6 +1606,7 @@ module BlueFeather
 						end
 					end
 					
+					prefix = ''
 					if rs.numbering? then
 						if level >= rs.numbering_start_level and level <= 6 then
 							depth = level - rs.numbering_start_level
@@ -1575,15 +1629,31 @@ module BlueFeather
 								no << "#{section_numbers[i]}."
 							end
 	
-							title = "#{no} #{title}"
+							prefix = "#{no} "
 						end
 					end
 					
 					title_html = apply_span_transforms( title, rs )
-					id ||= "bfheader-#{Digest::MD5.hexdigest(title)}"
+					
+					unless id then
+						case rs.header_id_type
+						when HeaderIDType::ESCAPE
+							id = escape_to_header_id(title_html)
+							if rs.headers.find{|h| h.id == id} then
+								rs.warnings << "header id collision - #{id}"
+								id = "bfheader-#{Digest::MD5.hexdigest(title)}"
+							end
+						else 
+							id = "bfheader-#{Digest::MD5.hexdigest(title)}"
+						end
+					end
+
+					title = "#{prefix}#{title}"
+					title_html = "#{prefix}#{title_html}"
+
 					
 					unless id =~ IdRegexp then
-						rs.warnings << "illegal header id - #{id} (legal chars: a-zA-Z0-9_-. | 1st: a-zA-Z)"
+						rs.warnings << "illegal header id - #{id} (legal chars: [a-zA-Z0-9_-.] | 1st: [a-zA-Z])"
 					end
 					
 					if rs.block_transform_depth == 1 then
@@ -1745,6 +1815,8 @@ module BlueFeather
 						url = @scanner[1]
 						title = @scanner[3]
 						@log.debug "  Found an inline link to %p" % url
+						
+						url = "##{link}" if url == '#' # target anchor briefing (since BlueFeather 0.40)
 	
 						text += %{<a href="%s"} % escape_md( url )
 						if title
@@ -1940,6 +2012,9 @@ module BlueFeather
 				gsub( CodeEscapeRegexp ) {|match| EscapeTable[match][:md5]}
 		end
 	
+		def escape_to_header_id(str)
+			URI.escape(escape_md(str.gsub(/<\/?[^>]*>/, "").gsub(/\s/, "_")).gsub("/", ".2F")).gsub("%", ".")
+		end
 	
 		#################################################################
 		###	U T I L I T Y   F U N C T I O N S
@@ -1996,8 +2071,7 @@ module BlueFeather
 	
 						# Scan either an opener or a closer
 						chunk = @scanner.scan( HTMLTagPart ) or
-							raise "Malformed tag at character %d: %p" % 
-								[ tagstart, token + @scanner.rest ]
+							break # BlueFeather Fix (refer to spec/code-block.rb)
 							
 						@log.debug "  Found another part of the tag at depth %d: %p" % [ depth, chunk ]
 	

data/lib/bluefeather/cui.rb

@@ -24,8 +24,6 @@ module BlueFeather
 			'bftext' => TEXT,
 		}
 		
-		ENCODING_LIST = %w(shift-jis euc-jp utf-8 ascii)
-		
 		HELP = <<-EOS
 bluefeather - Extended Markdown Converter
 
@@ -33,7 +31,7 @@ Usage: bluefeather [options] file1 [file2 file3 ..]
 
 Options:
   -e, --encoding NAME   parse input files as encoding of NAME.
-                        (s[hift-jis] / e[uc-jp] / u[tf-8] / a[scii]
+                        (s[hift(_-)jis] / e[uc-jp] / u[tf-8] / a[scii]
                          default: 'utf-8')
   -f, --format TYPE     specify format.
                         (t[ext]      => text mode
@@ -81,13 +79,28 @@ More info:
 			suffix = '.html'
 			format = nil
 			output_dir_path = nil
-			encoding = 'utf-8'
+			encoding = EncodingType::UTF_8
 			
 			
 			message_out = @stderr
 			
 			
-			op.on('-e', '--encoding NAME', ENCODING_LIST){|x| encoding = x}
+			op.on('-e', '--encoding NAME') do |v|
+				case v.downcase
+				when /^sh?i?f?t?[-_]?j?i?s?$/
+					encoding = EncodingType::SHIFT_JIS
+				when /^eu?c?-?j?p?$/
+					encoding = EncodingType::EUC_JP
+				when /^ut?f?-?8?$/
+					encoding = EncodingType::UTF_8
+				when /^as?c?i?i?$/
+					encoding = EncodingType::ASCII
+				else
+					message_out.puts "ERROR: invalid encoding - #{v}"
+					message_out.puts "Expected: s[hift(-_)jis] / e[uc-jp] / u[tf-8] / a[scii]"
+					return false
+				end
+			end
 			op.on('-f', '--format TYPE', FORMAT_TYPE_TABLE){|x| format = x}
 			op.on('--force'){|x| force = true}
 			op.on('-v', '--verbose'){ verbose = true }
@@ -115,7 +128,7 @@ More info:
 			unless defined?(Encoding) then
 				# ruby 1.8 or earlier
 				original_kcode = $KCODE
-				$KCODE = EncodingType.type_to_kcode(encoding)
+				$KCODE = EncodingType.convert_to_kcode(encoding)
 			end
 			
 			begin
@@ -127,7 +140,7 @@ More info:
 					src = @stdin.read
 					if defined?(Encoding) then
 						# ruby 1.9 or later
-						src.force_encoding(encoding)
+						src.force_encoding(EncodingType.regulate(encoding))
 					end
 					
 					# default: text

data/spec/auto-link.rb

@@ -5,7 +5,7 @@ require(Pathname.new(__FILE__).parent + 'lib/common.rb')
 describe 'Auto Link:' do
 	before(:each) do
 		@html = BlueFeather.parse(@src)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 
 	describe 'Valid URL:' do

data/spec/code-block.rb

@@ -5,7 +5,7 @@ describe 'Normal Code Block:' do
 	before(:each) do
 		@bf = BlueFeather::Parser.new
 		@html = @bf.parse_text(@src)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 
 
@@ -25,7 +25,7 @@ describe 'Fenced Code Block:' do
 	before(:each) do
 		@bf = BlueFeather::Parser.new
 		@html = @bf.parse_text(@src)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 
 
@@ -136,11 +136,9 @@ describe 'Fenced Code Block:' do
 				@doc.at('pre code').inner_text.should == "a\nb\n"
 			end
 		end
-
-
-
 	end
 	
+	
 
 end
 
@@ -148,7 +146,7 @@ describe "0.30 code block bug in list item:" do
 	before(:each) do
 		@bf = BlueFeather::Parser.new
 		@html = @bf.parse_text(@src)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 	
 	before(:all) do
@@ -177,7 +175,7 @@ describe "0.31 code block bug in list item:" do
 	before(:each) do
 		@bf = BlueFeather::Parser.new
 		@html = @bf.parse_text(@src)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 	
 	describe 'simple:' do
@@ -229,4 +227,27 @@ MARKDOWN
 			@doc.at('pre code').inner_text.should == "* example list in code block\n\n    ~~~\n    code\n    ~~~\n"
 		end
 	end
+end
+
+describe "0.31 code block bug in list item:" do
+	before(:each) do
+		@bf = BlueFeather::Parser.new
+		@html = @bf.parse_text(@src)
+		@doc = Nokogiri(@html)
+	end
+	
+	describe 'simple:' do
+		before(:all) do
+			@src = <<MARKDOWN
+	f<a < b>(a)
+MARKDOWN
+		end
+		
+		specify 'overview' do
+			@doc.should have_elements(1, 'pre code')
+			@doc.should_not have_element('pre code pre')
+		end
+
+	end
+	
 end

data/spec/cui.rb

@@ -53,17 +53,18 @@ describe 'CUI:' do
 			Proc.new{@cui.run(['--encoding'])}.should raise_error(OptionParser::MissingArgument)
 		end
 
-		valids = %w(s shift-jis u utf-8)
+		valids = %w(s shift-jis shift_jis sjis u utf-8 UTF-8 e euc-jp a ascii)
+		sample_src = (Pathname.new(__FILE__).parent + 'text/encoding_sample_ascii.bfdoc').to_s
 		valids.each do |name|
 			specify "'#{name}' is valid" do
-				@cui.run(['--encoding', name])
+				@cui.run(['--encoding', name, '-']).should be_true
 			end
 		end
 		
-		invalids = %w(sjis euc_jp none jis UTF-8)
+		invalids = %w(euc_jp none jis)
 		invalids.each do |name|
 			specify "'#{name}' is invalid" do
-				Proc.new{@cui.run(['--encoding', name])}.should raise_error(OptionParser::InvalidArgument)
+				@cui.run(['--encoding', name, '-']).should be_false
 			end
 		end
 		

data/spec/dl.rb

@@ -6,7 +6,7 @@ describe 'Definition List:' do
 	before(:each) do
 		@bf = BlueFeather::Parser.new
 		@html = @bf.parse_text(@src)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 	
 	describe 'Basic:' do

data/spec/encoding.rb

@@ -5,10 +5,26 @@ require 'kconv'
 require(Pathname.new(__FILE__).parent + 'lib/common.rb')
 
 
-describe 'Encoding:' do
+describe 'Internal encoding specification:' do
+	specify "utf-8 bom check" do
+		src = '日本語'.kconv(Kconv::SJIS, Kconv::UTF8)
+		BlueFeather::Util.utf8_bom?(src).should be_false
+		bom_src = "\xef\xbb\xbf日本語"
+		BlueFeather::Util.utf8_bom?(bom_src).should be_true
+	end
+	
+	specify "'shift-jis' is available:" do
+		src = '日本語'.kconv(Kconv::SJIS, Kconv::UTF8)
+		BlueFeather.parse_document(src, 'shift_jis')
+		BlueFeather.parse_document(src, 'shift-jis')
+	end
+end
+
+
+describe 'Encoding of files:' do
 	before(:each) do
 		@html = BlueFeather.parse_document_file(Pathname.new(__FILE__).parent + 'text/' + @src_name)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 	
 	share_as :Base do
@@ -76,7 +92,7 @@ describe 'Encoding:' do
 	end
 
 	
-	describe 'Shift-JIS:' do
+	describe 'Shift_JIS:' do
 		include Base
 		
 		before(:all) do

data/spec/footnote.rb

@@ -8,8 +8,8 @@ describe 'Footnote:' do
 	
 	describe 'simple:' do
 		before(:all) do
-			@html = @bf.parse_text("[^testid]\n\n[^testid]: none")
-			@doc = Hpricot(@html)
+			@html = "<div>" + @bf.parse_text("[^testid]\n\n[^testid]: none") + "</div>"
+			@doc = Nokogiri(@html)
 		end
 	
 		specify "reference a" do

data/spec/header-id.rb

@@ -2,11 +2,11 @@ require 'pathname'
 require(Pathname.new(__FILE__).parent + 'lib/common.rb')
 
 
-describe 'Header ID:' do
+describe 'Specified Header ID:' do
 	before(:each) do
 		@bf = BlueFeather::Parser.new
 		@html = @bf.parse_text(@src)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 
 
@@ -32,7 +32,79 @@ describe 'Header ID:' do
 		end
 
 	end
+end
 
+describe 'Auto Generated Header ID:' do
+	before(:each) do
+		@bf = BlueFeather::Parser.new
+		@rs = BlueFeather::Parser::RenderState.new
+		@rs.header_id_type = @header_id_type if @header_id_type
+		@html, @rs = @bf.parse_text_with_render_state('# h1/header 1 #', @rs)
+		@doc = Nokogiri("<div>" + @html + "</div>")
+	end
 
 
+	describe 'default (=md5):' do
+		specify 'pattern matched' do
+			@doc.at('h1')['id'].should =~ /^bfheader-[0-9a-f]{32}$/
+			@rs.warnings.size.should == 0
+		end
+	end
+	
+	describe 'md5:' do
+		before(:all) do
+			@header_id_type = 'md5'
+		end
+	
+		specify 'pattern matched' do
+			@doc.at('h1')['id'].should =~ /^bfheader-[0-9a-f]{32}$/
+			@rs.warnings.size.should == 0
+		end
+	end
+	
+	describe 'escape:' do
+		before(:all) do
+			@header_id_type = 'escape'
+		end
+	
+		specify 'pattern matched' do
+			@doc.at('h1')['id'].should == 'h1.2Fheader_1'
+			@rs.warnings.size.should == 0
+		end
+	end
+
+
+	describe 'illegel type:' do
+		before(:all) do
+			@header_id_type = '*illegal*'
+		end
+	
+		specify 'pattern matched' do
+			@doc.at('h1')['id'].should =~ /^bfheader-[0-9a-f]{32}$/
+			@rs.warnings.size.should == 1
+		end
+	end
+end
+
+describe "Document Header (Header-ID-Type:)" do
+	%w(md5 MD5).each do |value|
+		specify value do
+			doc = BlueFeather::Document.new({'Header-ID-Type' => value})
+			doc.header_id_type.should == BlueFeather::HeaderIDType::MD5
+		end
+	end
+	
+	%w(escape Escape ESCAPE).each do |value|
+		specify value do
+			doc = BlueFeather::Document.new({'Header-ID-Type' => value}, '')
+			doc.header_id_type.should == BlueFeather::HeaderIDType::ESCAPE
+		end
+	end
+
+end
+
+describe 'Anchor Briefing Link:' do
+	specify 'equal' do
+		BlueFeather.parse_text('[FooBar](#)').should == BlueFeather.parse_text('[FooBar](#FooBar)')
+	end
 end

data/spec/lib/common.rb

@@ -7,9 +7,9 @@ require 'pathname'
 $LOAD_PATH.unshift Pathname.new(__FILE__).dirname.parent.parent + 'lib/'
 
 require 'bluefeather'
-require 'hpricot'
+require 'nokogiri'
 
-module HpricotMatcher
+module NokogiriMatcher
 	class HaveElement
 		def initialize(selector)
 			@selector = selector
@@ -63,14 +63,14 @@ end
 
 # ex) doc.should have_element('div table')
 def have_element(selector)
-	HpricotMatcher::HaveElement.new(selector)
+	NokogiriMatcher::HaveElement.new(selector)
 end
 
 alias have_element_as have_element
 
 # ex) doc.should have_elements(3, 'p')
 def have_elements(number, selector)
-	HpricotMatcher::HaveElements.new(number, selector)
+	NokogiriMatcher::HaveElements.new(number, selector)
 end
 
 alias have_elements_as have_elements

data/spec/numbering.rb

@@ -17,7 +17,7 @@ Numbering-Start-Level: #{@start_level}
 MARKDOWN
 
 		@html = BlueFeather.parse_document(@src)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 	
 	

data/spec/table.rb

@@ -7,7 +7,7 @@ describe 'Simple Table:' do
 		@bf = BlueFeather::Parser.new
 			
 		@html = @bf.parse_text(@src)
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 	
 	share_as :StandardTable do

data/spec/toc.rb

@@ -9,8 +9,9 @@ describe 'TOC:' do
 			@html = @bf.parse_document(@doc_src)
 		else
 			@html, @rs = @bf.parse_text_with_render_state(@src)
+			@html = "<div>#{@html}</div>"
 		end
-		@doc = Hpricot(@html)
+		@doc = Nokogiri(@html)
 	end
 
 	describe 'Standard:' do

metadata

@@ -1,7 +1,7 @@
 --- !ruby/object:Gem::Specification 
 name: bluefeather
 version: !ruby/object:Gem::Version 
-  version: "0.33"
+  version: "0.40"
 platform: ruby
 authors: 
 - Dice
@@ -9,7 +9,7 @@ autorequire:
 bindir: bin
 cert_chain: []
 
-date: 2009-11-22 00:00:00 +09:00
+date: 2010-04-29 00:00:00 +09:00
 default_executable: 
 dependencies: []