narou 1.4.6 → 1.5.0

data/lib/helper.rb

@@ -108,7 +108,7 @@ module Helper
   # エンティティ復号
   #
   def restor_entity(str)
-    result = str.dup
+    result = str.encode("UTF-16BE", "UTF-8", :invalid => :replace, :undef => :replace, :replace => "?").encode("UTF-8")
     ENTITIES.each do |key, value|
       result.gsub!("&#{key};", value)
     end

data/lib/html.rb

@@ -0,0 +1,83 @@
+# -*- coding: utf-8 -*-
+#
+# Copyright 2013 whiteleaf. All rights reserved.
+#
+
+class HTML
+  attr_accessor :string
+
+  def initialize(string = "")
+    @string = string
+    @illust_current_url = nil
+    @illust_grep_pattern = /<img.+?src=\"(?<src>.+?)\".*?>/i
+  end
+
+  #
+  # 挿絵を置換するための設定を変更する
+  #
+  def set_illust_setting(options)
+    unless options.kind_of?(Hash)
+      raise ArgumentError, "invalid parameter(s), need Hash"
+    end
+    @illust_current_url = options[:current_url] if options[:current_url]
+    if grep_pattern = options[:grep_pattern]
+      @illust_grep_pattern = grep_pattern.kind_of?(Regexp) ? grep_pattern : /#{grep_pattern}/m
+    end
+  end
+
+  #
+  # 青空文庫形式に変換
+  #
+  def to_aozora
+    @string = br_to_aozora
+    @string = ruby_to_aozora
+    @string = b_to_aozora
+    @string = i_to_aozora
+    @string = s_to_aozora
+    @string = img_to_aozora
+    @string = delete_tag
+    @string
+  end
+
+  def delete_tag(text = @string)
+    text.gsub(/<.+?>/, "")
+  end
+
+  def br_to_aozora(text = @string)
+    text.gsub(/[\r\n]+/, "").gsub(/<br.*?>/i, "\n")
+  end
+
+  def ruby_to_aozora(text = @string)
+    text.tr("《》", "≪≫")
+        .gsub(/<ruby>(.+?)<\/ruby>/i) do
+      splited_ruby = $1.split(/<rt>/i)
+      next delete_tag(splited_ruby[0]) unless splited_ruby[1]
+      ruby_base = delete_tag(splited_ruby[0].split(/<rp>/i)[0])
+      ruby_text = delete_tag(splited_ruby[1].split(/<rp>/i)[0])
+      "｜#{ruby_base}《#{ruby_text}》"
+    end
+  end
+
+  def b_to_aozora(text = @string)
+    text.gsub(/<b>/i, "［＃太字］").gsub(/<\/b>/i, "［＃太字終わり］")
+  end
+
+  def i_to_aozora(text = @string)
+    text.gsub(/<i>/i, "［＃斜体］").gsub(/<\/i>/i, "［＃斜体終わり］")
+  end
+
+  def s_to_aozora(text = @string)
+    text.gsub(/<s>/i, "［＃取消線］").gsub(/<\/s>/i, "［＃取消線終わり］")
+  end
+
+  def img_to_aozora(text = @string)
+    if @illust_grep_pattern
+      text.gsub(@illust_grep_pattern) do
+        url = @illust_current_url ? URI.join(@illust_current_url, $~[:src]) : $~[:src]
+        "［＃挿絵（#{url}）入る］"
+      end
+    else
+      text
+    end
+  end
+end

data/lib/illustration.rb

@@ -10,7 +10,8 @@ require "open-uri"
 #
 class Illustration
   ILLUST_DIR = "挿絵/"
-  ILLUST_URL = "http://%s.mitemin.net/userpageimage/viewimage/icode/%s/"
+  NAROU_ILLUST_URL = "http://%s.mitemin.net/userpageimage/viewimage/icode/%s/"
+  NAROU_ILLUST_TAG_PATTERN = /^<(i[0-9]+)\|([0-9]+)>\n?/m
 
   MIME = { "image/jpeg" => "jpg", "image/png" => "png", "image/gif" => "gif", "image/bmp" => "bmp" }
 
@@ -21,60 +22,63 @@ class Illustration
     @inspector = inspector
   end
 
+  def scanner(source, &block)
+    source.gsub!(/［＃挿絵（(.+?)）入る］/) do
+      url = $1
+      path = url =~ URI.regexp ? download_image(url) : url
+      path ? block.call(make_illust_chuki(path)) : ""
+    end
+    source.gsub!(NAROU_ILLUST_TAG_PATTERN) do
+      id1, id2 = $1, $2
+      basename = "#{id1},#{id2}.*"
+      url = NAROU_ILLUST_URL % [id2, id1]
+      path = download_image(url, basename)
+      path ? block.call(make_illust_chuki(path)) : ""
+    end
+    source
+  end
+
   #
-  # 小説家になろうのイラストタグから挿絵データを取得する
+  # 画像のURLからデータを保存して、保存したファイルの絶対パスを返す
   #
-  def get(illust_tag)
-    if illust_tag =~ /<(.+)\|(.+)>/
-      id1, id2 = $1, $2
-      illust_path = make_illust_path(id1, id2)
-      unless illust_path
-        # 挿絵画像をサイトからダウンロードして保存する
-        open(make_url(id1, id2)) do |read_fp|
-          read_fp.autoclose = true
-          content_type = read_fp.meta["content-type"]
-          ext = MIME[content_type] or raise UnknownMIMEType, content_type
-          illust_path = make_illust_path(id1, id2, ext, false)
-          illust_dir = File.dirname(illust_path)
-          Dir.mkdir(illust_dir) unless File.exists?(illust_dir)
-          open(illust_path, "wb") do |write_fp|
-            write_fp.write(read_fp.read)
-          end
-          @inspector.info("挿絵「#{File.basename(illust_path)}」を保存しました。")
-        end
+  def download_image(url, basename = nil)
+    basename = File.basename(basename ? basename : url, ".*")
+    if path = search_image(basename)
+      return path
+    end
+    open(url) do |fp|
+      content_type = fp.meta["content-type"]
+      ext = MIME[content_type] or raise UnknownMIMEType, content_type
+      illust_abs_path = create_illust_path(basename) + "." + ext
+      open(illust_abs_path, "wb") do |write_fp|
+        write_fp.write(fp.read)
       end
-      chuki = make_illust_chuki(illust_path)
-      chuki
-    else
-      # 有効なイラストタグではなかった
-      @inspector.error("Illustration#get: #{illust_tag} は有効なイラストタグではありません。")
-      nil
+      @inspector.info("挿絵「#{File.basename(illust_abs_path)}」を保存しました。")
+      return illust_abs_path
     end
   rescue UnknownMIMEType => e
-    @inspector.error("Illustration#get: イラストタグ #{illust_tag} は対応した画像フォーマットではありません" + \
+    @inspector.error("Illustration#download_image: #{url} は未対応の画像フォーマットです" +
                      "(content-type: #{e.message})")
     nil
   rescue StandardError => e
-    @inspector.error("Illustration#get: イラストタグ #{illust_tag} を処理中に例外が発生しました(#{e})")
+    @inspector.error("Illustration#download_image: #{url} を処理中に例外が発生しました(#{e})")
     nil
   end
 
-  def make_illust_chuki(illust_path)
-    rel_illust_path = to_rel(@setting.archive_path, illust_path)
-    "［＃挿絵（#{rel_illust_path}）入る］"
+  def search_image(basename)
+    path = create_illust_path(basename) + ".*"
+    Dir.glob(path)[0]
   end
 
-  def make_illust_path(id1, id2, ext = "*", check = true)
-    path = File.join(@setting.archive_path, ILLUST_DIR, "#{id1},#{id2}.#{ext}")
-    if check
-      Dir.glob(path)[0]
-    else
-      path
-    end
+  def create_illust_path(basename)
+    illust_abs_dir = File.join(@setting.archive_path, ILLUST_DIR)
+    Dir.mkdir(illust_abs_dir) unless File.exists?(illust_abs_dir)
+    File.join(illust_abs_dir, basename)
   end
 
-  def make_url(id1, id2)
-    ILLUST_URL % [id2, id1]
+  def make_illust_chuki(illust_path)
+    rel_illust_path = to_rel(@setting.archive_path, illust_path)
+    "［＃挿絵（#{rel_illust_path}）入る］"
   end
 
   #

data/lib/narou/api.rb

@@ -5,19 +5,13 @@
 
 require "open-uri"
 require "yaml"
-require "time"
-require_relative "../sitesetting"
+require_relative "../novelinfo"
 
 module Narou
   #
   # 小説家になろうデベロッパーAPI操作クラス
   #
   class API
-    INFO_SETTING_FILE = "narou_novel_info.yaml"
-    NOVEL_TYPE = { "連載中" => 1, "完結済" =>  1, "短編" =>  2 }
-
-    @@novel_info_parameters = {}
-
     #
     # なろうデベロッパーAPIから情報を取得
     #
@@ -49,7 +43,7 @@ module Narou
         else
           # なろうAPIからデータを取得出来なかった
           # 開示設定が検索から除外に設定されるとAPIからはアクセスできなくなる
-          result = parse_novel_info
+          result = NovelInfo.load(@setting)
           unless result
             error "小説家になろうからデータを取得出来ませんでした"
             exit
@@ -58,32 +52,5 @@ module Narou
         end
       end
     end
-
-    #
-    # 小説情報ページをパースして必要な情報を取り出す
-    #
-    def parse_novel_info
-      return @@novel_info_parameters[@ncode] if @@novel_info_parameters[@ncode]
-      result = {}
-      of = "nt-s-gf-nu-gl"
-      request_output_parameters = of.split("-")
-      info_source = ""
-      open(@setting["narou_info_url"]) do |fp|
-        info_source = Helper.pretreatment_source(fp.read)
-      end
-      info_setting = SiteSetting.load_file(File.join(Narou.get_preset_dir, INFO_SETTING_FILE))
-      info_setting.multi_match(info_source, *request_output_parameters)
-      result["novel_type"] = NOVEL_TYPE[info_setting["novel_type"]]
-      result["story"] = info_setting["story"].gsub("<br />", "")
-      %w(general_firstup novelupdated_at general_lastup).each do |elm|
-        result[elm] = date_string_to_time(info_setting[elm])
-      end
-      @@novel_info_parameters[@ncode] = result
-      result
-    end
-
-    def date_string_to_time(date)
-      date ? Time.parse(date.tr("年月日時分秒", "///:::")) : nil
-    end
   end
 end

data/lib/novelconverter.rb

@@ -14,6 +14,7 @@ require_relative "template"
 require_relative "progressbar"
 require_relative "helper"
 require_relative "localsetting"
+require_relative "html"
 
 class NovelConverter
   NOVEL_TEXT_TEMPLATE_NAME = "novel.txt"
@@ -21,6 +22,10 @@ class NovelConverter
 
   attr_reader :use_dakuten_font
 
+  if Narou.already_init?
+    @@site_settings = Downloader.load_settings
+  end
+
   #
   # 指定の小説を整形・変換する
   #
@@ -234,6 +239,8 @@ class NovelConverter
     toc = @toc
     cover_chuki = @cover_chuki
     device = Narou.get_device
+    # タイトルがルビ化されてしまうのを抑制
+    toc["title"] = toc["title"].gsub("《", "※［＃始め二重山括弧］").gsub("》", "※［＃終わり二重山括弧］")
     tempalte_name = (device && device.ibunko? ? NOVEL_TEXT_TEMPLATE_NAME_FOR_IBUNKO : NOVEL_TEXT_TEMPLATE_NAME)
     Template.get(tempalte_name, binding)
   end
@@ -264,6 +271,10 @@ class NovelConverter
     end
   end
 
+  def find_site_setting
+    @@site_settings.find { |s| s.multi_match(@toc["toc_url"], "url") }
+  end
+
   #
   # 変換処理メイン
   #
@@ -286,6 +297,10 @@ class NovelConverter
       @section_save_dir = Downloader.get_novel_section_save_dir(@setting.archive_path)
       @toc = Downloader.get_toc_data(@setting.archive_path)
       @toc["story"] = conv.convert(@toc["story"], "story")
+      html = HTML.new
+      site_setting = find_site_setting
+      html.set_illust_setting(current_url: site_setting["illust_current_url"],
+                              grep_pattern: site_setting["illust_grep_pattern"])
       progressbar = ProgressBar.new(@toc["subtitles"].count)
       @toc["subtitles"].each_with_index do |subinfo, i|
         progressbar.output(i)
@@ -295,7 +310,12 @@ class NovelConverter
         end
         @inspector.subtitle = section["subtitle"]
         element = section["element"]
+        data_type = element.delete("data_type") || "text"
         element.each do |text_type, elm_text|
+          if data_type == "html"
+            html.string = elm_text
+            elm_text = html.to_aozora
+          end
           element[text_type] = conv.convert(elm_text, text_type)
         end
         section["subtitle"] = conv.convert(section["subtitle"], "subtitle")

data/lib/novelinfo.rb

@@ -0,0 +1,48 @@
+# -*- coding: utf-8 -*-
+#
+# Copyright 2013 whiteleaf. All rights reserved.
+#
+
+require "open-uri"
+require "time"
+require_relative "sitesetting"
+require_relative "html"
+
+class NovelInfo
+  @@novel_info_parameters = {}
+
+  def self.load(setting)
+    info = new(setting)
+    info.parse_novel_info
+  end
+
+  def initialize(setting)
+    @setting = setting
+    @ncode = @setting["ncode"]
+    @@novel_info_parameters[@setting["name"]] ||= {}
+  end
+
+  def parse_novel_info
+    info_url = @setting["novel_info_url"] or return nil
+    result = @@novel_info_parameters[@setting["name"]][@ncode] ||= {}
+    return result unless result.empty?
+    of = "nt-s-gf-nu-gl-w"
+    request_output_parameters = of.split("-")
+    info_source = ""
+    open(info_url) do |fp|
+      info_source = Helper.pretreatment_source(fp.read, @setting["encoding"])
+    end
+    @setting.multi_match(info_source, *request_output_parameters)
+    result["novel_type"] = @setting["novel_type_string"][@setting["novel_type"]] || 1
+    result["story"] = @setting["story"]
+    result["writer"] = @setting["writer"]
+    %w(general_firstup novelupdated_at general_lastup).each do |elm|
+      result[elm] = date_string_to_time(@setting[elm])
+    end
+    result
+  end
+
+  def date_string_to_time(date)
+    date ? Time.parse(date.sub(/[\(（].+?[\)）]/, "").tr("年月日時分秒", "///:::")) : nil
+  end
+end

data/lib/novelsetting.rb

@@ -182,9 +182,9 @@ class NovelSetting
       help: "ルビ処理を有効に"
     },
     {
-      name: "enable_narou_illust",
+      name: "enable_illust",
       value: true,
-      help: "小説家になろうの挿絵タグを有効にする（false なら削除）"
+      help: "挿絵タグを有効にする（false なら削除）"
     },
     {
       name: "enable_transform_fraction",

data/lib/sitesetting.rb

@@ -51,8 +51,13 @@ class SiteSetting
     end
   end
 
+  def is_container?(value)
+    value.kind_of?(Hash) || value.kind_of?(Array)
+  end
+
   def replace_group_values(key, option_values = {})
     dest = option_values[key] || @match_values[key] || @yaml_setting[key]
+    return dest if is_container?(dest)
     begin
       result = dest.dup
     rescue TypeError

data/lib/version.rb

@@ -3,7 +3,7 @@
 # Copyright 2013 whiteleaf. All rights reserved.
 #
 
-Version = "1.4.6"
+Version = "1.5.0"
 
 cv_path = File.expand_path(File.join(File.dirname(__FILE__), "../commitversion"))
 if File.exists?(cv_path)

data/narou.gemspec

@@ -46,11 +46,19 @@ narou コマンドのインストール or アップデートが完了しまし
   初めてこのアプリケーションを使う場合、小説管理用のフォルダを初期化する必要があります。
   任意のフォルダで `narou init' を実行して下さい。
 
-2014/02/28 : **1.4.6**
+2014/03/06 : **1.5.0**
 * 追加機能もしくは仕様変更
-	- `narou diff` コマンドに(凍結済を除く)全ての小説の差分データを削除する `--all-clean` オプションが追加されました
+	- 小説投稿サイト ハーメルン (http://syosetu.org/) に対応しました
+	- 小説投稿サイト Arcadia (http://www.mai-net.net/) に対応しました
+		+ Arcadiaは `narou d "http://www.mai-net.net/bbs/sst/sst.php?～略～&n=0&count=1"` のように
+		  URLを " で囲まないとコマンドがきちんと通りませんのでご注意下さい
+	- このバージョン以降ダウンロードした小説の保存フォルダ名には、タイトルの前にIDが付加されるようになりました
+	- アラビア数字を漢数字に変換しないパターンを追加（％や単位系）
+	- `setting.ini` の項目、 `enable_narou_illust` が `enable_illust` に変更になりました
 * Bug Fix
-	- 傍点化の処理が特殊な状況下で Index Error を吐いて止まっていた問題を修正
+	- `narou browser --vote` コマンドがなろうのレイアウト変更に対応していなかったので修正
+	- 半角カナを全角カナに変換するように修正 #36
+	- 小説のタイトルにはルビをふれないように修正 #37
 
 #{"*" * 79}
   EOS

data/narou.rb

@@ -7,11 +7,11 @@
 #
 
 $debug = File.exists?(File.join(File.expand_path(File.dirname($0)), "debug"))
-watch = File.exists?(File.join(File.expand_path(File.dirname($0)), "watch"))
 Encoding.default_external = Encoding::UTF_8
 
 require_relative "lib/globalsetting"
 
+display_time = ARGV.delete("--time")
 display_backtrace = ARGV.delete("--backtrace")
 display_backtrace ||= $debug
 $disable_color = ARGV.delete("--no-color")
@@ -23,11 +23,11 @@ require_relative "lib/commandline"
 
 rescue_level = $debug ? Exception : StandardError
 
-if watch
-  require_relative "lib/watcher"
-  Watcher.__regist__ Helper, LocalSetting, Device, WinAPI, Narou, GlobalSetting, Command,
-                     Database, SiteSetting, Template, Downloader, Ini, NovelSetting, Inspector,
-                     Illustration, ProgressBar, ConverterBase, NovelConverter, CommandLine
+if display_time
+  now = Time.now
+  at_exit do
+    puts "実行時間 #{Time.now - now}秒"
+  end
 end
 
 begin
@@ -44,3 +44,4 @@ rescue rescue_level => e
   end
   exit 1
 end
+