narou 3.8.2 → 3.9.0

checksums.yaml

@@ -1,7 +1,7 @@
 ---
 SHA256:
-  metadata.gz: e639fd7c7a2808c632f85812866ca9614978e152f177eedc69c8559f515af525
-  data.tar.gz: 8b406a232555c9e0625ac261183ab1017ebef6a50f6602ed9d694fce29db1307
+  metadata.gz: 1a9fafd6af1ebb3b07da36ae193a2de21a750b00797ef805f6d3ade778e65dff
+  data.tar.gz: 3e260f769599b31e1e52290c78842be937b6dc34b6a002ca73dd30f351fe079c
 SHA512:
-  metadata.gz: 9ec435fd5f1cd7b5f9c28a9a8e461450102e3083ebbbe04f4bcdc4cffcff1e5a90ef352a72c2f7c2d4e70f1bad1569403fc1c65309bee9e4e6137292ec19aaa3
-  data.tar.gz: 305f538e204dcdb0bb2ae02d5c8f770f40fd94e33913ab6b436de6db8d55f4ecb03e2cf8e22b03fcb3d14300031ec994e4ea4b094d7762a59dbeb0961f30055b
+  metadata.gz: 9cd647d5a413bb188640688ff07fcd82f21604e3aca83faebaf3e3bb8f39db91a517c13483cddc69ffef0f674570835273b6a9a57487565d6ab4fe61c2e8053c
+  data.tar.gz: a568312cc5fd8349789c1061a227bd39e31db63769ad75011f8d0bcd36fe95bb6cd0e57749930f8d0d7cf4572e862c2a51499235dd04b7590c6fd04af0259039

data/ChangeLog.md

@@ -1,6 +1,15 @@
 更新履歴 - ChangeLog
 ====================
 
+3.9.0: 2024-04-02
+-----------------
+#### 修正内容
+- 小説家になろうの目次修正に対応
+- カクヨムの目次修正に対応
+
+thanks for contributors: @topstone, @rogenobl, @happynow, @etg-lt
+
+
 3.8.2: 2022/09/10
 -----------------
 #### 修正内容

data/README.md

@@ -34,10 +34,13 @@ Narou.rb - 小説家になろうのダウンローダ＆縦書き整形＆管理
 更新履歴 - ChangeLog
 --------------------
 
-3.8.2: 2022/09/10
+3.9.0: 2024-04-02
 -----------------
 #### 修正内容
-- フォルダが存在しない場合に自動で作成する様に修正
+- 小説家になろうの目次修正に対応
+- カクヨムの目次修正に対応
+
+thanks for contributors: @topstone, @rogenobl, @happynow, @etg-lt
 
 ----
 

data/commitversion

@@ -1 +1 @@
-4660df5
+89566d7

data/lib/command/diff.rb

@@ -70,7 +70,7 @@ module Command
     # 引数の中の -数字 オプション(-n 数字の省略形)を -n 数字 に変換する
     def short_number_option_parse(argv)
       argv.map! { |arg|
-        if arg =~ /^-(\d+)$/
+        if arg.to_s =~ /^-(\d+)$/
           ["-n", $1.to_s]
         else
           arg
@@ -250,7 +250,7 @@ module Command
         list: []
       }
       cache_list = get_sorted_cache_list(id)
-      return list if cache_list.empty?
+      return list if cache_list.blank?
       cache_list.each.with_index(1) do |cache_path, i|
         objects = []
         version_string = File.basename(cache_path)

data/lib/command/setting.rb

@@ -534,6 +534,10 @@ module Command
                 "エラーは出ないが読めなくなる）",
           tab: :detail
         },
+        "user-agent" => {
+          type: :string, help:  "User-Agent 設定\n未指定時 Mozilla/5.0 (Windows NT 10.0; Win64; x64)",
+          tab: :detail
+        },
         "webui.theme" => {
           type: :select, help: "WEB UI 用テーマ選択",
           invisible: true,

data/lib/command/tag.rb

@@ -12,7 +12,7 @@ module Command
   class Tag < CommandBase
     COLORS = %w(green yellow blue magenta cyan red white)
     # 禁止文字
-    BAN_CHAR = /[:;"'><$@&^\\\|%'\/`]/
+    BAN_CHAR = /[:;"'><$@&^\\\|%\/`]/
     # 禁止ワード
     BAN_WORD = %w(hotentry)
 

data/lib/command/update/general_lastup_updater.rb

@@ -70,7 +70,7 @@ module Command
               "general_lastup" => downloader.get_general_lastup,
               "length" => downloader.novel_length
             }
-          rescue OpenURI::HTTPError, Errno::ECONNRESET, Errno::ETIMEDOUT, Net::OpenTimeout
+          rescue OpenURI::HTTPError, Errno::ECONNRESET, Errno::ETIMEDOUT, Net::OpenTimeout, IO::TimeoutError
             next
           end
           data = @database[id]

data/lib/converterbase.rb

@@ -15,7 +15,7 @@ require_relative "inspector"
 
 class ConverterBase
   KANJI_NUM = "〇一二三四五六七八九"
-  ENGLISH_SENTENCES_CHARACTERS = /[\w.,!?'" &:;_-]+/
+  ENGLISH_SENTENCES_CHARACTERS = /[\w.,!?'" &:;-]+/
   ENGLISH_SENTENCES_MIN_LENGTH = 8   # この文字数以上アルファベットが続くと半角のまま
 
   attr_reader :use_dakuten_font
@@ -939,8 +939,8 @@ class ConverterBase
       "#{m1[0...-1]}#{openclose_symbols[0]}#{m2}#{openclose_symbols[1]}"
     when is_sesame?(m1, m2, last_char)
       sesame(m1)
-    when m1.include?("｜")
-      "#{m1.sub(/｜([^｜]*)$/, "［＃ルビ用縦線］\\1")}《#{ruby_youon_to_big(m2)}》"
+    when m1 =~ /^(.*)｜([^｜≪≫（）《》]+)$/
+      "#{$1}［＃ルビ用縦線］#{$2}《#{ruby_youon_to_big(m2)}》"
     when object_of_ruby?(last_char)
       if openclose_symbols[0] == "≪" && m2 !~ /^#{AUTO_RUBY_CHARACTERS}$/
         # 《 》タイプのルビであっても、｜が存在しない場合の自動ルビ化対象はひらがな等だけである

data/lib/downloader.rb

@@ -11,6 +11,7 @@ require_relative "narou"
 require_relative "helper"
 require_relative "sitesetting"
 require_relative "template"
+require_relative "progressbar"
 require_relative "database"
 require_relative "inventory"
 require_relative "eventable"
@@ -40,6 +41,7 @@ class Downloader
 
   class InvalidTarget < StandardError; end
   class SuspendDownload < StandardError; end
+  class IO::TimeoutError; end # for 3.1 or earlier
 
   def initialize(target, options = {})
     id = Downloader.get_id_by_target(target)
@@ -724,6 +726,7 @@ class Downloader
     toc_source = ""
     cookie = @setting["cookie"] || ""
     open_uri_options = make_open_uri_options("Cookie" => cookie, allow_redirections: :safe)
+    sleep_for_download
     begin
       URI.open(toc_url, open_uri_options) do |toc_fp|
         if toc_fp.base_uri.to_s != toc_url
@@ -783,7 +786,7 @@ class Downloader
     @setting["title"] = get_title
     if series_novel?
       # 連載小説
-      subtitles = get_subtitles(toc_source, old_toc)
+      subtitles = get_subtitles_multipage(toc_source, old_toc)
     else
       # 短編小説
       subtitles = create_short_story_subtitles(info)
@@ -798,7 +801,7 @@ class Downloader
       "subtitles" => subtitles
     }
     toc_objects
-  rescue OpenURI::HTTPError, Errno::ECONNRESET, Errno::ETIMEDOUT, Net::OpenTimeout => e
+  rescue OpenURI::HTTPError, Errno::ECONNRESET, Errno::ETIMEDOUT, Net::OpenTimeout, IO::TimeoutError => e
     raise if through_error   # エラー処理はしなくていいからそのまま例外を受け取りたい時用
     if e.message.include?("404")
       @stream.error "小説が削除されているか非公開な可能性があります"
@@ -813,6 +816,40 @@ class Downloader
     false
   end
 
+  def get_subtitles_multipage(toc_source, old_toc)
+    subtitles = []
+    # 元々のURLを保存する
+    toc_url_orig = @setting["toc_url"]
+    # 全ページ数を得る
+    @setting.multi_match(toc_source, "toc_page_max")
+    toc_page_max = @setting["toc_page_max"].to_i
+    # toc_page_maxが設定されていない、正規表現にマッチしない場合などでも最低限は1にする
+    toc_page_max = 1 unless toc_page_max > 0
+    # 5ページ以上でプログレスバーを表示する
+    progressbar =  nil
+    if toc_page_max >= 5
+      @stream.puts "#{@setting["title"]} の目次ページを取得中..."
+      progressbar = ProgressBar.new(toc_page_max, io: @stream)
+    end
+    ret = toc_page_max.times do |i|
+      progressbar&.output(i + 1)
+      subtitles.concat(get_subtitles(toc_source, old_toc))
+      break unless @setting.multi_match(toc_source, "next_toc")
+      # 得られたURLをセットしてページ内容を取得する
+      @setting["toc_url"] = @setting["next_url"]
+      toc_source = get_toc_source
+    end
+    progressbar&.clear
+    if ret
+      # 通常ならbreakでループを抜けるはず
+      # breakでループを抜けなかったら例外を出す
+      raise "目次ページが多すぎます"
+    end
+    subtitles
+  ensure
+    @setting["toc_url"] = toc_url_orig
+  end
+
   def __search_index_in_subtitles(subtitles, index)
     subtitles.index { |item|
       item["index"] == index
@@ -1137,7 +1174,7 @@ class Downloader
       URI.open(url, "r:#{@setting["encoding"]}", open_uri_options) do |fp|
         raw = Helper.pretreatment_source(fp.read, @setting["encoding"])
       end
-    rescue OpenURI::HTTPError, Errno::ECONNRESET, Errno::ETIMEDOUT, Net::OpenTimeout => e
+    rescue OpenURI::HTTPError, Errno::ECONNRESET, Errno::ETIMEDOUT, Net::OpenTimeout, IO::TimeoutError => e
       case e.message
       when /^503/
         # 503 はアクセス規制やメンテ等でリトライしてもほぼ意味がないことが多いため一度で諦める

data/lib/extension.rb

@@ -6,13 +6,16 @@
 
 require "open-uri"
 require "openssl"
+require_relative "inventory"
 
 # open-uri で http → https へのリダイレクトを有効にする
 require "open_uri_redirections"
 
 # open-uri に渡すオプションを生成（必要に応じて extensions/*.rb でオーバーライドする）
 def make_open_uri_options(add)
+  ua = Inventory.load("local_setting")["user-agent"] || "Mozilla/5.0 (Windows NT 10.0; Win64; x64)"
   add.merge(ssl_verify_mode: OpenSSL::SSL::VERIFY_NONE)
+  add.merge("User-Agent" => ua)
 end
 
 #

data/lib/helper.rb

@@ -102,7 +102,7 @@ module Helper
   end
 
   def replace_filename_special_chars(str, invalid_replace = false)
-    result = str.tr("/:*?\"<>|.`", "／：＊？”〈〉｜．｀").gsub("\\", "￥").gsub("\t", "").gsub("\n", "")
+    result = str.tr("/:*?\"<>[]{}|.`", "／：＊？”〈〉［］｛｝｜．｀").gsub("\\", "￥").gsub("\t", "").gsub("\n", "")
     if Inventory.load("local_setting")["normalize-filename"]
       begin
         result.unicode_normalize!

data/lib/narou.rb

@@ -44,7 +44,7 @@ module Narou
     @@is_web = false
 
     def last_commit_year
-      2022
+      2024
     end
 
     def root_dir

data/lib/novelconverter.rb

@@ -100,6 +100,7 @@ class NovelConverter
       if DAKUTEN_ERB[i]
         Helper.erb_copy(src, dst, binding)
       else
+        FileUtils.mkdir_p(File.dirname(dst))
         FileUtils.copy(src, dst)
       end
     end
@@ -165,7 +166,9 @@ class NovelConverter
     aozoraepub3_basename = File.basename(aozoraepub3_path)
     aozoraepub3_dir = File.dirname(aozoraepub3_path)
 
-    java_encoding = "-Dfile.encoding=UTF-8"
+    java_encoding = "-Dfile.encoding=UTF-8" +
+                    " -Dstdout.encoding=UTF-8 -Dstderr.encoding=UTF-8" +
+                    " -Dsun.stdout.encoding=UTF-8 -Dsun.stderr.encoding=UTF-8"
 
     if Helper.os_cygwin?
       abs_srcpath = Helper.convert_to_windows_path(abs_srcpath)

data/lib/sitesetting.rb

@@ -6,6 +6,7 @@
 
 require "yaml"
 require_relative "narou/api"
+require_relative "sitesettinghandler"
 
 class SiteSetting
   NOVEL_SITE_SETTING_DIR = "webnovel/"
@@ -101,14 +102,18 @@ class SiteSetting
     keys.each do |key|
       setting_value = self[key] or next
       [*setting_value].each do |value|
-        match_data = source.match(/#{value}/m)
-        if match_data
-          @match_values[key] = value       # yamlのキーでもmatch_valuesに設定しておくが、
-          update_match_values(match_data)  # ←ここで同名のグループ名が定義されていたら上書きされるので注意
-                                           # 例えば、title: <title>(?<title>.+?)</title> と定義されていた場合、
-                                           # @match_values["title"] には (?<title>.+?) 部分の要素が反映される
-          break
-        end
+        handle = SiteSettingHandler.handler(self, value)
+        match_data = handle&.match(source) # ハンドルオブジェクトを得て、それにより処理する
+        next unless match_data
+        value = handle.value if handle.respond_to?(:value)
+                                         # rubocop:disable Layout/CommentIndentation
+                                         # 通常はこれまで通りだが、valueを変更することも可能にする
+        @match_values[key] = value       # yamlのキーでもmatch_valuesに設定しておくが、
+        update_match_values(match_data)  # ←ここで同名のグループ名が定義されていたら上書きされるので注意
+                                         # 例えば、title: <title>(?<title>.+?)</title> と定義されていた場合、
+                                         # @match_values["title"] には (?<title>.+?) 部分の要素が反映される
+                                         # rubocop:enable Layout/CommentIndentation
+        break
       end
     end
     match_data

data/lib/sitesettinghandler.rb

@@ -0,0 +1,123 @@
+# frozen_string_literal: true
+
+require "weakref"
+require_relative "worker"
+
+class SiteSettingHandler
+  HANDLER_DIR = "handler"
+  HANDLER_EXT = ".rb"
+
+  @@klasses = {}
+
+  class << self
+    # @type : ハンドラのタイプ名
+    attr_reader :type
+
+    #
+    # ハンドラを登録する
+    #
+    # 継承したクラスで呼び出してハンドラを登録する
+    # 通常、ファイル名からタイプ名を作るが、引数で直接指定も出来る
+    # クラスを継承していない場合はクラスを指定して登録する
+    #
+    def add_handler(path_or_type: @@current_path, klass: self)
+      @type = File.basename(path_or_type, HANDLER_EXT)
+      @@klasses[@type] = klass
+    end
+
+    #
+    # ハンドラの呼び出し
+    #
+    # 引数から対応するハンドラを呼び出しインスタンスを作る
+    # 引数がこのクラスの派生オブジェクトならそのまま返す
+    # それ以外でもメソッドmatchを持つならそのまま返す
+    # それ以外なら正規表現であるので正規表現ハンドラにして返す
+    #
+    def handler(parent, value)
+      case value
+      when Array
+        # key:
+        #   type: value
+        _make_handler(parent, *value)
+      when Hash
+        # key:
+        #   - type: value
+        _make_handler(parent, *value.flatten)
+      when String
+        # key:
+        #   value
+        /#{value}/m
+      when self
+        # 派生オブジェクトならそのまま返す
+        value
+      else
+        if value.respond_to?(:match)
+          # matchメソッドを持つオブジェクトならそのまま返す
+          value
+        else
+          # その他であれば正規表現として生成
+          /#{value}/m
+        end
+      end
+    end
+
+    def _make_handler(parent, type, value)
+      # typeが未登録の場合、例外が発生する
+      klass = @@klasses.fetch(type)
+      klass.make(value, WeakRef.new(parent))
+    end
+
+    # makeを再定義すれば別のインスタンスを返すことも可能
+    alias make new
+
+  end
+
+  def initialize(value, parent)
+    @value = value
+    @parent = parent
+  end
+
+  # ハンドラタイプ名
+  # class_attribute :type, instance_writer: false
+  def type
+    self.class.type
+  end
+
+  # 呼び出し元のオブジェクト
+  def parent
+    @parent&.weakref_alive? ? @parent : nil
+  end
+
+  # valueを定義すれば変更できる
+  # def value()
+  #   self
+  # end
+  #
+  # sourceから値が得られるかチェックし、得られるなら値をセットする
+  # 継承したクラスにて実装する
+  # def match(source)
+  #   PseudoMatchData.new("post_match", {"key" => "value"})
+  # end
+
+  # matchが返すmatch_dataのためのクラス
+  class PseudoMatchData < Hash
+    attr_reader :post_match
+
+    def initialize(post_match, hash)
+      super()
+      @post_match = post_match
+      replace(hash)
+    end
+
+    def names
+      keys.map(&:to_s)
+    end
+  end
+end
+
+class EvalHandler < SiteSettingHandler
+  def match(source)
+    eval(@value, binding, parent&.path || "(nil)") # rubocop:disable Security/Eval
+  end
+  add_handler(path_or_type: "eval")
+end

data/lib/version.rb

@@ -5,5 +5,5 @@
 #
 
 module Narou
-  VERSION = "3.8.2"
+  VERSION = "3.9.0"
 end

data/narou.gemspec

@@ -32,10 +32,13 @@ Gem::Specification.new do |gem|
   install_message = <<-EOS
 #{"*" * 60}
 
-3.8.2: 2022/09/10
+3.9.0: 2024-04-02
 -----------------
 #### 修正内容
-- フォルダが存在しない場合に自動で作成する様に修正
+- 小説家になろうの目次修正に対応
+- カクヨムの目次修正に対応
+
+thanks for contributors: @topstone, @rogenobl, @happynow, @etg-lt
 
 #{"*" * 60}
   EOS

data/webnovel/kakuyomu.jp.yaml

@@ -10,33 +10,87 @@ confirm_over18: no
 append_title_to_folder_name: yes
 title_strip_pattern: null
 sitename: *name
-version: 1.0
+version: 2.0
+
+# ------------------------------------------------------------
+# 前処理設定
+# jsonを処理して正規表現で取得可能なデータへ変換し挿入する
+code: &code
+  eval: |-
+    magicword = "KakuyomuPreprocessEvalMagicWord"
+    # magicwordがある場合、既にこの前処理が行われているので何もしない
+    unless source.include?(magicword)
+      require "json"
+      source.match(%r|<script id="__NEXT_DATA__" type="application/json">(.*)</script>|) do |m|
+        json = JSON.parse($1)
+        # data: 各データが収められたハッシュ
+        data = json["props"]["pageProps"]["__APOLLO_STATE__"]
+        # work: この作品のデータ
+        work = data["Work:#{json["query"]["workId"]}"]
+        # まずTOCを処理する
+        toc = work["tableOfContents"]
+        # workのTOCはTableOfContentsChapterの参照の配列となっているので、それを解決する
+        toc.map! {|v| data[v["__ref"]]}
+        # TableOfContentsChapterにはChapterと各話の配列があるのでそれを取り出し
+        toc.map! {|v| [v["chapter"], v["episodeUnions"]]}
+        # Chapterと各話を一つの配列にフラットにし
+        toc.flatten!
+        # Chapterが使われていない場合にあるnilを排除し
+        toc.compact!
+        # Chapterと各話は参照なので、それを解決し
+        toc.map! {|v| data[v["__ref"]]}
+        # 必要な属性値を取り出して「;」でつないでまとめる
+        # __typename: ChapterかEpisodeかの判別用
+        # level: Chapterにあり1か2かでchapterかsubchapterか判別する
+        # id: Episodeならindex値として必要。Chapterなら必要ないが処理の簡略化のため付加している
+        # publishedAt: Episodeにありsubupdateとして利用する
+        # title: Chapter、Episode共にタイトルとなる
+        # 最後のtitle以外で「;」を含む事は無いはず
+        toc_attr = %w(__typename level id publishedAt title)
+        toc.map! {|v| v.slice(*toc_attr).values.join(";")}
+        # 続いてworkの著者を処理する
+        # 著者の参照から表示用の名前 activityName を取得する
+        work["author"] = data[work["author"]["__ref"]]["activityName"]
+        # alternateAuthorName がある場合は、それも使う。
+        work["author"] = work["alternateAuthorName"] + "／" + work["author"] if work["alternateAuthorName"]
+        # あらすじの改行を<br>に変換し、正規表現を単純化する。<br>はnarourb側で再変換される
+        work["introduction"].gsub!("\n", "<br>")
+        # workからTOC以外に利用する属性を列挙している
+        work_attr = %w(author title serialStatus publicEpisodeCount publishedAt
+            editedAt lastEpisodePublishedAt totalCharacterCount introduction)
+        # HTMLコメントの開始、前処理済みか検知するためのmagicword、
+        # TOC以外のworkの利用する属性値、TOC、HTMLコメントの終了を生成し
+        str = ["<!---", magicword,
+          work.slice(*work_attr).map {|v| v.join("::")},
+          toc, "--->"].join("\n")
+        # 元のページデータに挿入する。デバッグ時用に元々のデータはすべて残す。
+        source.insert(m.begin(0), str)
+        # 元々のデータは基本必要ないのでreplaceを使えば元々のデータはすべて消える。
+        #source.replace(str)
+      end
+    end
+    nil
 
 # ------------------------------------------------------------
 # 書籍情報取得設定
-title: &title |-
-  <h1 id="workTitle"><a href=".+?">(?<title>.+?)</a></h1>
-author: |-
-  (?:<span class="activityName" itemprop="author">(?<author>.+?)</span>)|(?:<span class="screenName.*?">(?<author>.+?)</span>)
-story: &story |-
-  <p id="introduction" class="ui-truncateTextButton js-work-introduction">(?<story>.+?)(?:[\n ]*?</span>|[\n ]*?</p>)
+title: &title
+  - *code
+  - ^title::(?<title>.+?)$
+author:
+  - ^author::(?<author>.+?)$
+story: &story
+  - ^introduction::(?<story>.+?)$
 
 # ------------------------------------------------------------
 # 目次取得設定
 toc_url: \\k<top_url>/works/\\k<ncode>
-subtitles: |-2
-            (?:<li class="widget-toc-chapter widget-toc-level1.*?">
-              <span>(?<chapter>.+?)</span>
-            </li>
-            )?(?:<li class="widget-toc-chapter widget-toc-level2.*?">
-              <span>(?<subchapter>.+?)</span>
-            </li>
-            )?<li class="widget-toc-episode">
-              <a href="(?<href>/works/\d+/episodes/(?<index>\d+))".*?>
-                <span class="widget-toc-episode-titleLabel.*?">(?<subtitle>.+?)</span>
-                <time class="widget-toc-episode-datePublished" datetime="(?<subupdate>.+?)">.+?</time>
-              </a>
-            </li>
+subtitles:
+  - *code
+  - (?x)
+    ^(?:Chapter;1;\d+;(?<chapter>.+?)\n)?
+    (?:Chapter;2;\d+;(?<subchapter>.+?)\n)?
+    Episode;(?<index>\d+);(?<subupdate>.+?);(?<subtitle>.+?)$
+href: /works/\\k<ncode>/episodes/\\k<index>
 
 # ------------------------------------------------------------
 # 本文取得設定
@@ -53,29 +107,28 @@ novel_info_url: \\k<toc_url>
 t: *title
 
 # novel_type 小説種別
-nt: '<dt><span>執筆状況</span></dt>\n *?<dd>(?<novel_type>.+?)</dd>'
+nt: ^serialStatus::(?<novel_type>.+?)$
 novel_type_string:
-  連載中: 1
-  完結済: 3
+  RUNNING: 1
+  COMPLETED: 3
 
 # general_all_no 掲載話数
-ga: '<dt><span>エピソード</span></dt>\n *?<dd>(?<general_all_no>\d+)話</dd>'
+ga: ^publicEpisodeCount::(?<general_all_no>.+?)$
 
 # story あらすじ
 s: *story
 
 # general_firstup 初回掲載日
-gf: '<dt><span>公開日</span></dt>\n *?<dd><time itemprop="datePublished" datetime="(?<general_firstup>.+?)">.+?</time>'
+gf: ^publishedAt::(?<general_firstup>.+?)$
 
-# novelupdated_at 小説の更新時刻。最終掲載日で代用
-nu: '<dt><span>最終更新日</span></dt>\n *?<dd><time itemprop="dateModified" datetime="(?<novelupdated_at>.+?)">.+?</time>'
+# novelupdated_at 小説の更新時刻
+nu: ^editedAt::(?<novelupdated_at>.+?)$
 
 # general_lastup 最新話掲載日
-gl: null
+gl: ^lastEpisodePublishedAt::(?<general_lastup>.+?)$
 
 # writer 作者名
-w: |-
-  (?:<span class="activityName" itemprop="author">(?<writer>.+?)</span>)|(?:<span class="screenName.*?">(?<writer>.+?)</span>)
+w: ^author::(?<writer>.+?)$
 
 # length 文字数
-l: '<dt><span>総文字数</span></dt>\n *?<dd>(?<length>.+?)文字</dd>'
+l: ^totalCharacterCount::(?<length>.+?)$

data/webnovel/ncode.syosetu.com.yaml

@@ -17,7 +17,7 @@ version: 2.0
 toc_url: https://\\k<domain>/\\k<ncode>/
 subtitles: |-
   (?:<div class="chapter_title">(?<chapter>.+?)</div>
-   
+  
   )?<dl class="novel_sublist2">
   <dd class="subtitle">
   <a href="(?<href>/.+?/(?<index>\d+?)/)">(?<subtitle>.+?)</a>
@@ -25,6 +25,10 @@ subtitles: |-
   <dt class="long_update">
   (?<subdate>.+?)(?:<span title="(?<subupdate>.+?) 改稿">（<u>改</u>）</span>)?</dt>
   </dl>
+next_toc: <a href="/(?<next_page>[^"]+)" class="novelview_pager-next">
+next_url: https://\\k<domain>/\\k<next_page>
+# 最大のページ数を得る。固定の数字でも可。
+toc_page_max: <a href="/[^"]+p=(?<toc_page_max>\d+)" class="novelview_pager-last">
 
 # ------------------------------------------------------------
 # 本文取得設定

data/webnovel/novel18.syosetu.com.yaml

@@ -22,7 +22,7 @@ version: 2.0
 toc_url: https://\\k<domain>/\\k<ncode>/
 subtitles: |-
   (?:<div class="chapter_title">(?<chapter>.+?)</div>
-   
+  
   )?<dl class="novel_sublist2">
   <dd class="subtitle">
   <a href="(?<href>/.+?/(?<index>\d+?)/)">(?<subtitle>.+?)</a>
@@ -30,6 +30,10 @@ subtitles: |-
   <dt class="long_update">
   (?<subdate>.+?)(?:<span title="(?<subupdate>.+?) 改稿">（<u>改</u>）</span>)?</dt>
   </dl>
+next_toc: <a href="/(?<next_page>[^"]+)" class="novelview_pager-next">
+next_url: https://\\k<domain>/\\k<next_page>
+# 最大のページ数を得る。固定の数字でも可。
+toc_page_max: <a href="/[^"]+p=(?<toc_page_max>\d+)" class="novelview_pager-last">
 
 # ------------------------------------------------------------
 # 本文取得設定

metadata

@@ -1,14 +1,14 @@
 --- !ruby/object:Gem::Specification
 name: narou
 version: !ruby/object:Gem::Version
-  version: 3.8.2
+  version: 3.9.0
 platform: ruby
 authors:
 - whiteleaf7
 autorequire:
 bindir: bin
 cert_chain: []
-date: 2022-09-10 00:00:00.000000000 Z
+date: 2024-04-02 00:00:00.000000000 Z
 dependencies:
 - !ruby/object:Gem::Dependency
   name: termcolorlight
@@ -570,6 +570,7 @@ files:
 - lib/novelsetting.rb
 - lib/progressbar.rb
 - lib/sitesetting.rb
+- lib/sitesettinghandler.rb
 - lib/template.rb
 - lib/version.rb
 - lib/web/all.rb
@@ -709,10 +710,13 @@ metadata: {}
 post_install_message: |
   ************************************************************
 
-  3.8.2: 2022/09/10
+  3.9.0: 2024-04-02
   -----------------
   #### 修正内容
-  - フォルダが存在しない場合に自動で作成する様に修正
+  - 小説家になろうの目次修正に対応
+  - カクヨムの目次修正に対応
+
+  thanks for contributors: @topstone, @rogenobl, @happynow, @etg-lt
 
   ************************************************************
 rdoc_options: []
@@ -729,7 +733,7 @@ required_rubygems_version: !ruby/object:Gem::Requirement
     - !ruby/object:Gem::Version
       version: '0'
 requirements: []
-rubygems_version: 3.2.15
+rubygems_version: 3.5.3
 signing_key:
 specification_version: 4
 summary: Narou.rb ― 小説家になろうダウンローダ＆縦書用整形スクリプト