narou 3.2.5.1 → 3.3.0

checksums.yaml

@@ -1,7 +1,7 @@
 ---
 SHA256:
-  metadata.gz: 5d8f4654871a4c05f66192f46ec3eb2db8007200c38a6b8a1fff81b1472a3878
-  data.tar.gz: b6511c48be1cba23130325e94668425175fd93efb649c1b22e999ece36e10437
+  metadata.gz: 5d831317cdab7a1fdd473270ed461b4bde77e78d77f500f8fa2c886e29dfd1b2
+  data.tar.gz: cc641276d0e0df6cdc7cc07ad9ef6d9d55379493c6cda937222469eb5f002a36
 SHA512:
-  metadata.gz: 30a2c1c79e6bab81d10bbd2951f48cd387aad7312bc98c08a1787e058643a3a892e3eecd25f180f6ea7243bd8feb4915435714fcb39c35c0a5b55afbeb6a7bef
-  data.tar.gz: ba867abdf7bbf2f4558f2a59f31f0794d60984ee73240481929c0788c2cd0dac1b16f9fbe322584bd2fdc9649ad33483e307526cf04818c0220e9fcf1675e169
+  metadata.gz: bf42bfb6fcb60532bfd2b1bd34f5bfa70ef98c789e857631bfd61ab43c6e16ba11f859cece97940a0bc92332f8e35c5b9199d1caf75088905d99c6e75c8a61cd
+  data.tar.gz: cd3f64b1da5ddd56553a11581227f1e28d5dca2a2490370688dc163daad503df33075cf37ade6804767d6275fe2cdd94c4f93c7b9d81fa5e59a55c458c98bf59

data/.gitignore

@@ -24,22 +24,19 @@ debug
 trash/
 .ruby-version
 .sass-cache/
-log/
+log/**/*
 misc/
 hotentry/
 replace.txt
 tags
 trace_dump.txt
-
 \#*\#
-
 archive
 commitversion
-
 .test_dot_narou/
 .test_novel_data/
-
 mail_setting.yaml
+.byebug_history
 
 #
 # for gem

data/.haml-lint.yml

@@ -0,0 +1,7 @@
+linters:
+  LineLength:
+    max: 140
+  HtmlAttributes:
+    enabled: false
+  ClassesBeforeIds:
+    EnforcedStyle: 'id'

data/.rubocop.yml

@@ -19,7 +19,10 @@ Metrics/ModuleLength:
   Max: 300
 
 Metrics/AbcSize:
-  Max: 30
+  Max: 40
+
+Metrics/BlockLength:
+  Max: 40
 
 Metrics/BlockNesting:
   Max: 3
@@ -82,9 +85,6 @@ Style/Documentation:
 Style/DoubleNegation:
   Enabled: false
 
-Style/FormatString:
-  EnforcedStyle: percent
-
 # 後置 if/unless を使わないほうがわかりやすい場合もある
 Style/IfUnlessModifier:
   Enabled: false
@@ -216,10 +216,28 @@ Layout/EmptyLinesAroundClassBody:
   Enabled: false
 
 Style/FrozenStringLiteralComment:
-  Enabled: false
+  Enabled: true
 
 Layout/MultilineOperationIndentation:
   Enabled: false
 
 Layout/IndentHeredoc:
+  Enabled: true
+
+Style/NumericPredicate:
+  Enabled: false
+
+Lint/HandleExceptions:
+  Enabled: false
+
+Lint/RescueException:
+  Enabled: false
+
+Lint/EmptyWhen:
+  Enabled: false
+
+Style/FormatStringToken:
+  EnforcedStyle: unannotated
+
+Layout/EmptyLineAfterGuardClause:
   Enabled: false

data/.scss-lint.yml

@@ -0,0 +1,9 @@
+linters:
+  SelectorFormat:
+    enabled: false
+
+  EmptyRule:
+    enabled: false
+
+  PropertySortOrder:
+    enabled: false

data/ChangeLog.md

@@ -1,6 +1,92 @@
 更新履歴 - ChangeLog
 ====================
 
+3.3.0: 2018/09/22
+------------------
+#### 追加機能
+- ダウンロード（や更新）と変換の同時実行が可能になりました
+  + 環境設定の concurrency オプションを有効にすることで使用可能になります
+  + 大規模な変更なので、不安定な恐れあり。使う場合はバックアップを万全に
+  + 有効にすると表示されるログの出力形式が変更されます。CUI では特殊な形式に
+    なり、WEB UIではコンソールが物理的に２つになります。CUI の表示については
+    concurrency.format-queue-style で調整出来ます。詳細は narou s -h を参照
+  + アップデート時の変換を中断した場合に、次回更新時に変換を再試行する機能が
+    concurrency が有効な場合は動きません。これは現時点では仕様です
+
+- ログが保存出来るようになりました
+  + 環境設定 logging オプションを追加しました。有効にすることでほぼすべての
+    ログを保存します
+    * diff や list コマンド、ヘルプなどの、出力が多く表示すること自体が目的の
+      一部コマンドの出力はログには保存しません
+    * ログのフォーマットとしてlogging.format-filename, logging.format-timestamp
+      も追加されています。詳細は narou s -h を参照
+    * concurrency が有効な場合、通常ログと変換ログに分けられます。通常ログの
+      ファイル名が 20180831.txt だった場合、変換ログは 20180831_convert.txt に
+      保存されます(log コマンドで簡単に表示できます)
+  + log コマンドを実装しました。logging オプションで保存されるログを表示する
+    ことが出来ます。tail -f のようなストリーミング機能も付いています。詳細は
+    narou log -h を参照
+    * concurrency で更新と変換を同時実行中は基本的に更新のログだけ表示されるの
+      で、コンソールを分割して片方で narou update を実行して更新ログを表示して
+      もう片方で narou log -ct で変換ログを垂れ流すみたいな使い方を想定
+
+- ダウンロードを中断しても、再開（レジューム）出来るようになりました
+  + download で新規小説をダウンロードしていたのを中断した場合は、updateコマンド
+    で再開出来ます(再開部分は新着扱いになります)
+  + この仕様追加の影響で、今までは新規ダウンロードを中断した場合は(ネットワーク
+    エラーや手動など手段問わず)データベースに登録されなかったのが、登録される
+    様になりました
+  + 中断した小説は変換ができません。update で再開して最後までDLしきってください
+
+- 環境設定に folder-length-limit を追加しました。小説を格納するフォルダ名の長さ
+  制限を設定出来ます。(デフォルトでは50文字)
+  + この設定を変更しても既存小説には影響はありません
+
+- 環境設定に filename-length-limit を追加しました。各話ファイルを保存する際の
+  長さ制限を設定出来ます。(デフォルトでは50文字)
+  + 既存小説のアップデートにも影響が出るので、50文字でも長すぎてエラーが出る
+    場合のみ変更を強く推奨
+
+#### WEB UI
+- コンソールに「全ての履歴を取得」ボタンを追加しました
+  + 普段はリロードしたら直近の履歴以外は表示されませんが(読み込み負荷軽減の為)
+    それを全て再表示する機能です。履歴はログ削除ボタンを押した場合に表示と共に
+    一緒にクリアされます
+- 個別メニューから変換などを実行した際に表示されるサブコンソールを廃止しました
+- 右下にページ上部へスクロールするアイコンを設置
+- 環境設定ページに「サーバを再起動」ボタンを設置
+- Send のサブメニューに「端末の栞データをバックアップ」を追加
+  + device が kindle の時のみ表示
+
+#### 仕様変更
+- 環境設定の update.logging を廃止しました。それに合わせて update コマンドの
+  --log オプションも削除しました。ログの保存は logging に統合されます
+- 更新を中断した場合でも、そこまでの新着に関しては hotentry を生成するように
+  なりました
+- カクヨムの小説を保存する時に格納フォルダにタイトルも含めるように変更しました
+- ノクターンノベルズ、ムーンライトノベルズ、ミッドナイトノベルズの各作品は、
+  掲載サイト名をそれぞれ区別するようになりました。これに合わせて格納先フォルダ
+  もそれぞれのサイトごとに分けられます
+  + すでにダウンロード済みの小説には影響はありません
+- 上記ふたつの仕様変更に関して、以前と同じ設定に戻すには webnovel フォルダ下に
+  設定上書き用のデータを用意することで実現可能です。
+  詳細は http://bit.ly/overwrite_webnovel を参照してください
+
+#### 修正内容
+- カクヨムの作品の完結済みが取得できなくなっていた
+- 完結状態を取得できなかった場合、end タグを勝手に削除しない様に調整
+- 暁の作品の非公開状態が取得できなくなっていた
+- diff コマンドに存在しない小説を指定するとエラーが出ていた
+- convert コマンドに存在しない小説を指定するとエラーが出ていた
+- WEB UI サーバを Ctrl+C で終了時にエラーが出ていた
+- WEB UI で小説を大量に選択し「選択したタグを編集」を実行するとエラーが出ていた
+- 各話DL時にタイムアウトした時にまだエラーが出ていた
+- 特定の小説でファイル名を短くする処理が動いていなかった
+- disable_alphabet_word_to_zenkaku を有効にすると挿絵が正常に埋め込めなくなる
+  場合があった
+- データ書き込み時の安定性向上
+
+
 3.2.5.1: 2018/08/21
 ------------------
 #### 修正内容

data/Gemfile.lock

@@ -1,7 +1,7 @@
 PATH
   remote: .
   specs:
-    narou (3.2.4)
+    narou (3.3.0)
       activesupport (~> 5.2)
       diff-lcs (~> 1.2, >= 1.2.5)
       erubis (~> 2.7)
@@ -17,37 +17,37 @@ PATH
       systemu (~> 2.6, >= 2.6.5)
       termcolorlight (~> 1.0, >= 1.1.1)
       tilt (~> 2.0, >= 2.0.1)
+      unicode-display_width (~> 1.4)
 
 GEM
   remote: https://rubygems.org/
   specs:
-    activesupport (5.2.0)
+    activesupport (5.2.1)
       concurrent-ruby (~> 1.0, >= 1.0.2)
       i18n (>= 0.7, < 2)
       minitest (~> 5.1)
       tzinfo (~> 1.1)
     awesome_print (1.8.0)
-    backports (3.11.3)
-    better_errors (2.3.0)
+    backports (3.11.4)
+    better_errors (2.5.0)
       coderay (>= 1.0.0)
       erubi (>= 1.0.0)
       rack (>= 0.9.0)
-    binding_of_caller (0.7.2)
+    binding_of_caller (0.8.0)
       debug_inspector (>= 0.0.1)
-    byebug (9.1.0)
+    byebug (10.0.2)
     coderay (1.1.2)
     concurrent-ruby (1.0.5)
-    concurrent-ruby (1.0.5-java)
     debug_inspector (0.0.3)
     diff-lcs (1.3)
     docile (1.3.1)
-    erubi (1.6.1)
+    erubi (1.7.1)
     erubis (2.7.0)
-    ffi (1.9.18)
-    ffi (1.9.18-java)
+    ffi (1.9.25)
+    ffi (1.9.25-java)
     haml (4.0.7)
       tilt
-    i18n (1.0.1)
+    i18n (1.1.0)
       concurrent-ruby (~> 1.0)
     json (2.1.0)
     json (2.1.0-java)
@@ -55,51 +55,51 @@ GEM
       mime-types (>= 1.16, < 4)
     memoist (0.11.0)
     method_source (0.9.0)
-    mime-types (3.1)
+    mime-types (3.2.2)
       mime-types-data (~> 3.2015)
-    mime-types-data (3.2016.0521)
+    mime-types-data (3.2018.0812)
     minitest (5.11.3)
     multi_json (1.13.1)
     open_uri_redirections (0.2.1)
     pony (1.12)
       mail (>= 2.0)
-    pry (0.11.1)
+    pry (0.11.3)
       coderay (~> 1.1.0)
       method_source (~> 0.9.0)
-    pry (0.11.1-java)
+    pry (0.11.3-java)
       coderay (~> 1.1.0)
       method_source (~> 0.9.0)
       spoon (~> 0.0)
-    pry-byebug (3.5.0)
-      byebug (~> 9.1)
+    pry-byebug (3.6.0)
+      byebug (~> 10.0)
       pry (~> 0.10)
-    rack (1.6.8)
+    rack (1.6.10)
     rack-protection (1.5.5)
       rack
-    rack-test (1.0.0)
+    rack-test (1.1.0)
       rack (>= 1.0, < 3)
     rb-fsevent (0.10.3)
     rb-inotify (0.9.10)
       ffi (>= 0.5.0, < 2)
-    rspec (3.6.0)
-      rspec-core (~> 3.6.0)
-      rspec-expectations (~> 3.6.0)
-      rspec-mocks (~> 3.6.0)
-    rspec-core (3.6.0)
-      rspec-support (~> 3.6.0)
-    rspec-expectations (3.6.0)
+    rspec (3.8.0)
+      rspec-core (~> 3.8.0)
+      rspec-expectations (~> 3.8.0)
+      rspec-mocks (~> 3.8.0)
+    rspec-core (3.8.0)
+      rspec-support (~> 3.8.0)
+    rspec-expectations (3.8.1)
       diff-lcs (>= 1.2.0, < 2.0)
-      rspec-support (~> 3.6.0)
-    rspec-mocks (3.6.0)
+      rspec-support (~> 3.8.0)
+    rspec-mocks (3.8.0)
       diff-lcs (>= 1.2.0, < 2.0)
-      rspec-support (~> 3.6.0)
-    rspec-retry (0.5.5)
-      rspec-core (> 3.3, < 3.7)
-    rspec-support (3.6.0)
+      rspec-support (~> 3.8.0)
+    rspec-retry (0.6.1)
+      rspec-core (> 3.3)
+    rspec-support (3.8.0)
     rspec_junit_formatter (0.4.1)
       rspec-core (>= 2, < 4, != 2.12.0)
-    rubyzip (1.2.1)
-    sass (3.5.6)
+    rubyzip (1.2.2)
+    sass (3.5.7)
       sass-listen (~> 4.0.0)
     sass-listen (4.0.0)
       rb-fsevent (~> 0.9, >= 0.9.4)
@@ -125,11 +125,11 @@ GEM
     systemu (2.6.5)
     termcolorlight (1.1.1)
     thread_safe (0.3.6)
-    thread_safe (0.3.6-java)
     tilt (2.0.8)
     timecop (0.9.1)
     tzinfo (1.2.5)
       thread_safe (~> 0.1)
+    unicode-display_width (1.4.0)
 
 PLATFORMS
   java

data/README.md

@@ -33,74 +33,90 @@ Narou.rb ― 「小説家になろう」「小説を読もう！」ダウンロ
 更新履歴 - ChangeLog
 --------------------
 
-3.2.5.1: 2018/08/21
-------------------
-#### 修正内容
-- WEB UI の小説リストの幅が、一部項目で極端にでかくなる場合があるのを修正
-
-
-3.2.5: 2018/08/21
-------------------
-#### 追加機能
-- 個別設定に `enable_prolonged_sound_mark_to_dash` を追加
-  + ２つ以上の長音記号を全角ダッシュに置換します
-- 個別設定に `disable_alphabet_word_to_zenkaku` を追加
-  + enable_alphabet_force_zenkaku が false の場合に、8文字未満の英単語を全角に
-    する機能を抑制する。英文中にルビがふってあり、英文ではなく英単語と認識され
-    て全角化されてしまう場合などに使用
-- 環境設定の `convert.copy-to-grouping` に「掲載サイト」毎にまとめる機能を追加
-  (設定が真偽値ではなく文字列(複数)に変更)
-  + deivce: 端末毎にまとめる
-  + site: 掲載サイト毎にまとめる
-  + 設定例: `narou s convert.copy-to-grouping=device,site`
-    - 端末フォルダの中に更に掲載サイトのフォルダが作られる
-- 小説プリセット追加
-  + 異世界転生したけど日本語が通じなかった（なろう版／カクヨム版）
-  + ありふれた職業で世界最強
-
-#### WEB UI 追加機能
-- 「作者コメント表示」機能を追加。まえがき・あとがきだけを一覧化します
-  + 個別メニューからのみアクセス可能
-- 小説リストに「あらすじ」ボタンを追加。初期設定は非表示なので
-  「表示＞表示する項目を設定」から設定してください
-  + あらすじはフィルターの対象外です
-- 小説リストの幅を広げる機能を追加。それに合わせて各項目の幅を微調整しました
-  + 「表示＞小説リストの幅を広げる」から設定
-- 個別メニューの表示スタイルを変更する機能を追加
-  + 「表示＞個別メニューの表示スタイルを選択」から設定
-  + Windows スタイル：
-    メニューが画面外にはみ出そうとしたら、カーソルの上側に表示する
-  + Mac スタイル：
-    メニューが画面外にはみ出そうとしたら、メニューがはみ出ないよう上にずれる
-- 一部のメニュー項目にショートカットキーを追加
-  + 小説リストの幅を広げる : W
-  + 凍結中以外を表示 : Shift+F
-  + 凍結中を表示 : F
-  + 選択した小説のタグを編集 : T
-
-#### 修正内容
-- `auto_join_line` の連結する条件を調整
-  + 次行の行頭が数字だった場合には連結しない
-- 作者名が変更された場合も更新されるように修正
-- ネットワーク接続のタイムアウトでクラッシュするのを修正
-
-
-3.2.4: 2018/07/14
+3.3.0: 2018/09/22
 ------------------
 #### 追加機能
-- WEB UI の Download ボタンに、DL終了後にメールで送信するオプションを追加
+- ダウンロード（や更新）と変換の同時実行が可能になりました
+  + 環境設定の concurrency オプションを有効にすることで使用可能になります
+  + 大規模な変更なので、不安定な恐れあり。使う場合はバックアップを万全に
+  + 有効にすると表示されるログの出力形式が変更されます。CUI では特殊な形式に
+    なり、WEB UIではコンソールが物理的に２つになります。CUI の表示については
+    concurrency.format-queue-style で調整出来ます。詳細は narou s -h を参照
+  + アップデート時の変換を中断した場合に、次回更新時に変換を再試行する機能が
+    concurrency が有効な場合は動きません。これは現時点では仕様です
+
+- ログが保存出来るようになりました
+  + 環境設定 logging オプションを追加しました。有効にすることでほぼすべての
+    ログを保存します
+    * diff や list コマンド、ヘルプなどの、出力が多く表示すること自体が目的の
+      一部コマンドの出力はログには保存しません
+    * ログのフォーマットとしてlogging.format-filename, logging.format-timestamp
+      も追加されています。詳細は narou s -h を参照
+    * concurrency が有効な場合、通常ログと変換ログに分けられます。通常ログの
+      ファイル名が 20180831.txt だった場合、変換ログは 20180831_convert.txt に
+      保存されます(log コマンドで簡単に表示できます)
+  + log コマンドを実装しました。logging オプションで保存されるログを表示する
+    ことが出来ます。tail -f のようなストリーミング機能も付いています。詳細は
+    narou log -h を参照
+    * concurrency で更新と変換を同時実行中は基本的に更新のログだけ表示されるの
+      で、コンソールを分割して片方で narou update を実行して更新ログを表示して
+      もう片方で narou log -ct で変換ログを垂れ流すみたいな使い方を想定
+
+- ダウンロードを中断しても、再開（レジューム）出来るようになりました
+  + download で新規小説をダウンロードしていたのを中断した場合は、updateコマンド
+    で再開出来ます(再開部分は新着扱いになります)
+  + この仕様追加の影響で、今までは新規ダウンロードを中断した場合は(ネットワーク
+    エラーや手動など手段問わず)データベースに登録されなかったのが、登録される
+    様になりました
+  + 中断した小説は変換ができません。update で再開して最後までDLしきってください
+
+- 環境設定に folder-length-limit を追加しました。小説を格納するフォルダ名の長さ
+  制限を設定出来ます。(デフォルトでは50文字)
+  + この設定を変更しても既存小説には影響はありません
+
+- 環境設定に filename-length-limit を追加しました。各話ファイルを保存する際の
+  長さ制限を設定出来ます。(デフォルトでは50文字)
+  + 既存小説のアップデートにも影響が出るので、50文字でも長すぎてエラーが出る
+    場合のみ変更を強く推奨
+
+#### WEB UI
+- コンソールに「全ての履歴を取得」ボタンを追加しました
+  + 普段はリロードしたら直近の履歴以外は表示されませんが(読み込み負荷軽減の為)
+    それを全て再表示する機能です。履歴はログ削除ボタンを押した場合に表示と共に
+    一緒にクリアされます
+- 個別メニューから変換などを実行した際に表示されるサブコンソールを廃止しました
+- 右下にページ上部へスクロールするアイコンを設置
+- 環境設定ページに「サーバを再起動」ボタンを設置
+- Send のサブメニューに「端末の栞データをバックアップ」を追加
+  + device が kindle の時のみ表示
+
+#### 仕様変更
+- 環境設定の update.logging を廃止しました。それに合わせて update コマンドの
+  --log オプションも削除しました。ログの保存は logging に統合されます
+- 更新を中断した場合でも、そこまでの新着に関しては hotentry を生成するように
+  なりました
+- カクヨムの小説を保存する時に格納フォルダにタイトルも含めるように変更しました
+- ノクターンノベルズ、ムーンライトノベルズ、ミッドナイトノベルズの各作品は、
+  掲載サイト名をそれぞれ区別するようになりました。これに合わせて格納先フォルダ
+  もそれぞれのサイトごとに分けられます
+  + すでにダウンロード済みの小説には影響はありません
+- 上記ふたつの仕様変更に関して、以前と同じ設定に戻すには webnovel フォルダ下に
+  設定上書き用のデータを用意することで実現可能です。
+  詳細は http://bit.ly/overwrite_webnovel を参照してください
 
 #### 修正内容
-- enable_inspect が有効だと変換後にエラーが出ていた
-- 分割して変換した場合にあらすじにURLが含まれていると変換結果がおかしくなる
-- カクヨムのあらすじが取得できなくなっていた
-
-
-3.2.3: 2018/05/27
-------------------
-#### 修正内容
-- タイトルに ` が含まれていると変換時にエラーが出ていた
-- Windows でDL用ブックマークレットを動かすとエラーが出ていた
+- カクヨムの作品の完結済みが取得できなくなっていた
+- 完結状態を取得できなかった場合、end タグを勝手に削除しない様に調整
+- 暁の作品の非公開状態が取得できなくなっていた
+- diff コマンドに存在しない小説を指定するとエラーが出ていた
+- convert コマンドに存在しない小説を指定するとエラーが出ていた
+- WEB UI サーバを Ctrl+C で終了時にエラーが出ていた
+- WEB UI で小説を大量に選択し「選択したタグを編集」を実行するとエラーが出ていた
+- 各話DL時にタイムアウトした時にまだエラーが出ていた
+- 特定の小説でファイル名を短くする処理が動いていなかった
+- disable_alphabet_word_to_zenkaku を有効にすると挿絵が正常に埋め込めなくなる
+  場合があった
+- データ書き込み時の安定性向上
 
 ----