qiita_trend 0.4.7 → 0.5.1

checksums.yaml

@@ -1,7 +1,7 @@
 ---
 SHA256:
-  metadata.gz: 0f0ee86709a430ad4746e77fda12993c3d06166dc4c9a41402c9ff8fa36929a5
-  data.tar.gz: d74ac15ab1d63456b775b3792cfab42747f78e88c00bcd204c97386c078e56d6
+  metadata.gz: ad6633f75fafb54ce0bbc8438e3f94ae716ff1001baecac98ba5f141a6d59efd
+  data.tar.gz: a71a9b6fd1901f0031c248d8c8a2624de99dbce2b979d44a2c28ecc8708f3aad
 SHA512:
-  metadata.gz: 69a33d9e13ea5b645db1c111f8bcfaa592332e45054389c0fa4466eb284ffa6511437761412a49cb15e1632eacb2c509170237a8460374a0aa7a07f15017efc8
-  data.tar.gz: 9614b80041a22274d6b317a9350acd7857fceef306f0ce726041e54c4bdd3bf96c90a9a8c154f999d6a7e4c72e2bb167ac3357c660ca4c6274a8ec08074cbf0c
+  metadata.gz: 06426b8b6d6118d52c612aa110c21cf6ce3553d2d1f95c1eb7c24440834c0be93aedd5144ec7d770ce03e2fcee3d83cfc19a6105ddc74902e981bbd9170ffb50
+  data.tar.gz: 171a7c15b21baed1f98ee3ab328d310908ce94033d7c64cc8a1bbe8c6ee7f5b37688077364852e5c90347885d6a1659a37a5a2ccc332c1e796716f5c9faa4640

data/Gemfile.lock

@@ -1,7 +1,7 @@
 PATH
   remote: .
   specs:
-    qiita_trend (0.4.7)
+    qiita_trend (0.5.1)
       mechanize (~> 2.7)
       nokogiri (~> 1.11)
 
@@ -38,12 +38,10 @@ GEM
     mime-types (3.3.1)
       mime-types-data (~> 3.2015)
     mime-types-data (3.2021.0225)
-    mini_portile2 (2.5.0)
     net-http-digest_auth (1.4.1)
     net-http-persistent (4.0.1)
       connection_pool (~> 2.2)
     nokogiri (1.11.2)
-      mini_portile2 (~> 2.5.0)
       racc (~> 1.4)
     parallel (1.20.1)
     parser (3.0.1.0)

data/README.md

@@ -8,10 +8,10 @@ Qiitaのトレンドを10秒で取得することができます
 
 ## 概要
 
-- [Qiita](https://qiita.com/)のTOPページをスクレイピングしDaily、Weekly、Monthlyのトレンドを取得します
+- [Qiita](https://qiita.com/)のTOPページをスクレイピングしTOPページに表示されているトレンドを取得します
   - [Qiita](https://qiita.com/)のAPIにトレンドを取得する方法がないため
-- トレンドはDaily、Weekly、Monthlyそれぞれを日付と更新時間（5時と17時）の組み合わせごとにキャッシュを行います
-- Weekly、Monthlyに関してはQiitaにログインしないと取得できないためユーザー名とパスワード設定する必要があります（Dailyに関しては何も設定しなくても取得できます）
+- トレンドは「通常のもの（通常トレンド）」と「ログインした時に表示されるユーザーのトレンド（ユーザートレンド）」のそれぞれを日付と更新時間（5時と17時）の組み合わせごとにキャッシュを行います
+- ユーザートレンドに関してはQiitaにログインしないと取得できないためユーザー名とパスワード設定する必要があります（通常トレンドに関しては何も設定しなくても取得できます）
 - 過去のトレンドを取得することができます（**あくまでもキャッシュファイルから復元するためキャッシュファイルの無い過去のトレンドは取得することができません**）
 - いいね数は性質上取得した時の時間に依存します。どうしても現在時刻のいいね数が欲しい場合はキャシュファイルを手動で削除してもう一度実行してください
 
@@ -27,7 +27,7 @@ Qiitaのトレンドを10秒で取得することができます
 $ gem install qiita_trend
 ```
 
-### QiitaのDailyのトレンドを10秒で取得する
+### Qiitaの通常トレンドを10秒で取得する
 
 ターミナルで`ruby -r qiita_trend -e "pp QiitaTrend::Trend.new.items"`を実行することでQiitaのトレンドを10秒（**gem install qiita_trendも含めて**）で取得できます  
 
@@ -53,7 +53,7 @@ $ ruby -r qiita_trend -e "pp QiitaTrend::Trend.new.items"
   ...
 ```
 
-### Dailyのトレンドの簡易表示
+### 通常トレンドの簡易表示
 
 index + タイトル名 + いいね数 + ユーザー名
 
@@ -68,7 +68,7 @@ $ ruby -r qiita_trend -e "QiitaTrend::Trend.new.items.each_with_index {|t, i| pu
 [5]畳み込みニューラルネットワークは何を見ているか(69) - okn-yu
 ```
 
-### Dailyのトレンドのタイトル一覧
+### 通常トレンドのタイトル一覧
 
 ```shell
 $ ruby -r qiita_trend -e "QiitaTrend::Trend.new.items.each {|t| puts t['title']}"
@@ -81,7 +81,7 @@ KAGGLEでどこから手を付けていいか分からず学ぶことが多す
 畳み込みニューラルネットワークは何を見ているか
 ```
 
-### Dailyのトレンドのうち`new`がついているものをブラウザで一括で開く
+### 通常トレンドのうち`new`がついているものをブラウザで一括で開く
 
 ```shell
 $ ruby -r qiita_trend -e "QiitaTrend::Trend.new.new_items.each {|t| system('open ' + t['article'])}"
@@ -97,21 +97,21 @@ gem 'qiita_trend'
 
 Gemfileに追加したら`bundle install`してください
 
-### Dailyのトレンドを取得する
+### 通常トレンドを取得する
 
 ```ruby
-daily_trend = QiitaTrend::Trend.new
+normal_trend = QiitaTrend::Trend.new
 
-# Dailyのトレンドを全て取得する
-p daily_trend.items
+# 通常トレンドを全て取得する
+p normal_trend.items
 
-# DailyのトレンドでNEWのものだけを取得する
-p daily_trend.new_items
+# 通常トレンドでNEWのものだけを取得する
+p normal_trend.new_items
 ```
 
-### Weekly、Monthlyのトレンドを取得する
+### ユーザートレンドを取得する
 
-WeeklyとMonthlyのトレンドを取得する時はQiitaにログインしている必要があるため、ログイン出来るユーザーとパスワードの設定が必要です
+ユーザートレンドを取得する時はQiitaにログインしている必要があるため、ログイン出来るユーザーとパスワードの設定が必要です
 ログインできないユーザー名とパスワードを指定している時は`LoginFailureError`の例外が発生します
 
 ```ruby
@@ -121,34 +121,35 @@ QiitaTrend.configure do |config|
   config.password = 'パスワード'
 end
 
-# Weeklyの全てのトレンドとNEWのものだけを取得
-weekly_trend = QiitaTrend::Trend.new(QiitaTrend::TrendType::WEEKLY)
-p weekly_trend.items
-p weekly_trend.new_items
+# ユーザーのレンドを取得
+personal_trend = QiitaTrend::Trend.new(QiitaTrend::TrendType::PERSONAL)
+p personal_trend.items
+```
+
+ログインするユーザーとパスワードは環境変数に設定することもできます
 
-# Monthlyの全てのトレンドとNEWのものだけを取得
-monthly_trend = QiitaTrend::Trend.new(QiitaTrend::TrendType::MONTHLY)
-p monthly_trend.items
-p monthly_trend.new_items
+```
+export QIITA_TREND_USER_NAME='ユーザー名'
+export QIITA_TREND_PASSWORD='パスワード'
 ```
 
 ### キャッシュファイルからトレンドを取得する
 
 キャッシュファイルが存在しない場合は`NotExistsCacheError`の例外が発生します
-WeeklyもMonthlyの取得方法もDailyと同様です
+ユーザートレンドの取得方法も通常トレンドと同様です
 
 ```ruby
-# 2019年8月8日5時更新分のDailyのトレンドを取得する
-daily_trend_05 = QiitaTrend::Trend.new(QiitaTrend::TrendType::DAILY, '2019080805')
+# 2019年8月8日5時更新分の通常トレンドを取得する
+normal_trend_05 = QiitaTrend::Trend.new(QiitaTrend::TrendType::NORMAL, '2019080805')
 
-p daily_trend_05.items
-p daily_trend_05.new_items
+p normal_trend_05.items
+p normal_trend_05.new_items
 
-# 2019年8月8日17時更新分のDailyのトレンドを取得する
-daily_trend_17 = QiitaTrend::Trend.new(QiitaTrend::TrendType::DAILY, '2019080817')
+# 2019年8月8日17時更新分のnormalのトレンドを取得する
+normal_trend_17 = QiitaTrend::Trend.new(QiitaTrend::TrendType::NORMAL, '2019080817')
 
-p daily_trend_17.items
-p daily_trend_17.new_items
+p normal_trend_17.items
+p normal_trend_17.new_items
 ```
 
 ### itemsメソッド、new_itemsメソッドについて
@@ -225,7 +226,7 @@ irb(main):001:0> pp QiitaTrend::Trend.new.items[0]
     <tr>
       <td>is_new_arrival</td>
       <td>「NEW」のついている記事か</td>
-      <td>TrueかFalseが入ります</td>
+      <td>TrueかFalseが入ります。ログインした時に表示されるユーザーのトレンドに関してはnilになります</td>
     </tr>
   </tbody>
 </table>
@@ -235,9 +236,8 @@ irb(main):001:0> pp QiitaTrend::Trend.new.items[0]
 キャッシュファイルはデフォルトだと`ユーザーのHOMEディレクトリ/qiita_cache/`に出力されます
 
 ```
-/Users/dodonki1223/qiita_cache/2019080205_daily.html
-/Users/dodonki1223/qiita_cache/2019080205_weekly
-/Users/dodonki1223/qiita_cache/2019080205_monthly.html
+/Users/dodonki1223/qiita_cache/2019080205_normal.html
+/Users/dodonki1223/qiita_cache/2019080205_personal
 ```
  
 プログラムで下記のように追記してください
@@ -251,6 +251,12 @@ QiitaTrend.configure do |config|
 end
 ```
 
+キャッシュファイルの出力先は環境変数に設定することもできます
+
+```
+QIITA_TREND_CACHE_DIR='/Users/dodonki1223/hoge/'
+```
+
 ## 注意
 
 このgemは勉強用で作成したものでソースにはアンチパターンなコメント（処理を説明するようなコメントなど）が書かれています。そこはご容赦ください

data/lib/qiita_trend/configuration.rb

@@ -23,9 +23,9 @@ module QiitaTrend
     # コンストラクタ
     # Configurationクラスのインスタンスを返します
     def initialize
-      @user_name = nil
-      @password = nil
-      @cache_directory = nil
+      @user_name = ENV['QIITA_TREND_USER_NAME']
+      @password = ENV['QIITA_TREND_PASSWORD']
+      @cache_directory = ENV['QIITA_TREND_CACHE_DIR']
     end
   end
 end

data/lib/qiita_trend/page.rb

@@ -23,7 +23,7 @@ module QiitaTrend
     # @param [String] date 「YYYYMMDD05」,「YYYYMMDD17」形式のどちらか
     # @raise [LoginFailureError] ログインに失敗した時に発生する
     # @raise [NotExistsCacheError] 存在しないキャッシュファイルを指定した時に発生する
-    def initialize(trend_type = TrendType::DAILY, date = nil)
+    def initialize(trend_type = TrendType::NORMAL, date = nil)
       @target = Target.new(trend_type, date)
       save_cache_directory = QiitaTrend.configuration.cache_directory.nil? ? Cache::DEFAULT_CACHE_DIRECTORY : QiitaTrend.configuration.cache_directory
       @cache = Cache.new(target.cache, save_cache_directory)

data/lib/qiita_trend/target.rb

@@ -16,10 +16,10 @@ module QiitaTrend
     #
     # @param [TrendType] trend_type トレンドタイプ
     # @param [String] date 「YYYYMMDD05」,「YYYYMMDD17」形式のどちらか
-    def initialize(trend_type = TrendType::DAILY, date = nil)
+    def initialize(trend_type = TrendType::NORMAL, date = nil)
       @type = trend_type
-      @url = trend_url(trend_type)
-      @need_login = trend_type != TrendType::DAILY
+      @url = trend_url
+      @need_login = need_login?(trend_type)
       @cache = cache_name(trend_type, date)
     end
 
@@ -27,14 +27,17 @@ module QiitaTrend
 
     # トレンドのURLを取得する
     #
-    # @param [TrendType] type トレンドタイプ
     # @return [String] トレンドを取得するQiitaのページURL
-    def trend_url(type)
-      case type
-      when TrendType::DAILY then 'https://qiita.com/'
-      when TrendType::WEEKLY then 'https://qiita.com/?scope=weekly'
-      when TrendType::MONTHLY then 'https://qiita.com/?scope=monthly'
-      end
+    def trend_url
+      Page::QIITA_URI
+    end
+
+    # Qiitaにログインが必要か
+    #
+    # @param [TrendType] trend_type トレンドタイプ
+    # @return [Boolean] True：Qiitaへログインが必要、False：Qiitaへログイン不要
+    def need_login?(trend_type)
+      trend_type != TrendType::NORMAL
     end
 
     # キャッシュ名を取得する

data/lib/qiita_trend/trend.rb

@@ -10,6 +10,7 @@ module QiitaTrend
   class Trend
     # @return [Array] トレンドデータ
     attr_reader :data
+    attr_reader :trend_type
 
     # コンストラクタ
     #
@@ -17,11 +18,13 @@ module QiitaTrend
     # @param [String] date 「YYYYMMDD05」,「YYYYMMDD17」形式のどちらか
     # @raise [LoginFailureError] ログインに失敗した時に発生する
     # @raise [NotExistsCacheError] 存在しないキャッシュファイルを指定した時に発生する
-    def initialize(trend_type = TrendType::DAILY, date = nil)
+    def initialize(trend_type = TrendType::NORMAL, date = nil)
+      @trend_type = trend_type
       page = Page.new(trend_type, date)
       parsed_html = Nokogiri::HTML.parse(page.html)
-      trends_data = JSON.parse(parsed_html.xpath('//script[@data-component-name="NewHomeArticleTrendFeed"]')[0].text)
-      @data = trends_data['trend']['edges']
+      xpath_str = '//script[@data-component-name="HomeIndexPage"]'
+      trends_data = JSON.parse(parsed_html.xpath(xpath_str)[0].text)
+      @data = get_data(trends_data, trend_type)
     end
 
     # Qiitaの対象のトレンドをすべて取得
@@ -43,9 +46,12 @@ module QiitaTrend
     end
 
     # Qiitaの対象のトレンドからNEWのものだけ取得
+    # トレンドタイプがPERSONALの場合はNEWの概念が無いのでnilである
     #
     # @return [Array] Qiitaの対象のトレンドからNEWのものだけ
     def new_items
+      return nil if @trend_type == TrendType::PERSONAL
+
       items.select do |trend|
         trend['is_new_arrival'] == true
       end
@@ -53,6 +59,15 @@ module QiitaTrend
 
     private
 
+    # Qiitaのトレンドのデータを取得する
+    #
+    # @param [Hash] trends_data トレンドデータ
+    # @param [TrendType] trend_type トレンドタイプ
+    # @return [Array] トレンドタイプによるトレンドデータ
+    def get_data(trends_data, trend_type)
+      trend_type == TrendType::PERSONAL ? trends_data['personalizedFeed']['personalizedFeed']['edges'] : trends_data['trend']['trend']['edges']
+    end
+
     # ユーザーの画像のURLを取得する
     # URLデコードしクエリーパラメータを排除する
     #

data/lib/qiita_trend/trend_type.rb

@@ -3,11 +3,9 @@
 module QiitaTrend
   # トレンドタイプの機能を提供する
   class TrendType
-    # トレンドタイプ：Daily
-    DAILY = 'daily'
-    # トレンドタイプ：Weekly
-    WEEKLY = 'weekly'
-    # トレンドタイプ：Monthly
-    MONTHLY = 'monthly'
+    # トレンドタイプ：Normal
+    NORMAL = 'normal'
+    # トレンドタイプ：Personal
+    PERSONAL = 'personal'
   end
 end

data/lib/qiita_trend/version.rb

@@ -1,5 +1,5 @@
 # frozen_string_literal: true
 
 module QiitaTrend
-  VERSION = '0.4.7'
+  VERSION = '0.5.1'
 end

metadata

@@ -1,14 +1,14 @@
 --- !ruby/object:Gem::Specification
 name: qiita_trend
 version: !ruby/object:Gem::Version
-  version: 0.4.7
+  version: 0.5.1
 platform: ruby
 authors:
 - dodonki1223
 autorequire: 
 bindir: exe
 cert_chain: []
-date: 2021-04-06 00:00:00.000000000 Z
+date: 2021-12-28 00:00:00.000000000 Z
 dependencies:
 - !ruby/object:Gem::Dependency
   name: mechanize