nicoquery 0.0.1.4 → 0.0.2

data/lib/nicoquery/object_mapper/mylist_rss.rb

@@ -0,0 +1,195 @@
+require "nori"
+
+
+module NicoQuery
+  module ObjectMapper
+    class MylistRSS
+      attr_reader :meta, :items
+      def initialize(xml)
+        parser = Nori.new
+        parsed_xml = parser.parse xml
+        entire = parsed_xml['rss']['channel']
+
+        @meta = Meta.new entire, title_prefix
+        @items = entire['item'].map { |item| Item.new item }
+      end
+
+      def title_prefix
+        "マイリスト"
+      end
+
+      class Meta
+        def initialize(parsed_xml, title_prefix)
+          @title_prefix = title_prefix
+          @hash = parsed_xml
+        end
+
+        def title
+          @hash['title']
+            .scan(/(?<=#{@title_prefix}\s).+(?=\‐ニコニコ動画)/)[0].split(' ')[0]
+            # .force_encoding('utf-8')
+        end
+
+        def url
+          link
+        end
+
+        def link
+          @hash['link']
+        end
+
+        def mylist_id
+          @hash['link'].scan(/(?<=mylist\/)\d{1,}/)[0].to_i
+        end
+
+        def description
+          @hash['description']
+        end
+
+        def publish_date
+          Time.parse @hash['publish_date']
+        end
+
+        def last_build_date
+          Time.parse @hash['lastBuildDate']
+        end
+
+        def creator
+          @hash['dc:creator']
+        end
+      end
+
+      class Item
+
+        # <item>
+        #   <title>【初音ミク】みくみくにしてあげる♪【してやんよ】</title>
+        #   <link>http://www.nicovideo.jp/watch/sm1097445</link>
+        #   <guid isPermaLink="false">tag:nicovideo.jp,2007-09-20:/watch/1190218917</guid>
+        #   <pubDate>Sat, 17 Aug 2013 22:54:20 +0900</pubDate>
+        #   <description><![CDATA[<p class="nico-thumbnail"><img alt="【初音ミク】みくみくにしてあげる♪【してやんよ】" src="http://tn-skr2.smilevideo.jp/smile?i=1097445" width="94" height="70" border="0"/></p><p class="nico-description">おまえら、みっくみくにしてやんよ。歌詞はhttp://ikamo.hp.infoseek.co.jp/mikumiku.txt（9/20 1:55修正）。上げている他のもの→mylist/1450136</p><p class="nico-info"><small><strong class="nico-info-length">1:38</strong>｜<strong class="nico-info-date">2007年09月20日 01：22：02</strong> 投稿</small></p><p class="nico-numbers"><small>再生：<strong class="nico-numbers-view">10,643,217</strong>&nbsp;&#x20;コメント：<strong class="nico-numbers-res">2,726,450</strong>&nbsp;&#x20;マイリスト：<strong class="nico-numbers-mylist">210,310</strong></small></p>]]></description>
+        # </item>
+
+        def initialize(parsed_xml)
+          @hash = parsed_xml
+        end
+
+        def title
+          @hash['title']
+        end
+
+        def video_id
+          (url.scan(/((sm|nm)\d{1,})/).map {|e| e[0]})[0]
+        end
+
+        def url
+          @hash['link']
+        end
+
+        def thread_id
+          @hash['guid'].scan(/(?<=watch\/)\d{1,}$/)[0].to_i
+        end
+
+        def publish_date
+          Time.parse @hash['pubDate']
+        end
+
+        def thumbnail_url
+          description.raw_text.scan(/(?<=src\=\").{1,}(?=\"\swidth)/)[0]
+          $&
+        end
+
+        def view_counter
+          description.raw_text.scan(/(?<=nico-numbers-view\">)[0-9,]{1,}(?=\<\/strong)/)[0].delete(',').to_i
+        end
+
+        def comment_num
+          description.raw_text.scan(/(?<=nico-numbers-res\">)[0-9,]{1,}(?=\<\/strong)/)[0].delete(',').to_i
+        end
+
+        def mylist_counter
+          description.raw_text.scan(/(?<=nico-numbers-mylist\">)[0-9,]{1,}(?=\<\/strong)/)[0].delete(',').to_i
+        end
+
+        def description
+          @_description ||= Description.new @hash['description']
+        end
+
+        def length
+          description.raw_text.scan(/(?<=class\=\"nico\-info\-length\"\>)\d{1,}\:\d{1,2}(?=\<\/strong\>)/)
+          length_string = $&.to_s.split(':')
+          length_string[0].to_i * 60 + length_string[1].to_i
+        end
+
+        class Description
+          attr_reader :raw_text
+
+          def initialize(raw_text)
+            @raw_text = raw_text.to_s
+          end
+
+          def text
+            @raw_text.scan /(?<=class\=\"nico\-description\"\>).{1,}(?=\<\/p\>)/
+            $&
+          end
+
+          def movie_references
+            # is this the high road?
+            text.scan(/((sm|nm)\d{1,})/).map {|e| e[0]}
+          end
+
+          def mylist_references
+            text.scan /(?<=mylist\/)\d{1,}/
+          end
+
+          def community_references
+            text.scan /co\d{1,}/
+          end
+
+          def seiga_references
+            text.scan /im\d{1,}/
+          end
+        end
+      end
+
+      # <?xml version="1.0" encoding="utf-8"?>
+      # <rss version="2.0"
+      #      xmlns:dc="http://purl.org/dc/elements/1.1/"
+      #      xmlns:atom="http://www.w3.org/2005/Atom">
+
+      #   <channel>
+
+      #     <title>マイリスト to_test‐ニコニコ動画</title>
+      #     <link>http://www.nicovideo.jp/mylist/38369702</link>
+      #     <atom:link rel="self" type="application/rss+xml" href="http://www.nicovideo.jp/mylist/38369702?rss=2.0"/>
+      #     <description></description>
+      #     <pubDate>Sat, 17 Aug 2013 22:51:40 +0900</pubDate>
+      #     <lastBuildDate>Sat, 17 Aug 2013 22:51:40 +0900</lastBuildDate>
+      #     <generator>ニコニコ動画</generator>
+      #     <dc:creator>うえおに</dc:creator>
+      #     <language>ja-jp</language>
+      #     <copyright>(c) niwango, inc. All rights reserved.</copyright>
+      #     <docs>http://blogs.law.harvard.edu/tech/rss</docs>
+
+
+      #     <item>
+      #       <title>【初音ミク】みくみくにしてあげる♪【してやんよ】</title>
+      #       <link>http://www.nicovideo.jp/watch/sm1097445</link>
+      #       <guid isPermaLink="false">tag:nicovideo.jp,2007-09-20:/watch/1190218917</guid>
+      #       <pubDate>Sat, 17 Aug 2013 22:54:20 +0900</pubDate>
+      #       <description><![CDATA[<p class="nico-thumbnail"><img alt="【初音ミク】みくみくにしてあげる♪【してやんよ】" src="http://tn-skr2.smilevideo.jp/smile?i=1097445" width="94" height="70" border="0"/></p><p class="nico-description">おまえら、みっくみくにしてやんよ。歌詞はhttp://ikamo.hp.infoseek.co.jp/mikumiku.txt（9/20 1:55修正）。上げている他のもの→mylist/1450136</p><p class="nico-info"><small><strong class="nico-info-length">1:38</strong>｜<strong class="nico-info-date">2007年09月20日 01：22：02</strong> 投稿</small></p>]]></description>
+      #     </item>
+
+      #     <item>
+      #       <title>新・豪血寺一族 -煩悩解放 - レッツゴー！陰陽師</title>
+      #       <link>http://www.nicovideo.jp/watch/sm9</link>
+      #       <guid isPermaLink="false">tag:nicovideo.jp,2007-03-06:/watch/1173108780</guid>
+      #       <pubDate>Sat, 17 Aug 2013 22:52:21 +0900</pubDate>
+      #       <description><![CDATA[<p class="nico-thumbnail"><img alt="新・豪血寺一族 -煩悩解放 - レッツゴー！陰陽師" src="http://tn-skr2.smilevideo.jp/smile?i=9" width="94" height="70" border="0"/></p><p class="nico-description">レッツゴー！陰陽師（フルコーラスバージョン）</p><p class="nico-info"><small><strong class="nico-info-length">5:19</strong>｜<strong class="nico-info-date">2007年03月06日 00：33：00</strong> 投稿</small></p>]]></description>
+      #     </item>
+
+      #   </channel>
+
+      # </rss>
+    end
+  end
+end

data/lib/nicoquery/object_mapper/tag_search_rss.rb

@@ -0,0 +1,43 @@
+require "nicoquery/object_mapper/mylist_rss"
+require "nori"
+
+
+module NicoQuery
+  module ObjectMapper
+    class TagSearchRss < MylistRSS
+      def title_prefix
+        "タグ";
+      end
+    end
+  end
+end
+# <?xml version="1.0" encoding="utf-8"?>
+# <rss version="2.0"
+#      xmlns:atom="http://www.w3.org/2005/Atom">
+
+#   <channel>
+#     <title>タグ VOICEROID+_東北ずん子‐ニコニコ動画</title>
+#     <link>http://www.nicovideo.jp/tag/VOICEROID%2B_%E6%9D%B1%E5%8C%97%E3%81%9A%E3%82%93%E5%AD%90</link>
+#     <atom:link rel="self" type="application/rss+xml" href="http://www.nicovideo.jp/tag/VOICEROID%2B_%E6%9D%B1%E5%8C%97%E3%81%9A%E3%82%93%E5%AD%90?rss=2.0"/>
+#     <description>タグ「VOICEROID+_東北ずん子」が付けられた動画 (全 299 件)</description>
+#     <pubDate>Sun, 18 Aug 2013 19:15:24 +0900</pubDate>
+#     <lastBuildDate>Sun, 18 Aug 2013 19:15:24 +0900</lastBuildDate>
+#     <generator>ニコニコ動画</generator>
+#     <language>ja-jp</language>
+#     <copyright>(c) niwango, inc. All rights reserved.</copyright>
+#     <docs>http://blogs.law.harvard.edu/tech/rss</docs>
+
+#     <item>
+#       <title>【Minecraft】GREEN&#039;S CRAFT Part1【ゆっくり&amp;amp;VOICEROID+実況】</title>
+#       <link>http://www.nicovideo.jp/watch/sm21615389</link>
+#       <guid isPermaLink="false">tag:nicovideo.jp,2013-08-17:/watch/sm21615389</guid>
+#       <pubDate>Sat, 17 Aug 2013 19:48:21 +0900</pubDate>
+#       <description><![CDATA[
+#       <p class="nico-thumbnail"><img alt="【Minecraft】GREEN&#039;S CRAFT Part1【ゆっくり&amp;amp;VOICEROID+実況】" src="http://tn-skr2.smilevideo.jp/smile?i=21615389" width="94" height="70" border="0"/></p>
+#       <p class="nico-description">お久しぶりです。周りの人にも感化され、ようやく新シリーズに踏み込むことができました。勢いだけで始めてしまったため今後どうなるか自分でも予想できませんが前作同様ひっそりまったり、そして少しでも長く続けられるように頑張りますのでまたお付き合いいただけると嬉しいです（*´ヮ｀*）それでは、よろしくお願いします。使用MOD1.Opti Fine2.MinecraftIM3.PlayerFormLittleMaid4.Audiotori5.littleMaidMob6.Zabuton＋りばいあ製MOD×2次→まだシリーズまとめ→mylist/38367203まったりクラフター生活シリーズ→mylist/29017292他に作ったもの→mylist/29022355twitter⇒http://twitter.com/raichi_Jコミュco1590050『PHANTASY STAR ONLINE 2』公式サイトhttp://pso2.jp/</p>
+#       <p class="nico-info"><small><strong class="nico-info-length">12:33</strong>｜<strong class="nico-info-date">2013年08月17日 19：48：21</strong> 投稿</small></p>
+#       ]]></description>
+#     </item>
+#   </channel>
+
+# </rss>

data/lib/nicoquery/version.rb

@@ -1,3 +1,3 @@
 module NicoQuery
-  VERSION = "0.0.1.4"
+  VERSION = "0.0.2"
 end

data/lib/nicoquery.rb

@@ -1,5 +1,7 @@
 require "nicoquery/version"
 require "nicoquery/crawler"
+require "nicoquery/object/mylist"
+require "nicoquery/object/movie"
 
 
 module NicoQuery
@@ -7,6 +9,15 @@ module NicoQuery
     NicoQuery::Crawler::TagSearch.execute(tag: tag, sort: sort, order: order, &block)
   end
 
+  def mylist(mylist_id)
+    NicoQuery::Object::Mylist.new mylist_id
+  end
+
+  def movie(video_id)
+    NicoQuery::Object::Movie.new video_id
+  end
+
   module_function :tag_search
+  module_function :mylist
+  module_function :movie
 end
-;

data/spec/api/getthumbinfo_spec.rb

@@ -0,0 +1,15 @@
+require 'nicoquery/api/getthumbinfo'
+
+
+describe "getthumbinfo" do
+  before do
+    @instance = NicoQuery::Api::GetThumbInfo.new 'sm9'
+  end
+
+  describe "uri" do
+    subject { @instance.uri }
+    specify {
+      expect(subject).to match /http:\/\/ext\.nicovideo\.jp\/api\/getthumbinfo\/(sm|nm)\d/
+    }
+  end
+end

data/spec/api/mylist_rss_spec.rb

@@ -0,0 +1,16 @@
+require 'nicoquery/api/mylist_rss'
+
+
+describe "mylist_rss" do
+  before do
+    @instance = NicoQuery::Api::MylistRSS.new 18266317
+  end
+
+  describe "uri" do
+    subject { @instance.uri }
+
+    specify { expect(subject).to match /http:\/\/www\.nicovideo\.jp\/mylist/ }
+    specify { expect(subject).to match /18266317/ }
+    specify { expect(subject).to match /rss\=2\.0/ }
+  end
+end

data/spec/api/spec_helper.rb

@@ -0,0 +1,17 @@
+# This file was generated by the `rspec --init` command. Conventionally, all
+# specs live under a `spec` directory, which RSpec adds to the `$LOAD_PATH`.
+# Require this file using `require "spec_helper"` to ensure that it is only
+# loaded once.
+#
+# See http://rubydoc.info/gems/rspec-core/RSpec/Core/Configuration
+RSpec.configure do |config|
+  config.treat_symbols_as_metadata_keys_with_true_values = true
+  config.run_all_when_everything_filtered = true
+  config.filter_run :focus
+
+  # Run specs in random order to surface order dependencies. If you find an
+  # order dependency and want to debug it, you can fix the order by providing
+  # the seed, which is printed after each run.
+  #     --seed 1234
+  config.order = 'random'
+end

data/spec/api/tag_search_spec.rb

@@ -0,0 +1,22 @@
+require 'nicoquery/api/tag_search'
+
+
+describe "tag_search" do
+  before do
+    @instance = NicoQuery::Api::TagSearch.new  tag: 'ゆっくり実況プレイ',
+                                                sort: :published_at,
+                                                order: :asc,
+                                                page: 1
+  end
+
+  describe "uri" do
+    subject { @instance.uri }
+
+    specify { expect(subject).to match /http:\/\/www\.nicovideo\.jp\/tag/ }
+
+    specify { expect(subject).to match /(sort=(v|r|m|f|l)){0,}/ }
+    specify { expect(subject).to match /(order=(a|d)){0,}/ }
+    specify { expect(subject).to match /(page=\d){1,}/ }
+    specify { expect(subject).to match /rss\=2\.0/ }
+  end
+end

data/spec/api/video_array_spec.rb

@@ -0,0 +1,15 @@
+require 'nicoquery/api/video_array'
+
+
+describe "VideoArray" do
+  before do
+    @instance = NicoQuery::Api::VideoArray.new ['sm9', 'sm14']
+  end
+
+  describe "uri" do
+    subject { @instance.uri }
+    specify {
+      expect(subject).to match /http:\/\/i\.nicovideo\.jp\/v3\/video\.array\?v=((sm\d|nm\d),{0,}){1,}/
+    }
+  end
+end

data/spec/crawler/tag_search_spec.rb

@@ -1,16 +1,16 @@
-require "nicoquery"
+require "nicoquery/crawler/tag_search"
 
 
-describe "NicoQuery::Crawler" do
+describe "NicoQuery:Crawler" do
   describe "tag_search" do
     before do
       counter = 0
       @acquired_movies = []
 
-      NicoQuery.tag_search( tag: "ゆっくり実況プレイ",
-                              sort: :published_at,
-                              order: :asc
-                            ) do |result|
+      NicoQuery::Crawler::TagSearch.execute( tag: "ゆっくり実況プレイ",
+                                             sort: :published_at,
+                                             order: :asc
+                                           ) do |result|
         counter += 1
         @acquired_movies.push result
         if counter >= 50 then :break else :continue end

data/spec/fixture/tag_search_item.rb

@@ -0,0 +1,51 @@
+module Fixture
+  def self.tag_search_item_xml_1
+    """
+      <item>
+        <title>[ゆっくり実況]どうぶつ達の森[最終日]</title>
+        <link>http://www.nicovideo.jp/watch/sm21441922</link>
+        <guid isPermaLink=\"false\">tag:nicovideo.jp,2013-07-26:/watch/sm21441922</guid>
+        <pubDate>Fri, 26 Jul 2013 10:32:46 +0900</pubDate>
+        <description><![CDATA[
+        <p class=\"nico-thumbnail\"><img alt=\"[ゆっくり実況]どうぶつ達の森[最終日]\" src=\"http://tn-skr3.smilevideo.jp/smile?i=21441922\" width=\"94\" height=\"70\" border=\"0\"/></p>
+        <p class=\"nico-description\">おもらし製作中のゲーム進行率：６％追記：最後の最後でスタッフロール間違えるとか死ねばいいよほんとこのうｐぬし八日目→sm21386536　　どうぶつ→mylist/37262141いままでの→mylist/31786817</p>
+        <p class=\"nico-info\"><small><strong class=\"nico-info-length\">18:08</strong>｜<strong class=\"nico-info-date\">2013年07月26日 10：32：46</strong> 投稿</small></p>
+        ]]></description>
+      </item>
+    """
+  end
+
+  # コミュニティへの参照あり
+  def self.tag_search_item_xml_2
+    """
+      <item>
+        <title>【COD:BO2】戦場で空気になる動画 Part7</title>
+        <link>http://www.nicovideo.jp/watch/sm21452374</link>
+        <guid isPermaLink=\"false\">tag:nicovideo.jp,2013-07-27:/watch/sm21452374</guid>
+        <pubDate>Sat, 27 Jul 2013 19:25:33 +0900</pubDate>
+        <description><![CDATA[
+        <p class=\"nico-thumbnail\"><img alt=\"【COD:BO2】戦場で空気になる動画 Part7\" src=\"http://tn-skr3.smilevideo.jp/smile?i=21452374\" width=\"94\" height=\"70\" border=\"0\"/></p>
+        <p class=\"nico-description\">無駄な殺生をせず戦場で生き延びます。・すべて生放送で撮影しており、おまけ以外はフレンドとプレイしていません。・おまけの隠れ場所は私が考えました。戦場で空気になる動画BGM集 : mylist/37475771コブのコミュ : co519582Twitter : @KOBUKURO__LOVE戦場で空気になる動画 mylist/35284652うｐ動画リンク:mylist/35527016前:sm21077273 次:</p>
+        <p class=\"nico-info\"><small><strong class=\"nico-info-length\">10:28</strong>｜<strong class=\"nico-info-date\">2013年07月27日 19：25：33</strong> 投稿</small></p>
+        ]]></description>
+      </item>
+    """
+  end
+
+  # 静画への参照あり
+  def self.tag_search_item_xml_3
+    """
+      <item>
+        <title>【Minecraft】 ゆっくり仙人sで二人言プレイ part32 【ゆっくり実況】</title>
+        <link>http://www.nicovideo.jp/watch/sm21460522</link>
+        <guid isPermaLink=\"false\">tag:nicovideo.jp,2013-07-28:/watch/sm21460522</guid>
+        <pubDate>Sun, 28 Jul 2013 19:14:38 +0900</pubDate>
+        <description><![CDATA[
+        <p class=\"nico-thumbnail\"><img alt=\"【Minecraft】 ゆっくり仙人sで二人言プレイ part32 【ゆっくり実況】\" src=\"http://tn-skr3.smilevideo.jp/smile?i=21460522\" width=\"94\" height=\"70\" border=\"0\"/></p>
+        <p class=\"nico-description\">今回は馬探しです。当初は馬小屋作りまでやろうと思っていたのですが……。　茨歌仙3巻、発売して間もないですがネタバレを含んでいるので注意です。ネタにするのは次のパートまで待とうかとも思いましたが、突っ込みどころが多くて我慢できませんでした。　最近話題の無断転載については、私は別にどうでもいいのでスルーさせて下さい……。ニコニコモンズの素材(ゆっくりキャラ素材)がニコニコ外の転載禁止だったら話は早かったのですが、利用許可範囲がインターネット全般だったので。もちろん転載を推奨するわけではないですが、対応がﾒﾝﾄﾞｲので……。　【sm21353692：前回┃mylist/33965897┃次回：8/11予定】　おまけイラスト全体：im3300193　</p>
+        <p class=\"nico-info\"><small><strong class=\"nico-info-length\">15:52</strong>｜<strong class=\"nico-info-date\">2013年07月28日 19：14：38</strong> 投稿</small></p>
+        ]]></description>
+      </item>
+    """
+  end
+end