runners_update 0.1.0

checksums.yaml

@@ -0,0 +1,7 @@
+---
+SHA1:
+  metadata.gz: efe74795320f6537438d59ac05ac67074bcb9d3e
+  data.tar.gz: cdaf1338274c63aeac6a1fb3cb1a34f2883739df
+SHA512:
+  metadata.gz: ed65ed7c575eb6c619ab19e5b44f36a74d1d57418d3d9ea58837c6ca3f6610879ea25cd610677f14e305a707eb1eb14d6092ccd79ab047269a5abaa0a44eee71
+  data.tar.gz: 30a0b6d8ca3b534a09497acf54cc4a0b604c7a5c7c38ce912ea6af4be3f114783ecca4aefb491d2b4312c0ffd730b6eb0b9b46bd59fc635f4475113c91d4d01e

data/.gitignore

@@ -0,0 +1,13 @@
+.bundle
+.yardoc
+.idea
+.rubocop.yml
+log
+_yardoc
+cache
+coverage
+doc
+pkg
+spec/reports
+tmp
+vendor/bundle

data/.rspec

@@ -0,0 +1,2 @@
+--format documentation
+--color

data/.travis.yml

@@ -0,0 +1,4 @@
+language: ruby
+rvm:
+  - 2.0.0
+before_install: gem install bundler -v 1.10.0.pre.2

data/Gemfile

@@ -0,0 +1,12 @@
+source 'https://rubygems.org'
+
+gemspec
+
+gem 'mechanize'
+
+group :development do
+  gem 'rubocop'
+  gem 'guard'
+  gem 'guard-rubocop'
+  gem 'terminal-notifier-guard'
+end

data/Gemfile.lock

@@ -0,0 +1,113 @@
+PATH
+  remote: .
+  specs:
+    runners_update (0.1.0)
+
+GEM
+  remote: https://rubygems.org/
+  specs:
+    ast (2.0.0)
+    astrolabe (1.3.1)
+      parser (~> 2.2)
+    coderay (1.1.0)
+    diff-lcs (1.2.5)
+    domain_name (0.5.24)
+      unf (>= 0.0.5, < 1.0.0)
+    ffi (1.9.10)
+    formatador (0.2.5)
+    guard (2.12.9)
+      formatador (>= 0.2.4)
+      listen (>= 2.7, <= 4.0)
+      lumberjack (~> 1.0)
+      nenv (~> 0.1)
+      notiffany (~> 0.0)
+      pry (>= 0.9.12)
+      shellany (~> 0.0)
+      thor (>= 0.18.1)
+    guard-rubocop (1.2.0)
+      guard (~> 2.0)
+      rubocop (~> 0.20)
+    http-cookie (1.0.2)
+      domain_name (~> 0.5)
+    listen (3.0.3)
+      rb-fsevent (>= 0.9.3)
+      rb-inotify (>= 0.9)
+    lumberjack (1.0.9)
+    mechanize (2.7.3)
+      domain_name (~> 0.5, >= 0.5.1)
+      http-cookie (~> 1.0)
+      mime-types (~> 2.0)
+      net-http-digest_auth (~> 1.1, >= 1.1.1)
+      net-http-persistent (~> 2.5, >= 2.5.2)
+      nokogiri (~> 1.4)
+      ntlm-http (~> 0.1, >= 0.1.1)
+      webrobots (>= 0.0.9, < 0.2)
+    method_source (0.8.2)
+    mime-types (2.6.1)
+    mini_portile (0.6.2)
+    nenv (0.2.0)
+    net-http-digest_auth (1.4)
+    net-http-persistent (2.9.4)
+    nokogiri (1.6.6.2)
+      mini_portile (~> 0.6.0)
+    notiffany (0.0.6)
+      nenv (~> 0.1)
+      shellany (~> 0.0)
+    ntlm-http (0.1.1)
+    parser (2.2.2.6)
+      ast (>= 1.1, < 3.0)
+    powerpack (0.1.1)
+    pry (0.10.1)
+      coderay (~> 1.1.0)
+      method_source (~> 0.8.1)
+      slop (~> 3.4)
+    rainbow (2.0.0)
+    rake (10.4.2)
+    rb-fsevent (0.9.5)
+    rb-inotify (0.9.5)
+      ffi (>= 0.5.0)
+    rspec (3.3.0)
+      rspec-core (~> 3.3.0)
+      rspec-expectations (~> 3.3.0)
+      rspec-mocks (~> 3.3.0)
+    rspec-core (3.3.2)
+      rspec-support (~> 3.3.0)
+    rspec-expectations (3.3.1)
+      diff-lcs (>= 1.2.0, < 2.0)
+      rspec-support (~> 3.3.0)
+    rspec-mocks (3.3.2)
+      diff-lcs (>= 1.2.0, < 2.0)
+      rspec-support (~> 3.3.0)
+    rspec-support (3.3.0)
+    rubocop (0.32.1)
+      astrolabe (~> 1.3)
+      parser (>= 2.2.2.5, < 3.0)
+      powerpack (~> 0.1)
+      rainbow (>= 1.99.1, < 3.0)
+      ruby-progressbar (~> 1.4)
+    ruby-progressbar (1.7.5)
+    shellany (0.0.1)
+    slop (3.6.0)
+    terminal-notifier-guard (1.6.4)
+    thor (0.19.1)
+    unf (0.1.4)
+      unf_ext
+    unf_ext (0.0.7.1)
+    webrobots (0.1.1)
+
+PLATFORMS
+  ruby
+
+DEPENDENCIES
+  bundler (~> 1.10.a)
+  guard
+  guard-rubocop
+  mechanize
+  rake (~> 10.0)
+  rspec
+  rubocop
+  runners_update!
+  terminal-notifier-guard
+
+BUNDLED WITH
+   1.10.6

data/LICENSE.txt

@@ -0,0 +1,21 @@
+The MIT License (MIT)
+
+Copyright (c) 2015 kyoshidajp
+
+Permission is hereby granted, free of charge, to any person obtaining a copy
+of this software and associated documentation files (the "Software"), to deal
+in the Software without restriction, including without limitation the rights
+to use, copy, modify, merge, publish, distribute, sublicense, and/or sell
+copies of the Software, and to permit persons to whom the Software is
+furnished to do so, subject to the following conditions:
+
+The above copyright notice and this permission notice shall be included in
+all copies or substantial portions of the Software.
+
+THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
+IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
+FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
+AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
+LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM,
+OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN
+THE SOFTWARE.

data/README.md

@@ -0,0 +1,86 @@
+# RunnersUpdate
+
+ランナーズアップデートのデータを取得します。ランナーズアップデートについては、[ランナーズアップデートとは - ランナーズアップデート](http://update.runnet.jp/2015chitose/help.html) を参照してください。
+
+## インストール
+
+Gemfile に次の行を追加します。
+
+```ruby
+gem 'runners_update', :git => 'https://github.com/kyoshidajp/runners_update.git'
+gem 'mechanize'
+```
+
+そして、次のコマンドを実行します。
+
+    $ bundle install
+
+## 使い方
+
+最初にレースIDを確認します。レースIDとは、レースのランナーズアップデート検索画面URLが
+
+```
+http://update.runnet.jp/2015sibamata100/
+```
+
+または
+
+```
+http://update.runnet.jp/2015sibamata100/index.html
+```
+
+の場合、`2015sibamata100` が該当します。
+
+次に、データを取得したいランナーのナンバーをレース公式サイトの参加者名簿等を参考にして調べます。ナンバーは一人の場合は `String` または `Fixnum`、複数名の場合は `Range` の可変長引数で指定可能です。
+
+ソースコードでは `runners_update` を `require` します。
+
+```ruby
+require 'runners_update'
+```
+
+`RunnersUpdate` の `get` メソッドに対して、レースID、ナンバーを渡します。
+
+```ruby
+result = RunnersUpdate.get(レースID, ナンバー)
+```
+
+結果は `RunnersUpdate::Runner` クラスの `Array` になっています。
+
+## サンプル
+
+次は2015年6月6日に行われた、[東京・柴又100K](http://tokyo100k.jp/)の結果について、ナンバー 1〜100, 1000〜1010 のデータを CSV 形式で出力するサンプル `sample.rb` です。
+
+```ruby
+require 'runners_update'
+require 'csv'
+
+ID = '2015sibamata100/' # レースID
+
+result = RunnersUpdate.get(ID, 1..100, 1000..1010)
+
+CSV do |writer|
+  result.each do |runner|
+    points = []
+    runner.splits.each do |s|
+      points << s.split
+    end
+    writer << [runner.number, runner.name].concat(points)
+  end
+end
+```
+
+```
+$ bundle exec ruby sample.rb
+
+... CSV形式の結果
+
+```
+
+## ライセンス
+
+- [MIT License](http://opensource.org/licenses/MIT)
+
+## 注意事項
+
+[総合利用規約](http://runnet.jp/help/rule/detail_n6.html) の「第4条　財産権について」に記載されていますが、取得したデータを公開する事は規約に違反すると思われます。

data/Rakefile

@@ -0,0 +1,6 @@
+require 'bundler/gem_tasks'
+require 'rspec/core/rake_task'
+
+RSpec::Core::RakeTask.new(:spec)
+
+task :default => :spec

data/bin/console

@@ -0,0 +1,14 @@
+#!/usr/bin/env ruby
+
+require 'bundler/setup'
+require 'runners_update'
+
+# You can add fixtures and/or initialization code here to make experimenting
+# with your gem easier. You can also use a different console, if you like.
+
+# (If you use this, don't forget to add pry to your Gemfile!)
+# require 'pry'
+# Pry.start
+
+require 'irb'
+IRB.start

data/bin/setup

@@ -0,0 +1,7 @@
+#!/bin/bash
+set -euo pipefail
+IFS=$'\n\t'
+
+bundle install
+
+# Do any other automated setup that you need to do here

data/lib/runners_update.rb

@@ -0,0 +1,15 @@
+require 'runners_update/version'
+require 'runners_update/client'
+
+# ランナーズアップデートクラス
+module RunnersUpdate
+  # データの取得
+  #
+  # @param [String] race_id レースID
+  # @param [Array] *args ナンバー
+  # @return [Array] データ
+  def self.get(race_id, *args)
+    client = Client.new(race_id, *args)
+    return client.result
+  end
+end

data/lib/runners_update/client.rb

@@ -0,0 +1,184 @@
+require 'logger'
+require 'mechanize'
+require 'runners_update/runner'
+
+module RunnersUpdate
+  BASE_URL = 'http://update.runnet.jp/'
+  class Client
+    # キャッシュディレクトリ
+    CASHE_DIR = 'cache'
+
+    # ログ・ファイル
+    LOG = 'log'
+
+    # initialize
+    #
+    # @param [String] race_id レースID
+    # @param [Array] *args ナンバー
+    def initialize(race_id, *args)
+      @agent = Mechanize.new
+      @url = File.join(RunnersUpdate::BASE_URL, race_id)
+      @ranges = *args
+      @logger = Logger.new(LOG)
+      @cache_dir = File.join(Dir.pwd, CASHE_DIR, race_id)
+    end
+
+    # 結果データを取得
+    #
+    # @return [Array] 結果データ
+    def result
+      result = []
+
+      @ranges.each do |r|
+
+        if r.instance_of?(Fixnum) || r.instance_of?(String)
+          result << _result(r.to_s)
+          next
+        end
+
+        unless r.instance_of?(Range)
+          @logger.error("Illigal number #{r}")
+          next
+        end
+
+        r.each do |n|
+          runner = _result(n.to_s)
+          unless runner.nil?
+            result << runner
+          end
+        end
+      end
+
+      return result.compact
+    end
+
+    private
+
+    # キャッシュを取得
+    #
+    # @param [String] number ナンバー
+    # @return [Mechanize::Page|nil] 結果ページデータ
+    def cache(number)
+      number_file = File.join(@cache_dir, number + '.html')
+      if File.exist?(number_file)
+        @logger.info("Found cache at #{number_file}")
+        return @agent.get("file://#{number_file}")
+      end
+      return nil
+    end
+
+    # ランナーが存在するか
+    #
+    # @param [String] number ナンバー
+    # @return [Boolean] 存在するか
+    def exist_runner?(number)
+      number_file = File.join(@cache_dir, number + '_error.html')
+      if File.exist?(number_file)
+        @logger.info("Found cache at #{number_file}")
+        return true
+      end
+      return false
+    end
+
+    # 結果ページデータを取得
+    #
+    # @param [String] number ナンバー
+    # @return [Mechanize::Page|nil] 結果ページデータ
+    def page(number)
+      cache = cache(number)
+      unless cache.nil?
+        return cache
+      end
+
+      if exist_runner?(number)
+        return nil
+      end
+
+      search_page = @agent.get(@url)
+
+      # レースデータ取得エラー
+      if search_page.uri.path == '/record'
+        raise(RaceError.new(@url))
+      end
+
+      form = search_page.forms[0]
+      form.number = number
+      result_page = @agent.submit(form)
+      return mkcache(result_page, number)
+    end
+
+    # キャッシュを作成
+    #
+    # @param [Mechanize::Page] result_page Mechanize:Page
+    # @param [String] number ナンバー
+    def mkcache(result_page, number)
+      mkcache_dir
+
+      @logger.info("Download #{result_page.uri.path}")
+
+      # ランナーデータエラー（存在しない）でもキャッシュを作成する
+      if File.basename(result_page.uri.path) == 'number_error.html'
+        number_file = File.join(@cache_dir, "#{number}_error.html")
+        @agent.download(result_page.uri.path, number_file)
+        return nil
+      end
+
+      number_file = File.join(@cache_dir, "#{number}.html")
+      @agent.download(result_page.uri.path, number_file)
+      return result_page
+    end
+
+    # キャッシュディレクトリを作成
+    #
+    def mkcache_dir
+      unless Dir.exist?(CASHE_DIR)
+        Dir.mkdir(CASHE_DIR)
+      end
+
+      unless Dir.exist?(@cache_dir)
+        Dir.mkdir(@cache_dir)
+      end
+    end
+
+    # ランナーの結果データを取得
+    #
+    # @param [String] number ナンバー
+    # @return [Runner] 結果データ
+    def _result(number)
+      page = page(number)
+
+      # 取得出来ず
+      if page.nil?
+        return nil
+      end
+
+      name = page.at('div#personalBlock/dl/dd').text.sub('： ', '')
+
+      runner = Runner.new(number, name)
+      trs = page.search('table.sarchList/tr[@align="center"]')
+      trs.each  do |tr|
+        tds = tr.xpath('td')
+        name, split, lap, pass = tds.map(&:text)
+        runner.add_point(name, split, lap, pass)
+      end
+
+      return runner
+    end
+  end
+
+  # レース結果取得エラークラス
+  #
+  # 公開が終了または存在しないレースIDの場合
+  class RaceError < StandardError
+    attr_reader(:url)
+
+    # initialize
+    #
+    # @param [String] url URL
+    #
+    def initialize(url)
+      @url = url
+      super("Cant't get #{url}. Probably race url is closed or not exist.")
+    end
+  end
+end

data/lib/runners_update/runner.rb

@@ -0,0 +1,38 @@
+module RunnersUpdate
+  # ランナークラス
+  class Runner
+    attr_accessor :number, :name, :splits
+    def initialize(number, name)
+      @number = number
+      @name = name
+      @splits = []
+    end
+
+    # ポイントの追加
+    #
+    # @param [String] name 測定ポイント名
+    # @param [String] split スプリットタイム
+    # @param [String] lap ラップタイム
+    # @param [String] pass 通過タイム
+    def add_point(name, split, lap, pass)
+      @splits << Point.new(name, split, lap, pass)
+    end
+  end
+
+  # 測定ポイントクラス
+  class Point
+    attr_accessor :name, :split, :lap, :pass
+    # initialize
+    #
+    # @param [String] name 測定ポイント名
+    # @param [String] split スプリットタイム
+    # @param [String] lap ラップタイム
+    # @param [String] pass 通過タイム
+    def initialize(name, split, lap, pass)
+      @name = name
+      @split = split
+      @lap = lap
+      @pass = pass
+    end
+  end
+end

data/lib/runners_update/version.rb

@@ -0,0 +1,3 @@
+module RunnersUpdate
+  VERSION = '0.1.0'
+end

data/runners_update.gemspec

@@ -0,0 +1,25 @@
+# coding: utf-8
+lib = File.expand_path('../lib', __FILE__)
+$LOAD_PATH.unshift(lib) unless $LOAD_PATH.include?(lib)
+require 'runners_update/version'
+
+Gem::Specification.new do |spec|
+  spec.name          = 'runners_update'
+  spec.version       = RunnersUpdate::VERSION
+  spec.authors       = ['kyoshidajp']
+  spec.email         = ['claddvd@gmail.com']
+
+  spec.summary       = 'ランナーズアップデートのデータ取得'
+  spec.description   = 'ランナーズアップデートのデータ取得'
+  spec.homepage      = 'https://github.com/kyoshidajp/runners_update'
+  spec.license       = 'MIT'
+
+  spec.files         = `git ls-files -z`.split("\x0").reject { |f| f.match(%r{^(test|spec|features)/}) }
+  spec.bindir        = 'exe'
+  spec.executables   = spec.files.grep(%r{^exe/}) { |f| File.basename(f) }
+  spec.require_paths = ['lib']
+
+  spec.add_development_dependency 'bundler', '~> 1.10.a'
+  spec.add_development_dependency 'rake', '~> 10.0'
+  spec.add_development_dependency 'rspec'
+end

metadata

@@ -0,0 +1,101 @@
+--- !ruby/object:Gem::Specification
+name: runners_update
+version: !ruby/object:Gem::Version
+  version: 0.1.0
+platform: ruby
+authors:
+- kyoshidajp
+autorequire: 
+bindir: exe
+cert_chain: []
+date: 2015-07-31 00:00:00.000000000 Z
+dependencies:
+- !ruby/object:Gem::Dependency
+  name: bundler
+  requirement: !ruby/object:Gem::Requirement
+    requirements:
+    - - "~>"
+      - !ruby/object:Gem::Version
+        version: 1.10.a
+  type: :development
+  prerelease: false
+  version_requirements: !ruby/object:Gem::Requirement
+    requirements:
+    - - "~>"
+      - !ruby/object:Gem::Version
+        version: 1.10.a
+- !ruby/object:Gem::Dependency
+  name: rake
+  requirement: !ruby/object:Gem::Requirement
+    requirements:
+    - - "~>"
+      - !ruby/object:Gem::Version
+        version: '10.0'
+  type: :development
+  prerelease: false
+  version_requirements: !ruby/object:Gem::Requirement
+    requirements:
+    - - "~>"
+      - !ruby/object:Gem::Version
+        version: '10.0'
+- !ruby/object:Gem::Dependency
+  name: rspec
+  requirement: !ruby/object:Gem::Requirement
+    requirements:
+    - - ">="
+      - !ruby/object:Gem::Version
+        version: '0'
+  type: :development
+  prerelease: false
+  version_requirements: !ruby/object:Gem::Requirement
+    requirements:
+    - - ">="
+      - !ruby/object:Gem::Version
+        version: '0'
+description: "ランナーズアップデートのデータ取得"
+email:
+- claddvd@gmail.com
+executables: []
+extensions: []
+extra_rdoc_files: []
+files:
+- ".gitignore"
+- ".rspec"
+- ".travis.yml"
+- Gemfile
+- Gemfile.lock
+- LICENSE.txt
+- README.md
+- Rakefile
+- bin/console
+- bin/setup
+- lib/runners_update.rb
+- lib/runners_update/client.rb
+- lib/runners_update/runner.rb
+- lib/runners_update/version.rb
+- runners_update.gemspec
+homepage: https://github.com/kyoshidajp/runners_update
+licenses:
+- MIT
+metadata: {}
+post_install_message: 
+rdoc_options: []
+require_paths:
+- lib
+required_ruby_version: !ruby/object:Gem::Requirement
+  requirements:
+  - - ">="
+    - !ruby/object:Gem::Version
+      version: '0'
+required_rubygems_version: !ruby/object:Gem::Requirement
+  requirements:
+  - - ">="
+    - !ruby/object:Gem::Version
+      version: '0'
+requirements: []
+rubyforge_project: 
+rubygems_version: 2.4.5
+signing_key: 
+specification_version: 4
+summary: "ランナーズアップデートのデータ取得"
+test_files: []