baiduserp 0.1.0 → 0.1.1

data/README.md

@@ -6,17 +6,17 @@
 
 ## Installation
 
-1. 系统要求
+ 1 系统要求
 
 Linux或Mac. Linux最好使用新版本的Ubuntu或Fedora系列.
 
-2. 安装ruby环境
+ 2 安装ruby环境
 
 只支持ruby1.9及以上. 最好的安装ruby的方法是通过[RVM](https://rvm.io/),RVM的使用方法可以搜索一下,有很多教程.
 
 在最新的Ubuntu或Fedora系列的Linux中,也可以通过apt-get或yum安装ruby1.9.
 
-3. 安装gem依赖
+ 3 安装gem依赖
 
 需要依赖nokogiri这个gem.而这个gem需要系统中的两个库.
 所以在ubuntu或者fedora下需要
@@ -30,7 +30,7 @@ $ sudo yum install libxml2-devel libxml2 libxslt libxslt-devel  # fedora
 
 `$ gem install nokogiri`
 
-4. 最后我们安装 baiduserp gem
+ 4 最后我们安装 baiduserp gem
 
 `$ gem install baiduserp`
 
@@ -190,4 +190,4 @@ $ baiduserp -s 香港
 4. Push to the branch (`git push origin my-new-feature`)
 5. Create new Pull Request
 
-或者可以到Issue页面提交问题,可以提BUG,新的需求,各种建议,等等.
+或者可以到Issue页面提交问题,可以提BUG,新的需求,各种建议,等等.

data/lib/baiduserp/parser.rb

@@ -5,8 +5,6 @@ require 'open-uri'
 
 module Baiduserp
   class Parser
-    BAIDU_RESULT = /找到相关结果(.*)个/
-
     def parse(html)
       @html = html
       @doc = Nokogiri::HTML(@html)
@@ -27,7 +25,7 @@ module Baiduserp
       else
         html = open(URI.escape(file_path))
       end
-      html = html.read.encode('UTF-8')
+      html = html.read.encode!('UTF-8','UTF-8',:invalid => :replace)
       parse html
     end
 
@@ -106,7 +104,7 @@ module Baiduserp
       result[:title] = get_content_safe(table.css('h3'))
       result[:content] = parse_serp_content(id)
 
-      if id > 3000 # sem ads
+      if id >= 3000 # sem ads
         result[:paid] = 1
       else # organic results
         result[:paid] = 0
@@ -151,7 +149,7 @@ module Baiduserp
     end
 
     def parse_serp_result_num
-      str = @html.scan(BAIDU_RESULT).join
+      str = @html.scan(/找到相关结果(.*)个/).join
       str = str.gsub('约','')
       if str.include?('万')
         parts = str.split('万')

data/lib/baiduserp/version.rb

@@ -1,3 +1,3 @@
 module Baiduserp
-  VERSION = "0.1.0"
+  VERSION = "0.1.1"
 end

metadata

@@ -1,7 +1,7 @@
 --- !ruby/object:Gem::Specification
 name: baiduserp
 version: !ruby/object:Gem::Version
-  version: 0.1.0
+  version: 0.1.1
   prerelease: 
 platform: ruby
 authors:
@@ -9,7 +9,7 @@ authors:
 autorequire: 
 bindir: bin
 cert_chain: []
-date: 2013-02-08 00:00:00.000000000 Z
+date: 2013-04-21 00:00:00.000000000 Z
 dependencies:
 - !ruby/object:Gem::Dependency
   name: nokogiri
@@ -60,9 +60,8 @@ required_rubygems_version: !ruby/object:Gem::Requirement
       version: '0'
 requirements: []
 rubyforge_project: 
-rubygems_version: 1.8.24
+rubygems_version: 1.8.25
 signing_key: 
 specification_version: 3
 summary: Baidu SERP
 test_files: []
-has_rdoc: