milkode 0.9.5 → 0.9.6

data/Gemfile

@@ -5,7 +5,7 @@ source "http://rubygems.org"
 #   gem "activesupport", ">= 2.3.5"
 # gemspec
 gem 'termcolor','>= 1.2.0', '< 1.2.2'
-gem 'rroonga','>= 1.1.0'
+gem 'rroonga','>= 1.1.0', '< 2.1.0'
 gem 'rack','>=1.3.4'
 gem 'sinatra', '>=1.2.6'
 gem 'launchy', '>=0.3.7'

data/HISTORY.ja.rdoc

@@ -1,3 +1,32 @@
+=== 0.9.6 2012/12/28
+
+* milk web
+  * 絞り込み検索
+    * 拡張子で絞り込み
+    * ディレクトリで絞り込み
+  * ファイル名 + キーワード検索
+    * 'path/to/file def kwd'で'path/to/dir'ファイル内の'def kwd'を含む行を検索可能に
+  * あいまいジャンプ
+    * 'a/filename:15' でマッチしたファイルの指定行に直接ジャンプ
+    * 検索マッチ数が1つの時はファイル本体を表示
+    * g:オプションを付けると確実にジャンプ
+  * おすすめ検索クエリ
+    * ファイル名+キーワード(fp:)、あいまいジャンプモード(g:) 等のクエリを示唆
+  * faviconに対応
+  * その他
+    * 'AName name'で検索した時、'name'は大文字／小文字どちらでもマッチするように
+    * 範囲セレクトボックスを切り替えた時に自動的に再検索
+    * milkode.js: コーディングスタイル変更
+  * バグ修正
+    * Windows環境にて、左上の範囲セレクトボックスが文字化けする問題を修正
+    * .gitignoreが非UTF-8でも読み込めるように
+
+* milk
+  * svnに対応 (milk add -p svn http://svn/trunk -n a_proj)
+  * milk remove, rebuild の高速化
+  * 'タブを複製'ボタンを押すとアンカーが消えてしまう問題を修正
+  * データベースディレクトリで milk pwd した時は専用メッセージ (On database in XXX)
+
 === 0.9.5 2012/12/09
 
 * milk web 

data/HISTORY.rdoc

@@ -1,3 +1,17 @@
+=== 0.9.6 2012/12/28
+
+* milk web
+  * Narrow down search
+  * filename + keyword search
+  * Fuzzy direct jump
+  * Recommended search query
+  * Support favicon
+  * Bug fix
+
+* milk
+  * Support svn (milk add -p svn http://svn/trunk -n a_proj)
+  * Quickly milk remove & rebuild
+  
 === 0.9.5 2012/12/09
 
 * milk web 

data/VERSION

@@ -1 +1 @@
-0.9.5
+0.9.6

data/bin/gmilk

@@ -6,5 +6,5 @@
 require 'rubygems'
 require 'milkode/grep/cli_grep'
 
-Version = "0.9.5"
+Version = "0.9.6"
 Milkode::CLI_Grep.execute(STDOUT, ARGV)

data/bin/milk

@@ -6,5 +6,5 @@
 require 'rubygems'
 require 'milkode/cli'
 
-Version = "0.9.5"
+Version = "0.9.6"
 Milkode::CLI.start(ARGV)

data/lib/milkode/cdstk/cdstk.rb

@@ -28,6 +28,8 @@ require 'milkode/common/plang_detector'
 
 module Milkode
   class IgnoreError < RuntimeError ; end
+  class AddError    < RuntimeError ; end
+  class ConvertError < RuntimeError ; end
 
   class Cdstk
     # バイグラムでトークナイズする。連続する記号・アルファベット・数字は一語として扱う。
@@ -36,8 +38,6 @@ module Milkode
     # 記号・アルファベット・数字もバイグラムでトークナイズする。
     DEFAULT_TOKENIZER = "TokenBigramSplitSymbolAlphaDigit"
 
-    class ConvetError < RuntimeError ; end
-    
     def initialize(io = $stdout, db_dir = ".")
       @db_dir = db_dir
       @out = io
@@ -131,26 +131,30 @@ module Milkode
         begin
           dirs.each do |v|
             # コンテンツを読み込める形に変換
-            dir = convert_content(v)
+            dir = convert_content(v, options)
 
             # YAMLに追加
             package = Package.create(dir, options[:ignore])
             add_yaml(package)
 
             # オプション設定
-            is_update_with_git_pull = git_url?(v)
-            set_yaml_options(package, options, is_update_with_git_pull)
+            is_update_with_git_pull   = git_protocol?(options, v)
+            is_update_with_svn_update = svn_protocol?(options, v)
+            set_yaml_options(package, options, is_update_with_git_pull, is_update_with_svn_update)
 
             # アップデート
             update_dir_in(dir) unless options[:empty]
           end
-        rescue ConvetError
+        rescue AddError => e
+          error_alert(e.message)
+          return
+        rescue ConvertError => e
           return
         end
       end
     end
 
-    def set_yaml_options(package, options, is_update_with_git_pull)
+    def set_yaml_options(package, options, is_update_with_git_pull, is_update_with_svn_update)
       is_dirty = false
       
       if options[:no_auto_ignore]
@@ -160,16 +164,24 @@ module Milkode
         is_dirty = true
       end
 
-      if options[:name]
+      # ローカルディレクトリの名前変更は後回し
+      # if options[:name]
+      #   dst = package.options
+      #   dst[:name] = src[:name]
+      #   package.set_options(dst)
+      #   is_dirty = true
+      # end
+
+      if is_update_with_git_pull
         dst = package.options
-        dst[:name] = src[:name]
+        dst[:update_with_git_pull] = is_update_with_git_pull
         package.set_options(dst)
         is_dirty = true
       end
 
-      if is_update_with_git_pull
+      if is_update_with_svn_update
         dst = package.options
-        dst[:update_with_git_pull] = is_update_with_git_pull
+        dst[:update_with_svn_update] = is_update_with_svn_update
         package.set_options(dst)
         is_dirty = true
       end
@@ -211,10 +223,12 @@ module Milkode
       @grndb.yaml_sync(@yaml.contents)
     end
 
-    def convert_content(src)
+    def convert_content(src, options)
       # httpファイルならダウンロード
       begin
-        src = download_file(src)
+        src = download_file(src, options)
+      rescue AddError => e
+        raise e
       rescue => e
         error_alert("download failure '#{src}'.")
         raise e                 # そのまま上に持ち上げてスタックトレース表示
@@ -245,21 +259,19 @@ module Milkode
       end
     end
 
-    def download_file(src)
-      if (src =~ /^https?:/)
+    def download_file(src, options)
+      if git_protocol?(options, src)
+        git_clone_in(src, options)
+      elsif svn_protocol?(options, src)
+        svn_clone_in(src, options)
+      elsif src =~ /^https?:/
         download_file_in(src)
-      elsif (git_url? src)
-        git_clone_in(src)
       else
+        raise AddError, "'--name' option is not available in local directory." if options[:name]
         src
       end
     end
 
-    def git_url?(src)
-      Util::git_url?(src)
-    end
-    private :git_url?
-
     def download_file_in(url)
       alert("download", "#{url}")
       
@@ -277,13 +289,12 @@ module Milkode
       filename
     end
 
-    def git_clone_in(url)
+    def git_clone_in(url, options)
       alert("git", url)
 
-      dst_dir = File.join(@db_dir, "packages/git")
-      # FileUtils.mkdir_p dst_dir
-
-      filename = File.join(dst_dir, File.basename(url).sub(/\.git\Z/, ""))
+      dst_dir  = File.join(@db_dir, "packages/git")
+      name     = options[:name] || File.basename(url).sub(/\.git\Z/, "")
+      filename = File.join(dst_dir, name)
 
       # git output progress to stderr.
       # `git clone #{url} #{filename} 2>&1`
@@ -294,6 +305,19 @@ module Milkode
       filename
     end
 
+    def svn_clone_in(url, options)
+      alert("svn", url)
+
+      dst_dir  = File.join(@db_dir, "packages/svn")
+      name     = options[:name] || File.basename(url)
+      filename = File.join(dst_dir, name)
+
+      # with output
+      system("svn checkout #{url} #{filename}")
+
+      filename
+    end
+
     def remove_all
       print_result do
         list([], {:verbose => true})
@@ -301,9 +325,19 @@ module Milkode
         if yes_or_no("Remove #{@yaml.contents.size} contents? (yes/no)")
           db_open
 
-          @yaml.contents.each do |package|
-            remove_dir(package.directory)
+          # documents
+          @documents.remove_all do |record|
+            alert_info("rm_record", record.path)
+            @file_count += 1
           end
+
+          # packages
+          @grndb.packages.remove_all
+          
+          # yaml
+          @package_count += @yaml.contents.size
+          @yaml.remove_all
+          @yaml.save
         else
           return
         end
@@ -453,7 +487,16 @@ module Milkode
           @out.puts dir
         else
           package = @yaml.package_root(File.expand_path('.'))
-          name = package ? package.name : "'not_package_dir'"
+
+          name = ""
+          if package
+            name = package.name
+          elsif Dbdir.dbdir?
+            name = 'On database'
+          else
+            name = 'Not package dir'
+          end
+          
           @out.puts "#{name} in #{dir}"
         end
       else
@@ -907,6 +950,14 @@ EOF
 
     private
 
+    def git_protocol?(options, src)
+      options[:protocol] == 'git' || Util::git_url?(src)
+    end
+
+    def svn_protocol?(options, src)
+      options[:protocol] == 'svn' || Util::svn_url?(src)
+    end
+
     def db_file
       Dbdir.expand_groonga_path(@db_dir)
     end
@@ -920,7 +971,7 @@ EOF
     end
 
     def update_package_in(package, options)
-      updater_exec(package, package.options[:update_with_git_pull], options[:no_clean])
+      updater_exec(package, package.options[:update_with_git_pull], package.options[:update_with_svn_update], options[:no_clean])
     end
 
     def update_dir_in(dir)
@@ -930,20 +981,21 @@ EOF
         warning_alert("#{dir} (Not found, skip)")
       else
         package = @yaml.package_root(dir)
-        updater_exec(package, false, false)
+        updater_exec(package, false, false, false)
       end
     end
 
-    def updater_exec(package, is_update_with_git_pull, is_no_clean)
+    def updater_exec(package, is_update_with_git_pull, is_update_with_svn_update, is_no_clean)
       alert("package", package.name )
 
       updater = Updater.new(@grndb, package.name)
       updater.set_package_ignore IgnoreSetting.new("/", package.ignore)
-      updater.enable_no_auto_ignore       if package.options[:no_auto_ignore]
-      updater.enable_silent_mode          if @is_silent
-      updater.enable_display_info         if @is_display_info
-      updater.enable_update_with_git_pull if is_update_with_git_pull
-      updater.enable_no_clean             if is_no_clean
+      updater.enable_no_auto_ignore         if package.options[:no_auto_ignore]
+      updater.enable_silent_mode            if @is_silent
+      updater.enable_display_info           if @is_display_info
+      updater.enable_update_with_git_pull   if is_update_with_git_pull
+      updater.enable_update_with_svn_update if is_update_with_svn_update
+      updater.enable_no_clean               if is_no_clean
       updater.exec
 
       @package_count += 1

data/lib/milkode/cdstk/milkode_yaml.rb

@@ -54,6 +54,12 @@ EOF
       update_contents
     end
 
+    # 全てのパッケージを削除
+    def remove_all
+      @contents = []
+      update_contents
+    end
+
     # 名前が同じパッケージを検索
     def find_name(name)
       @contents.find {|v| v.same_name?(name)}

data/lib/milkode/cdstk/yaml_file_wrapper.rb

@@ -76,6 +76,10 @@ module Milkode
       @data.remove package
     end
 
+    def remove_all
+      @data.remove_all
+    end
+
     def package_root(dir)
       @data.package_root(dir)
     end

data/lib/milkode/cdweb/app.rb

@@ -22,7 +22,7 @@ set :haml, :format => :html5
 
 get '/' do
   @setting = WebSetting.new
-  @version = "0.9.5"
+  @version = "0.9.6"
   @package_num = Database.instance.yaml_package_num
   @file_num = Database.instance.totalRecords
   @package_list = PackageList.new(Database.instance.grndb)
@@ -136,7 +136,7 @@ helpers do
 
     <<EOF
 <select name="shead" id="shead">
-#{data.map{|v| "<option value='#{v[0]}' #{v[0] == value ? 'selected' : ''}>#{v[1]}</option>"}}
+#{data.map{|v| "<option value='#{v[0]}' #{v[0] == value ? 'selected' : ''}>#{v[1]}</option>"}.join}
 </select>
 EOF
   end
@@ -148,7 +148,7 @@ EOF
 
     <<EOF
 <select name="package" id="package" onchange="select_package()">
-#{data.map{|v| "<option value='#{v}' #{v == value ? 'selected' : ''}>#{v}</option>"}}
+#{data.map{|v| "<option value='#{v}' #{v == value ? 'selected' : ''}>#{v}</option>"}.join}
 </select>
 EOF
   end
@@ -159,7 +159,7 @@ EOF
 
     <<EOF
 <select name="package" id="package_home" onchange="select_package_home()">
-#{data.map{|v| "<option value='#{v}' #{v == value ? 'selected' : ''}>#{v}</option>"}}
+#{data.map{|v| "<option value='#{v}' #{v == value ? 'selected' : ''}>#{v}</option>"}.join}
 </select>
 EOF
   end
@@ -183,7 +183,7 @@ EOF
 
     <<EOF
     #{headicon('go-home-5.png')} <a href="/home" class="headmenu">ホーム</a>
-    #{headicon('document-new-4.png')} <a href="#{href}" class="headmenu" onclick="window.open('#{href}'); return false;">タブを複製</a>
+    #{headicon('document-new-4.png')} <a href="#{href}" class="headmenu" onclick="window.open(document.URL); return false;">タブを複製</a>
     #{headicon('directory.png')} <a href="#{flist}" class="headmenu">ディレクトリ</a> 
     #{headicon('view-refresh-4.png')} <a href="#updateModal" class="headmenu" data-toggle="modal">パッケージを更新</a>
     #{headicon('help.png')} <a href="/help" class="headmenu">ヘルプ</a>

data/lib/milkode/cdweb/lib/command.rb

@@ -10,6 +10,7 @@ require 'milkode/cdweb/lib/coderay_wrapper'
 require 'milkode/cdweb/lib/search_contents'
 require 'milkode/cdweb/lib/search_files'
 require 'milkode/cdweb/lib/search_gotoline'
+require 'milkode/cdweb/lib/search_fuzzy_gotoline'
 require 'milkode/cdweb/lib/mkurl'
 require 'milkode/common/util'
 
@@ -52,11 +53,22 @@ module Milkode
     query = Query.new(params[:query])
     @title = "'#{query.query_string}' in #{path_title(path)}"
 
-    if (query.keywords.size > 0)
-      if Util::gotoline_keyword? query.keywords[0]
+    if (query.gotolines.size > 0)
+      searcher = SearchFuzzyGotoLine.new(path, params, query)
+
+      if searcher.directjump?
+        redirect searcher.directjump_url
+      end
+
+    elsif (query.keywords.size > 0)
+      if Util::gotoline_keyword?(query.keywords[0])
         searcher = SearchGotoLine.new(path, params, query)
       else
         searcher = SearchContents.new(path, params, query)
+
+        if searcher.directjump?
+          redirect searcher.directjump_url
+        end
       end
     else
       searcher = SearchFiles.new(path, params, query)
@@ -114,8 +126,12 @@ module Milkode
   private
   
   def file_or_dirimg(is_file)
-    src = (is_file) ? '/images/file.png' : '/images/directory.png'
-    "<img alt='' style='vertical-align:bottom; border: 0; margin: 1px;' src='#{src}'>"
+    src = (is_file) ? 'file.png' : 'directory.png'
+    img_icon(src)
+  end
+
+  def img_icon(srcfile)
+    "<img alt='' style='vertical-align:bottom; border: 0; margin: 1px;' src='/images/#{srcfile}'>"
   end
 
   def sort_change_content(current_value, text, sort_kind = nil)