bucky-core 0.10.15 → 0.10.18

checksums.yaml

@@ -1,7 +1,7 @@
 ---
 SHA256:
-  metadata.gz: 3d06310980c963c7b99602defee056a91228104ef3851484a8d25e87d225c3b7
-  data.tar.gz: 1e116f76e65d8512db9ea9fb029aae94de6ee6df6492470a63fcba10ef91b03a
+  metadata.gz: d50742f901d8276de5e234afde280ec7692be426842f815647b192f31f6b90ab
+  data.tar.gz: e833afdea6d437f15eddade5331ac729139414c202bb86ac39c8d9f7128f557a
 SHA512:
-  metadata.gz: e8bef7c22d91ed15301fd07034f6f219fc8a1adc661f08f5eab82d1df8a2d7780dc18e4d5d50f7f7dcafb432292688d1f5f81a0f65a35c9fdb0183a96fc665bd
-  data.tar.gz: 49b49a316e5bf95e1ef053841857eb69233c023ffb7b14b829731f6d843a98e7188c3dd5bc14f273fe0240c4be523b229e21c05e6c770a323d22815e671520c1
+  metadata.gz: 4fb55a0a3306935a41ecfde2004b3de2c1c3d8aacfdf18a62187b75296ea536af7a7bc622a224aa3cd494ebf6a4f90476dd61b6dc0e1fc83ecaef142521c5b3a
+  data.tar.gz: 660d128ae6ab97185df4eee3478dfb76f683f1d7e0d6386d8853b42bb2d7b6bb096ba36440536414902b632215452e4688177f59e2650ce46a38b24c57eb5058

data/.circleci/config.yml

@@ -27,7 +27,7 @@ jobs:
           command: docker load -q -i ~/caches/images.tar
       - run:
           name: docker up
-          command: docker-compose -f docker-compose.system-test.yml up --no-build -d
+          command: docker-compose -f docker-compose.system-test.yml up -d
       - run:
           name: execute system testing
           command: 'circleci tests glob system_testing/testing_code/*.bats | xargs -n 1 -I {} docker exec bucky-core bats "/bucky-core/"{} | circleci tests split'

data/.rubocop.yml

@@ -13,7 +13,7 @@ AllCops:
 AbcSize:
   Enabled: false
 
-# Allow method prefix start with "set_" and "get_"
+# Allow method prefix start with 'set_' and 'get_'
 AccessorMethodName:
   Enabled: false
 
@@ -46,7 +46,7 @@ FrozenStringLiteralComment:
 GlobalVars:
   AllowedVariables: [$bucky_home_dir, $debug, $job_id, $round]
 
-# Not allow using "->" for multi-line lambdas.
+# Not allow using '->' for multi-line lambdas.
 Lambda:
   Enabled: false
 
@@ -61,7 +61,7 @@ MethodLength:
   Enabled: false
 
 ModuleLength:
-  Max: 130
+  Max: 140
   Exclude:
     - 'spec/**/*.rb'
 
@@ -77,4 +77,4 @@ ClassLength:
 
 Lint/UselessAccessModifier:
   Exclude:
-    - 'example/**/*'
+    - 'example/**/*'

data/Dockerfile

@@ -9,6 +9,7 @@ RUN apk update && \
     build-base \
     curl-dev \
     git \
+    iproute2-minimal \
     libxml2-dev \
     libxslt-dev \
     linux-headers \

data/Dockerfile.dev

@@ -0,0 +1,41 @@
+FROM ruby:2.5.8-alpine
+ENV LANG ja_JP.UTF-8
+ENV PAGER busybox less
+
+RUN apk update && \
+    apk upgrade && \
+    apk add --update\
+    bash \
+    build-base \
+    curl-dev \
+    iproute2-minimal \
+    git \
+    libxml2-dev \
+    libxslt-dev \
+    linux-headers \
+    mysql-dev \
+    openssh \
+    ruby-dev \
+    ruby-json \
+    tzdata \
+    yaml \
+    yaml-dev \
+    zlib-dev
+
+ENV BC_DIR /bucky-core/
+ENV PATH /bucky-core/exe/:$PATH
+WORKDIR $BC_DIR
+COPY . $BC_DIR
+RUN \
+    gem install bundler -v 1.17.3 && \
+    echo 'gem: --no-document' >> ~/.gemrc && \
+    cp ~/.gemrc /etc/gemrc && \
+    chmod uog+r /etc/gemrc && \
+    bundle config --global build.nokogiri --use-system-libraries && \
+    bundle config --global jobs 4 && \
+    bundle install && \
+    rm -rf ~/.gem
+
+WORKDIR /app
+RUN chown -R nobody:nobody /app
+USER nobody

data/Dockerfile.system-test

@@ -3,30 +3,31 @@ ENV LANG ja_JP.UTF-8
 ENV PAGER busybox less
 
 RUN apk update && \
-    apk upgrade && \
-    apk add --update\
-    bash \
-    build-base \
-    curl-dev \
-    git \
-    libxml2-dev \
-    libxslt-dev \
-    linux-headers \
-    mysql-dev \
-    openssh \
-    ruby-dev \
-    ruby-json \
-    tzdata \
-    yaml \
-    yaml-dev \
-    zlib-dev \
-    curl \
-    parallel
+  apk upgrade && \
+  apk add --update\
+  bash \
+  build-base \
+  curl-dev \
+  git \
+  iproute2-minimal \
+  libxml2-dev \
+  libxslt-dev \
+  linux-headers \
+  mysql-dev \
+  openssh \
+  ruby-dev \
+  ruby-json \
+  tzdata \
+  yaml \
+  yaml-dev \
+  zlib-dev \
+  curl \
+  parallel
 
 RUN git clone https://github.com/bats-core/bats-core.git /tmp/bats-core \
-    && cd /tmp/bats-core \
-    && ./install.sh /usr/local \
-    && rm -rf /tmp/bats-core
+  && cd /tmp/bats-core \
+  && ./install.sh /usr/local \
+  && rm -rf /tmp/bats-core
 
 ENV BC_DIR /bucky-core/
 ENV PATH /bucky-core/exe/:$PATH

data/README.md

@@ -98,6 +98,7 @@ ENV_FOO=foo bucky run -t e2e -d
     -r, --re_test_count RE_TEST_COUNT # How many round you run tests
     -l, --label LABEL_NAME
     -m, --link_check_max_times MAX_TIMES # Works only with which category is linkstatus
+    -o, --out JSON_OUTPUT_FILE_PATH # Output summary report by json
 ```
 
 ### Rerun test
@@ -212,6 +213,7 @@ test_category: linkstatus
 exclude_urls:
   - https://example.com/fuga/?hoge=1 # PERFECT MATCHING
   - https://example.com/fuga/* # PARTIAL MATCHING
+  - /https://example.com/.*\.html/ # REGULAR EXPRESSION MATCHING
 cases:
   - case_name: test_code_1 # Suite filename + number
     desc: status check for top page

data/docker-compose.dev-with-bm.yml

@@ -3,7 +3,7 @@ services:
   bucky-core:
     build:
       context: .
-      dockerfile: Dockerfile
+      dockerfile: Dockerfile.dev
     container_name: bucky-core
     volumes:
       - .:/bucky-core

data/docker-compose.dev.yml

@@ -3,7 +3,7 @@ services:
   bucky-core:
     build:
       context: .
-      dockerfile: Dockerfile
+      dockerfile: Dockerfile.dev
     container_name: bucky-core
     volumes:
       - .:/bucky-core

data/exe/bucky

@@ -89,7 +89,9 @@ end
 opts.on('-m', '--link_check_max_times') do |v|
   test_cond[:link_check_max_times] = v.to_i
 end
-
+opts.on('-o', '--out JSON_OUTPUT_FILE_PATH') do |v|
+  test_cond[:out] = v
+end
 lint_cond = {}
 opts.on('-C', '--category CATEGORY_NAME') do |v|
   lint_cond[:lint_category] = v
@@ -124,42 +126,34 @@ def bucky_home?
   File.exist?('.bucky_home')
 end
 
-current_dir = Dir.pwd
-gem_script_dir = __dir__
-
-if ARGV == RUN_COMMAND
-  error_and_exit('Not bucky project dirctory here.') unless bucky_home?
-
-  $bucky_home_dir = Dir.pwd
+def setup_test_cond(test_cond)
   # Default conditions setting conditions setting
   test_cond[:test_category] ||= 'e2e'
   test_cond[:re_test_count] = test_cond[:re_test_count] ? test_cond[:re_test_count].to_i : 1
   test_cond[:link_check_max_times] ||= 3
+  test_cond[:out] ||= 'report.json'
   # Change to array e.g.--suite_id 1,2,3 -> :suite_id=>[1,2,3]
-  test_cond.each { |k, v| test_cond[k] = v.split(',') if v.instance_of?(String) }
-  require_relative '../lib/bucky/core/test_core/test_manager'
-  Bucky::Core::TestCore::TestManager.new(test_cond).run
-  Bucky::Core::TestCore::ExitHandler.instance.bucky_exit
+  %i[suite_name case label xlabel device].each do |k|
+    test_cond[k] = test_cond[k].split(',') unless test_cond[k].nil?
+  end
+  test_cond
+end
 
-elsif ARGV == RERUN_COMMAND
+current_dir = Dir.pwd
+gem_script_dir = __dir__
+
+if ARGV[0].end_with? 'run'
+  error_and_exit('Not bucky project dirctory here.') unless bucky_home?
   $bucky_home_dir = Dir.pwd
-  # Default conditions setting conditions setting
-  test_cond[:test_category] ||= 'e2e'
-  test_cond[:link_check_max_times] ||= 3
-  test_cond[:re_test_count] = test_cond[:re_test_count] ? test_cond[:re_test_count].to_i : 1
-  # Change to array e.g.--suite_id 1,2,3 -> :suite_id=>[1,2,3]
-  test_cond.each { |k, v| test_cond[k] = v.split(',') if v.instance_of?(String) }
   require_relative '../lib/bucky/core/test_core/test_manager'
-  Bucky::Core::TestCore::TestManager.new(test_cond).rerun
+  Bucky::Core::TestCore::TestManager.new(setup_test_cond(test_cond)).send(ARGV[0])
   Bucky::Core::TestCore::ExitHandler.instance.bucky_exit
-
 elsif ARGV == LINT_COMMAND
   $bucky_home_dir = Dir.pwd
   # Default conditions setting
   lint_cond[:lint_category] ||= 'config'
   require_relative '../lib/bucky/tools/lint'
   Bucky::Tools::Lint.check(lint_cond[:lint_category])
-
 elsif ARGV[0..0] == NEW_COMMAND
   error_and_exit('No test app name.') if ARGV.length < 2
 

data/lib/bucky/core/test_core/test_case_loader.rb

@@ -34,9 +34,8 @@ module Bucky
             testcodes = []
             service = (test_cond[:service] || ['*']).first
             device = (test_cond[:device] || ['*']).first
-            category = (test_cond[:test_category] || ['*']).first
 
-            Dir.glob("#{$bucky_home_dir}/services/#{service}/#{device}/scenarios/#{category}/*.yml").each do |testcode_file|
+            Dir.glob("#{$bucky_home_dir}/services/#{service}/#{device}/scenarios/#{test_cond[:test_category]}/*.yml").each do |testcode_file|
               testcodes << load_testcode_in_file(testcode_file, test_cond)
             end
             # Delete nil element

data/lib/bucky/core/test_core/test_class_generator.rb

@@ -46,7 +46,7 @@ module Bucky
         end
 
         # Genrate test class by test suite and test case data
-        def generate_test_class(data, link_status_url_log = {})
+        def generate_test_class(data: [], linkstatus_url_log: {}, w_pipe: {})
           test_cond = @test_cond
           # Common proccessing
           # e.g.) TestSampleAppPcE2e1, TestSampleAppPcHttpstatus1
@@ -63,6 +63,7 @@ module Bucky
               match_obj = /\Atest_(.+)\(.+::(Test.+)\)\z/.match(original_name)
               "#{match_obj[1]}(#{match_obj[2]})"
             end
+            define_method(:w_pipe, proc { w_pipe })
 
             # Class structure is different for each test category
             case data[:test_category]
@@ -74,8 +75,8 @@ module Bucky
                   define_method(method_name) do
                     puts "\n#{simple_test_class_name(name)}"
                     t_case[:urls].each do |url|
-                      link_status_check_args = { url: url, device: data[:suite][:device], exclude_urls: data[:suite][:exclude_urls], link_check_max_times: test_cond[:link_check_max_times], url_log: link_status_url_log }
-                      link_status_check(link_status_check_args)
+                      linkstatus_check_args = { url: url, device: data[:suite][:device], exclude_urls: data[:suite][:exclude_urls], link_check_max_times: test_cond[:link_check_max_times], url_log: linkstatus_url_log }
+                      linkstatus_check(linkstatus_check_args)
                     end
                   end
                 )

data/lib/bucky/core/test_core/test_manager.rb

@@ -1,6 +1,6 @@
 # frozen_string_literal: true
 
-require 'parallel'
+require 'json'
 require_relative '../test_core/test_case_loader'
 require_relative '../../utils/config'
 require_relative './test_class_generator'
@@ -26,6 +26,8 @@ module Bucky
           # If child process dead, available workers increase
           Signal.trap('CLD') { available_workers += 1 }
 
+          r_pipe, w_pipe = IO.pipe
+
           data_set.each do |data|
             # Wait until worker is available and handle exit code from previous process
             unless available_workers.positive?
@@ -34,28 +36,51 @@ module Bucky
             end
             # Workers decrease when start working
             available_workers -= 1
-            fork { block.call(data) }
+            fork { block.call(data, w_pipe) }
           end
           # Handle all exit code in waitall
           Process.waitall.each do |child|
             Bucky::Core::TestCore::ExitHandler.instance.raise unless child[1].exitstatus.zero?
           end
+
+          w_pipe.close
+          results_set = collect_results_set(r_pipe)
+          r_pipe.close
+
+          results_set
         end
 
         def parallel_distribute_into_workers(data_set, max_processes, &block)
           # Group the data by remainder of index
           data_set_grouped = data_set.group_by.with_index { |_elem, index| index % max_processes }
+          r_pipe, w_pipe = IO.pipe
           # Use 'values' method to get only hash's key into an array
           data_set_grouped.values.each do |data_for_pre_worker|
             # Number of child process is equal to max_processes (or equal to data_set length when data_set length is less than max_processes)
             fork do
-              data_for_pre_worker.each { |data| block.call(data) }
+              data_for_pre_worker.each { |data| block.call(data, w_pipe) }
             end
           end
           # Handle all exit code in waitall
           Process.waitall.each do |child|
             Bucky::Core::TestCore::ExitHandler.instance.raise unless child[1].exitstatus.zero?
           end
+
+          w_pipe.close
+          results_set = collect_results_set(r_pipe)
+          r_pipe.close
+
+          results_set
+        end
+
+        def collect_results_set(r_pipe)
+          results_set = {}
+          r_pipe.each_line do |line|
+            r = JSON.parse(line)
+            results_set[r['test_class_name']] = r
+          end
+
+          results_set
         end
       end
 
@@ -69,6 +94,20 @@ module Bucky
           @tdo = Bucky::Core::Database::TestDataOperator.new
           @start_time = Time.now
           $job_id = @tdo.save_job_record_and_get_job_id(@start_time, @test_cond[:command_and_option])
+          @json_report = {
+            summary: {
+              cases_count: 0,
+              success_count: 0,
+              failure_count: 0,
+              job_id: $job_id,
+              test_category: test_cond[:test_category],
+              device: test_cond[:device],
+              labels: test_cond[:label],
+              exclude_labels: test_cond[:xlabel],
+              rerun_job_id: test_cond[:job],
+              round_count: 0
+            }
+          }
         end
 
         def run
@@ -102,25 +141,42 @@ module Bucky
           e2e_parallel_num = Bucky::Utils::Config.instance[:e2e_parallel_num]
           linkstatus_parallel_num = Bucky::Utils::Config.instance[:linkstatus_parallel_num]
           tcg = Bucky::Core::TestCore::TestClassGenerator.new(@test_cond)
-          case @test_cond[:test_category][0]
-          when 'e2e' then parallel_new_worker_each(test_suite_data, e2e_parallel_num) { |data| tcg.generate_test_class(data) }
+          case @test_cond[:test_category]
+          when 'e2e' then results_set = parallel_new_worker_each(test_suite_data, e2e_parallel_num) { |data, w_pipe| tcg.generate_test_class(data: data, w_pipe: w_pipe) }
           when 'linkstatus' then
-            link_status_url_log = {}
-            parallel_distribute_into_workers(test_suite_data, linkstatus_parallel_num) { |data| tcg.generate_test_class(data, link_status_url_log) }
+            linkstatus_url_log = {}
+            results_set = parallel_distribute_into_workers(test_suite_data, linkstatus_parallel_num) { |data, w_pipe| tcg.generate_test_class(data: data, linkstatus_url_log: linkstatus_url_log, w_pipe: w_pipe) }
           end
+
+          results_set
         end
 
         def execute_test
+          results_set = {}
           @re_test_count.times do |i|
             Bucky::Core::TestCore::ExitHandler.instance.reset
             $round = i + 1
+            @json_report[:summary][:round_count] = $round
             test_suite_data = load_test_suites
-            do_test_suites(test_suite_data)
+            results_set = do_test_suites(test_suite_data)
             @test_cond[:re_test_cond] = @tdo.get_ng_test_cases_at_last_execution(
               is_error: 1, job_id: $job_id, round: $round
             )
             break if @test_cond[:re_test_cond].empty?
           end
+
+          return unless @test_cond[:out]
+
+          results_set.each do |_class_name, res|
+            @json_report[:summary][:cases_count] += res['cases_count']
+            @json_report[:summary][:success_count] += res['success_count']
+            @json_report[:summary][:failure_count] += res['failure_count']
+          end
+
+          File.open(@test_cond[:out], 'w') do |f|
+            f.puts(@json_report.to_json)
+            puts "\nSave report : #{@test_cond[:out]}\n"
+          end
         end
       end
     end

data/lib/bucky/test_equipment/test_case/abst_test_case.rb

@@ -1,6 +1,7 @@
 # frozen_string_literal: true
 
 require 'test/unit'
+require 'json'
 require_relative '../../core/test_core/test_result'
 
 module Bucky
@@ -25,6 +26,12 @@ module Bucky
         def run(result)
           super
           @@this_result.result = result unless $debug
+          w_pipe.puts({
+            test_class_name: self.class.name,
+            cases_count: result.run_count,
+            success_count: result.pass_count,
+            failure_count: result.run_count - result.pass_count
+          }.to_json)
         end
 
         def setup

data/lib/bucky/test_equipment/verifications/status_checker.rb

@@ -62,7 +62,7 @@ module Bucky
           end
         end
 
-        def link_status_check(args)
+        def linkstatus_check(args)
           url = args[:url]
           device = args[:device]
           exclude_urls = args[:exclude_urls]
@@ -133,9 +133,12 @@ module Bucky
 
           # Exclude url if it has "*" in the last of it
           exclude_urls.each do |ex_url|
-            next unless ex_url.end_with?('*')
-
-            excluded_links.delete_if { |l| l.start_with?(ex_url.delete('*')) }
+            if ex_url.end_with?('*')
+              excluded_links.delete_if { |l| l.start_with?(ex_url.delete('*')) }
+            elsif ex_url.start_with?('/') && ex_url.end_with?('/')
+              ex_url.delete_prefix!('/').delete_suffix!('/')
+              excluded_links.delete_if { |l| l.match(/#{ex_url}/) }
+            end
           end
 
           excluded_links

data/lib/bucky/version.rb

@@ -2,6 +2,6 @@
 
 module Bucky
   module Version
-    VERSION = '0.10.15'
+    VERSION = '0.10.18'
   end
 end

data/system_testing/test_bucky_project/services/service_a/pc/scenarios/linkstatus/pc_link_exclude_asterisk.yml

@@ -0,0 +1,12 @@
+desc: pc linkstatus test suites
+device: pc
+service: service_a
+priority: high
+test_category: linkstatus
+exclude_urls:
+  - http://bucky.net/test*
+cases:
+  - case_name: pc_link_exclude_asterisk_1
+    desc: pc linkstatus test 1
+    urls:
+      - http://bucky.net

data/system_testing/test_bucky_project/services/service_a/pc/scenarios/linkstatus/pc_link_exclude_normal.yml

@@ -0,0 +1,12 @@
+desc: pc linkstatus test suites
+device: pc
+service: service_a
+priority: high
+test_category: linkstatus
+exclude_urls:
+  - http://bucky.net/test_page.html
+cases:
+  - case_name: pc_link_exclude_normal_1
+    desc: pc linkstatus test 1
+    urls:
+      - http://bucky.net

data/system_testing/test_bucky_project/services/service_a/pc/scenarios/linkstatus/pc_link_exclude_regex.yml

@@ -0,0 +1,12 @@
+desc: pc linkstatus test suites
+device: pc
+service: service_a
+priority: high
+test_category: linkstatus
+exclude_urls:
+  - /http://bucky.net/.*_page.*/
+cases:
+  - case_name: pc_link_exclude_regex_1
+    desc: pc linkstatus test 1
+    urls:
+      - http://bucky.net

data/system_testing/test_specification.md

@@ -11,9 +11,13 @@ docker-compose -f docker-compose.system-test.yml down
 ```
 
 # Test case specification
+
 ※ Only Japanese now.
+
 ※ テストケースNo.はbatsのケース説明部分に記載し、対応づけを行う
 
+## E2Eテスト実行機能
+
 | テスト条件 | テスト観点 | テストケース<br/>No. | テストケース | テスト手順 | 期待結果 |
 |:--|:--|--:|:--|:--|:--|
 | E2Eテスト実行機能 | Operateが正常に実行できるか<br/>・シナリオコードに実装されたOperateが実行できること<br/>・clickして遷移できること ※1種類のOperateができればOK<br/>ページタイトルで遷移したことを確認する | 1 | goを実行し正常に実行されること | 1. bucky run -t e2e -d -D pc -c pc_e2e_1<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>3. assert_titleメソッド実行 | goメソッドを実行後にページ遷移されていること<br/>（assert_titleメソッドの結果がOKであることを出力される文字列で判断） |
@@ -25,20 +29,33 @@ docker-compose -f docker-compose.system-test.yml down
 |  | setup/teardown_eachが正常に動作するか | 7 | setup_eachでgoを実行し正常に実行されること | 1. bucky run -t e2e -d -D pc -c setup_each_pc_e2e_1<br/>- 以下シナリオファイル内の処理 -<br/>2. setup内でgoメソッド実行 (http://bucky.net)<br/>3. testcase内でassert_titleメソッド実行 | goメソッドを実行後にページ遷移されていること<br/>（assert_titleメソッドの結果がOKであることを出力される文字列で判断） |
 |  |  | 8 | teardown_eachでgoを実行し正常に実行されること | 1. bucky run -t e2e -d -D pc -c teardown_each_pc_e2e_1<br/>- 以下シナリオファイル内の処理 -<br/>2. teardown内でgoメソッド実行 (http://bucky.net)<br/>3. testcase内でassert_titleメソッド実行 | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「0 failures, 0 errors」 と表示されること |
 |  |  | 9 | setup_each/teardownを実行するケースを複数ケース続けて実行して正常に動作すること | 1. bucky run -t e2e -d -D pc -c setup_teardown_each_pc_e2e_1,setup_teardown_each_pc_e2e_2 <br/>- 以下シナリオファイル内の処理 -<br/>2. setup内でgoメソッド実行 (http://bucky.net)<br/>3. assert_titleメソッド実行<br/>4. testcase内でteardown内でgoメソッド実行 (http://bucky.net)<br/>5. setup内でgoメソッド実行 (http://bucky.net)<br/>6. testcase内でassert_titleメソッド実行<br/>7. teardown内でgoメソッド実行 (http://bucky.net) | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「0 failures, 0 errors」 と表示されること |
-| LinkStatusテスト実行機能 | 起点URLの検証が正しく実施できるか | 10 | linkstatusを実行し、起点URLが検証されること | 1. bucky run -t linkstatus -d -D pc -c pc_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行 | 出力に http://bucky.net が含まれること |
-|  | ページ内のリンクの検証が正しく実施できるか | 11 | linkstatusを実行し、起点ページ内のリンクが検証されること | 1. bucky run -t linkstatus -d -D pc -c pc_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html に対してLinkチェック実行 | 出力に http://bucky.net/test_page.htmlが含まれること |
-|  | 各デバイス(PC/SP)のUAで正常に実行できるか | 12 | デバイスPCでlinkstatusを実行し、正常に動作すること | 1. bucky run -t linkstatus -d -D pc -c pc_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html に対してLinkチェック実行 | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
-|  |  | 13 | linkstatusNGテストを実行し、正常に動作すること | 1. bucky run -t linkstatus -d -D pc -c pc_link_2<br/>2. http://bucky-error.net に対してhttpリクエストチェック実行 | 終了後のステータスが1であること |
-|  |  | 14 | デバイスSPでlinkstatusを実行し、正常に動作すること | 1. bucky run -t linkstatus -d -D sp -c sp_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html チェック実行 | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
-| テスト用のプロジェクト作成機能 | 下記の構造のディレクトリ、ファイルが生成されること<br/>(./template/new 以下の内容）<br/>.<br/>├── config<br/>│ ├── bucky_config.yml<br/>│ ├── e2e_config.yml<br/>│ ├── for_spec<br/>│ │ └── test.yml<br/>│ ├── linkstatus_config.yml<br/>│ └── test_db_config.yml<br/>├── services<br/>│ └── README.md<br/>└── system<br/>├── evidences<br/>│ ├── README.md<br/>│ └── screen_shots<br/>│ └── README.md<br/>└── logs<br/>└── README.md | 15 | newコマンド実行後に期待通りのファイル、ディレクトリが作成されていること | 1. bucky new test_project | 対象ディレクトリとファイルが存在していること |
-| ページオブジェクト・パーツファイル作成機能 | 指定のサービス名、デバイスのディレクトリ以下に指定のページ名で.rbファイルと.ymlファイルが生成されること | 16 | make serviceコマンド実行後に期待通りのファイルが作成されていること | 1. (事前条件) bucky new test_project<br/>2. bucky make service test_service | 対象ディレクトリとファイルが存在していること |
-|  |  | 17 | make pageコマンド実行後に期待通りのファイルが作成されていること | 1. (事前条件) bucky new test_project<br/>2. (事前条件) bucky make service test_service<br/>3. bucky make page test_page | 対象ディレクトリとファイルが存在していること |
-| 未定義コマンド実行時の動き | 出力されるメッセージに Invalid command error. が含まれるか<br/>終了ステータスが 0 以外になるか | 18 | 未定義コマンド実行後にエラー終了すること | 1. bucky hoge fuga | 終了後のステータスが0以外であること |
-| whenを使用しての実行時の動き | 出力されるメッセージに click が含まれるか<br/>例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「0 failures, 0 errors」 と表示されること | 19 | 条件指定をしたテスト実行で不具合なくprocが実行されること | 1. STAGE=development bucky run -d -D -pc -c pc_e2e_4<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. whenを使ったclickメソッド実行 | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「0 failures, 0 errors」 と表示されること |
-|  | 出力されるメッセージに click が含まれないこと（終了後のステータスが0であること） | 20 | 条件指定をしないテスト実行で該当のprocが実行されないこと | 1. bucky run -d -D -pc -c pc_e2e_4<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. whenを使ったclickメソッドは実行されない | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「click」 が表示されないこと |
-|  |  | 21 | 違う条件を指定したテスト実行で該当のprocが実行されないこと | 1. STAGE=staging bucky run -d -D -pc -c pc_e2e_4<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. whenを使ったclickメソッドは実行されない | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「click」 が表示されないこと |
-| 複数パーツ取得・選択機能 | Partファイルで複数取得、番号指定でエレメントが取得できること | 22 | CSSセレクタで指定したエレメントの２つ目の要素をクリックできること | 1. bucky run -t e2e -d -D pc -c pc_e2e_5<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. assert_textメソッド実行 | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
-| PageObjectでのWebElement取得 | PageObjectファイルからパーツ（WebElement）が取得できること | 23 | PageObjectファイルからパーツ名でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_6<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. PageObjectメソッド click_single_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
-|  |  | 24 | PageObjectファイルからパーツ名[数字]でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_7<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. PageObjectメソッド click_multiple_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
-| VerificationでのWebElement取得 | Verificationファイルからパーツ（WebElement）が取得できること | 25 | Verificationファイルからパーツ名でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_8<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. Verificationメソッド click_single_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
-|  |  | 26 | Verificationファイルからパーツ名[数字]でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_9<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. Verificationメソッド click_multiple_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
+| whenを使用しての実行時の動き | 出力されるメッセージに click が含まれるか<br/>例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「0 failures, 0 errors」 と表示されること | 10 | 条件指定をしたテスト実行で不具合なくprocが実行されること | 1. STAGE=development bucky run -d -D -pc -c pc_e2e_4<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. whenを使ったclickメソッド実行 | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「0 failures, 0 errors」 と表示されること |
+|  | 出力されるメッセージに click が含まれないこと（終了後のステータスが0であること） | 11 | 条件指定をしないテスト実行で該当のprocが実行されないこと | 1. bucky run -d -D -pc -c pc_e2e_4<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. whenを使ったclickメソッドは実行されない | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「click」 が表示されないこと |
+|  |  | 12 | 違う条件を指定したテスト実行で該当のprocが実行されないこと | 1. STAGE=staging bucky run -d -D -pc -c pc_e2e_4<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. whenを使ったclickメソッドは実行されない | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「click」 が表示されないこと |
+| 複数パーツ取得・選択機能 | Partファイルで複数取得、番号指定でエレメントが取得できること | 13 | CSSセレクタで指定したエレメントの２つ目の要素をクリックできること | 1. bucky run -t e2e -d -D pc -c pc_e2e_5<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. assert_textメソッド実行 | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
+| PageObjectでのWebElement取得 | PageObjectファイルからパーツ（WebElement）が取得できること | 14 | PageObjectファイルからパーツ名でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_6<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. PageObjectメソッド click_single_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
+|  |  | 15 | PageObjectファイルからパーツ名[数字]でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_7<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. PageObjectメソッド click_multiple_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
+| VerificationでのWebElement取得 | Verificationファイルからパーツ（WebElement）が取得できること | 16 | Verificationファイルからパーツ名でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_8<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. Verificationメソッド click_single_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
+|  |  | 17 | Verificationファイルからパーツ名[数字]でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_9<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. Verificationメソッド click_multiple_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
+
+## Linkstatusテスト実行機能
+
+| テスト条件 | テスト観点 | テストケース<br/>No. | テストケース | テスト手順 | 期待結果 |
+|:--|:--|--:|:--|:--|:--|
+| LinkStatusテスト実行機能 | 起点URLの検証が正しく実施できるか | 1 | linkstatusを実行し、起点URLが検証されること | 1. bucky run -t linkstatus -d -D pc -c pc_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行 | 出力に http://bucky.net が含まれること |
+|  | ページ内のリンクの検証が正しく実施できるか | 2 | linkstatusを実行し、起点ページ内のリンクが検証されること | 1. bucky run -t linkstatus -d -D pc -c pc_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html に対してLinkチェック実行 | 出力に http://bucky.net/test_page.htmlが含まれること |
+|  | 各デバイス(PC/SP)のUAで正常に実行できるか | 3 | デバイスPCでlinkstatusを実行し、正常に動作すること | 1. bucky run -t linkstatus -d -D pc -c pc_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html に対してLinkチェック実行 | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
+|  |  | 4 | linkstatusNGテストを実行し、正常に動作すること | 1. bucky run -t linkstatus -d -D pc -c pc_link_2<br/>2. http://bucky-error.net に対してhttpリクエストチェック実行 | 終了後のステータスが1であること |
+|  |  | 5 | デバイスSPでlinkstatusを実行し、正常に動作すること | 1. bucky run -t linkstatus -d -D sp -c sp_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html チェック実行 | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
+|  |  | 6 | 通常のURL除外機能が正常に動作すること | 1. bucky run -t linkstatus -d -D pc -c pc_link_exclude_normal_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html チェック実行 | 終了後のステータスが0であること<br/>→ 出力に http://bucky.net/test_page.htmlが含まれないこと |
+|  |  | 7 | アスタリスクを含むURL除外機能が正常に動作すること | 1. bucky run -t linkstatus -d -D pc -c pc_link_exclude_asterisk_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html チェック実行 | 終了後のステータスが0であること<br/>→ 出力に http://bucky.net/test_page.htmlが含まれないこと |
+|  |  | 8 | 正規表現によるURL除外機能が正常に動作すること | 1. bucky run -t linkstatus -d -D pc -c pc_link_exclude_regex_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html チェック実行 | 終了後のステータスが0であること<br/>→ 出力に http://bucky.net/test_page.htmlが含まれないこと |
+
+## Buckyコマンド実行機能
+
+| テスト条件 | テスト観点 | テストケース<br/>No. | テストケース | テスト手順 | 期待結果 |
+|:--|:--|--:|:--|:--|:--|
+| テスト用のプロジェクト作成機能 | 下記の構造のディレクトリ、ファイルが生成されること<br/>(./template/new 以下の内容）<br/>.<br/>├── config<br/>│ ├── bucky_config.yml<br/>│ ├── e2e_config.yml<br/>│ ├── for_spec<br/>│ │ └── test.yml<br/>│ ├── linkstatus_config.yml<br/>│ └── test_db_config.yml<br/>├── services<br/>│ └── README.md<br/>└── system<br/>├── evidences<br/>│ ├── README.md<br/>│ └── screen_shots<br/>│ └── README.md<br/>└── logs<br/>└── README.md | 1 | newコマンド実行後に期待通りのファイル、ディレクトリが作成されていること | 1. bucky new test_project | 対象ディレクトリとファイルが存在していること |
+| ページオブジェクト・パーツファイル作成機能 | 指定のサービス名、デバイスのディレクトリ以下に指定のページ名で.rbファイルと.ymlファイルが生成されること | 2 | make serviceコマンド実行後に期待通りのファイルが作成されていること | 1. (事前条件) bucky new test_project<br/>2. bucky make service test_service | 対象ディレクトリとファイルが存在していること |
+|  |  | 3 | make pageコマンド実行後に期待通りのファイルが作成されていること | 1. (事前条件) bucky new test_project<br/>2. (事前条件) bucky make service test_service<br/>3. bucky make page test_page | 対象ディレクトリとファイルが存在していること |
+| 未定義コマンド実行時の動き | 出力されるメッセージに Invalid command error. が含まれるか<br/>終了ステータスが 0 以外になるか | 4 | 未定義コマンド実行後にエラー終了すること | 1. bucky hoge fuga | 終了後のステータスが0以外であること |

data/system_testing/testing_code/command.bats

@@ -13,19 +13,19 @@ teardown() {
   rm -rf /tmp/$BUCKY_PROJECT_NAME
 }
 
-@test "#15 After executing 'new' command, expected files and directories are created" {
+@test "[command] #1 After executing 'new' command, expected files and directories are created" {
   run diff /bucky-core/template/new/ /tmp/$BUCKY_PROJECT_NAME
   [ $status -eq 0 ]
 }
 
-@test "#16 After executing 'make service' command, expected directory is created" {
+@test "[command] #2 After executing 'make service' command, expected directory is created" {
   cd /tmp/$BUCKY_PROJECT_NAME
   bucky make service $TEST_SERVICE
   run ls /tmp/$BUCKY_PROJECT_NAME/services/$TEST_SERVICE
   [ $status -eq 0 ]
 }
 
-@test "#17 After executing 'make page' command, expected page and parts file are created" {
+@test "[command] #3 After executing 'make page' command, expected page and parts file are created" {
   cd /tmp/$BUCKY_PROJECT_NAME
   bucky make service $TEST_SERVICE
   bucky make page test_page --service $TEST_SERVICE --device pc
@@ -35,7 +35,7 @@ teardown() {
   [ $status -eq 0 ]
 }
 
-@test "#18 After executing undefined command, show error message and exit" {
+@test "[command] #4 After executing undefined command, show error message and exit" {
   cd /tmp/$BUCKY_PROJECT_NAME
   run bucky hoge fuga
   [ $(expr "$output" : ".*Invalid command error.*") -ne 0 ]

data/system_testing/testing_code/e2e.bats

@@ -4,99 +4,99 @@ setup() {
   cd /bucky-core/system_testing/test_bucky_project
 }
 
-@test "#01 After executing e2e operate go, results have no failures nor errors" {
+@test "[e2e] #01 After executing e2e operate go, results have no failures nor errors" {
   run bucky run -t e2e -d -D pc -c pc_e2e_1
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#02 After executing e2e verify assert_title, results contain verify words, no failures/errors and exit code is 0" {
+@test "[e2e] #02 After executing e2e verify assert_title, results contain verify words, no failures/errors and exit code is 0" {
   run bucky run -t e2e -d -D pc -c pc_e2e_1
   [ $status -eq 0 ]
   [ $(expr "$output" : ".*:verify.*assert_title.*") -ne 0 ]
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#03 After executing e2e verify assert_title, results contain verify words and 1 failure and exit code is 1" {
+@test "[e2e] #03 After executing e2e verify assert_title, results contain verify words and 1 failure and exit code is 1" {
   run bucky run -t e2e -d -D pc -c pc_e2e_2
   [ $status -eq 1 ]
   [ $(expr "$output" : ".*:verify.*assert_title.*") -ne 0 ]
   [ $(expr "$output" : ".*1 failures.*") -ne 0 ]
 }
 
-@test "#04 After executing e2e on pc , results contain 'Linux' and no failures/errors." {
+@test "[e2e] #04 After executing e2e on pc , results contain 'Linux' and no failures/errors." {
   run bucky run -t e2e -d -D pc -c pc_e2e_3
   [ $(expr "$output" : ".*Linux.*") -ne 0 ]
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#05 After executing e2e on sp , results contain 'iPhone' and no failures/errors." {
+@test "[e2e] #05 After executing e2e on sp , results contain 'iPhone' and no failures/errors." {
   run bucky run -t e2e -d -D sp -c sp_e2e_1
   [ $(expr "$output" : ".*iPhone.*") -ne 0 ]
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#06 After executing e2e on tablet , results contain 'iPad' and no failures/errors." {
+@test "[e2e] #06 After executing e2e on tablet , results contain 'iPad' and no failures/errors." {
   run bucky run -t e2e -d -D tablet -c tablet_e2e_1
   [ $(expr "$output" : ".*iPad.*") -ne 0 ]
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#07 After executing e2e operate go with setup each, results have no failures nor errors" {
+@test "[e2e] #07 After executing e2e operate go with setup each, results have no failures nor errors" {
   run bucky run -d -c setup_each_pc_e2e_1
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#08 After executing e2e operate go with teardown each, results have no failures nor errors" {
+@test "[e2e] #08 After executing e2e operate go with teardown each, results have no failures nor errors" {
   run bucky run -d -c teardown_each_pc_e2e_1
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#09 When setup and teardown is added, multiple test cases execute normally, results have no failures nor errors" {
+@test "[e2e] #09 When setup and teardown is added, multiple test cases execute normally, results have no failures nor errors" {
   run bucky run -d -s setup_teardown_each_pc_e2e
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#19 When 'when condition' is added, results have no failures nor errors" {
+@test "[e2e] #10 When 'when condition' is added, results have no failures nor errors" {
   export STAGE=development
   run bucky run -t e2e -d -D pc -c pc_e2e_4
   [ $(expr "$output" : ".*click.*") -ne 0 ]
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#20 When 'when condition' is not added, results have no click procedure" {
+@test "[e2e] #11 When 'when condition' is not added, results have no click procedure" {
   run bucky run -t e2e -d -D pc -c pc_e2e_4
   [ $(expr "$output" : ".*click.*") -eq 0 ]
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#21 When 'different when condition' is added, results have no click procedure" {
+@test "[e2e] #12 When 'different when condition' is added, results have no click procedure" {
   export STAGE=staging
   run bucky run -t e2e -d -D pc -c pc_e2e_4
   [ $(expr "$output" : ".*click.*") -eq 0 ]
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#22 When click second element from scenario, results have no failures nor errors" {
+@test "[e2e] #13 When click second element from scenario, results have no failures nor errors" {
   run bucky run -t e2e -d -D pc -c pc_e2e_5
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#23 When click element from PageObject file, results have no failures nor errors" {
+@test "[e2e] #14 When click element from PageObject file, results have no failures nor errors" {
   run bucky run -t e2e -d -D pc -c pc_e2e_6
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#24 When click second element from PageObject file, results have no failures nor errors" {
+@test "[e2e] #15 When click second element from PageObject file, results have no failures nor errors" {
   run bucky run -t e2e -d -D pc -c pc_e2e_7
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#25 When click element from Verification file, results have no failures nor errors" {
+@test "[e2e] #16 When click element from Verification file, results have no failures nor errors" {
   run bucky run -t e2e -d -D pc -c pc_e2e_8
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#26 When click second element from Verification file, results have no failures nor errors" {
+@test "[e2e] #17 When click second element from Verification file, results have no failures nor errors" {
   run bucky run -t e2e -d -D pc -c pc_e2e_9
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }

data/system_testing/testing_code/linkstatus.bats

@@ -4,25 +4,44 @@ setup() {
   cd /bucky-core/system_testing/test_bucky_project
 }
 
-@test "#10,#12 After executing linkstatus on pc , results contain target base url, no failures/errors and exit code is 0." {
+@test "[linkstatus] #1, #3 After executing linkstatus on pc, results contain target base url, no failures/errors and exit code is 0." {
   run bucky run -t linkstatus -d -D pc -c pc_link_1
   [ $status -eq 0 ]
   [ $(expr "$output" : ".*http://bucky\.net.*") -ne 0 ]
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#11 After executing linkstatus on pc , results contain target link url and no failures/errors." {
+@test "[linkstatus] #2 After executing linkstatus on pc, results contain target link url and no failures/errors." {
   run bucky run -t linkstatus -d -D pc -c pc_link_1
   [ $(expr "$output" : ".*http://bucky\.net/test_page.html.*") -ne 0 ]
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
 }
 
-@test "#13 After executing linkstatus failed test, exit code is 1" {
+@test "[linkstatus] #4 After executing linkstatus failed test, exit code is 1" {
   run bucky run -t linkstatus -d -D pc -c pc_link_2
   [ $status -eq 1 ]
 }
 
-@test "#14 After executing linkstatus on sp , results have no failures nor errors" {
+@test "[linkstatus] #5 After executing linkstatus on sp, results have no failures nor errors" {
   run bucky run -t linkstatus -d -D sp -c sp_link_1
   [ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
-}
+}
+
+@test "[linkstatus] #6 After executing linkstatus with excluding by normal, results not contain target link url and no failures/errors." {
+  run bucky run -t linkstatus -d -D pc -c pc_link_exclude_normal_1
+  [ $status -eq 0 ]
+  [ $(expr "$output" : ".*http://bucky\.net/test_page.html.*") -eq 0 ]
+}
+
+@test "[linkstatus] #7 After executing linkstatus with excluding by asterisk, results not contain target link url and no failures/errors." {
+  run bucky run -t linkstatus -d -D pc -c pc_link_exclude_asterisk_1
+  [ $status -eq 0 ]
+  [ $(expr "$output" : ".*http://bucky\.net/test_page.html.*") -eq 0 ]
+}
+
+@test "[linkstatus] #8 After executing linkstatus with excluding by regex, results not contain target link url and no failures/errors." {
+  run bucky run -t linkstatus -d -D pc -c pc_link_exclude_regex_1
+  [ $status -eq 0 ]
+  [ $(expr "$output" : ".*http://bucky\.net/test_page.html.*") -eq 0 ]
+}
+

metadata

@@ -1,7 +1,7 @@
 --- !ruby/object:Gem::Specification
 name: bucky-core
 version: !ruby/object:Gem::Version
-  version: 0.10.15
+  version: 0.10.18
 platform: ruby
 authors:
 - NaotoKishino
@@ -13,7 +13,7 @@ authors:
 autorequire: 
 bindir: exe
 cert_chain: []
-date: 2021-02-26 00:00:00.000000000 Z
+date: 2022-05-23 00:00:00.000000000 Z
 dependencies:
 - !ruby/object:Gem::Dependency
   name: awesome_print
@@ -330,6 +330,7 @@ files:
 - ".rubocop.yml"
 - ".rubocop_todo.yml"
 - Dockerfile
+- Dockerfile.dev
 - Dockerfile.system-test
 - Gemfile
 - Gemfile.lock
@@ -425,6 +426,9 @@ files:
 - system_testing/test_bucky_project/services/service_a/pc/scenarios/e2e/setup_teardown_each_pc_e2e.yml
 - system_testing/test_bucky_project/services/service_a/pc/scenarios/e2e/teardown_each_pc_e2e.yml
 - system_testing/test_bucky_project/services/service_a/pc/scenarios/linkstatus/pc_link.yml
+- system_testing/test_bucky_project/services/service_a/pc/scenarios/linkstatus/pc_link_exclude_asterisk.yml
+- system_testing/test_bucky_project/services/service_a/pc/scenarios/linkstatus/pc_link_exclude_normal.yml
+- system_testing/test_bucky_project/services/service_a/pc/scenarios/linkstatus/pc_link_exclude_regex.yml
 - system_testing/test_bucky_project/services/service_a/pc/verifications/index.rb
 - system_testing/test_bucky_project/services/service_a/sp/pageobject/index.rb
 - system_testing/test_bucky_project/services/service_a/sp/parts/index.yml