bucky-core 0.9.17 → 0.9.18
Sign up to get free protection for your applications and to get access to all the features.
- checksums.yaml +4 -4
- data/Dockerfile +2 -0
- data/Gemfile.lock +10 -11
- data/example/hands-on/services/bucky_hands_on/pc/scenarios/e2e/{search_and_asseret.yml → search_and_assert.yml} +0 -0
- data/exe/bucky +3 -0
- data/lib/bucky/core/test_core/exit_handler.rb +29 -0
- data/lib/bucky/core/test_core/test_manager.rb +15 -5
- data/lib/bucky/test_equipment/user_operation/user_operation_helper.rb +2 -1
- data/lib/bucky/version.rb +1 -1
- data/system_testing/test_bucky_project/services/service_a/pc/scenarios/linkstatus/pc_link.yml +5 -1
- data/system_testing/test_specification.md +17 -16
- data/system_testing/testing_code/command.bats +4 -4
- data/system_testing/testing_code/e2e.bats +12 -10
- data/system_testing/testing_code/linkstatus.bats +11 -7
- metadata +4 -3
checksums.yaml
CHANGED
|
@@ -1,7 +1,7 @@
|
|
|
1
1
|
---
|
|
2
2
|
SHA1:
|
|
3
|
-
metadata.gz:
|
|
4
|
-
data.tar.gz:
|
|
3
|
+
metadata.gz: 1c9a35a6db4e92a6f47ff536e4d29b4cd7e1d7b2
|
|
4
|
+
data.tar.gz: 11fae9da7bab42bec0860e8fd02fc108e143ab2a
|
|
5
5
|
SHA512:
|
|
6
|
-
metadata.gz:
|
|
7
|
-
data.tar.gz:
|
|
6
|
+
metadata.gz: 99a3bdb82f048e72fd808db82207e74dcbaad1c03cfca5ab038b56a313af970e3b419bd0076551cfd6779a21e97b8cf8af34d6ed440fe18eb91c3faa436d324c
|
|
7
|
+
data.tar.gz: 43a3a5a2cfcdee8861151091d0833c90eae749938084a9e5cc11c593d62c2e3990427c696415a196ca84bf582a048cdf66bc6c0ee0ecf6278c2297f4f65f7083
|
data/Dockerfile
CHANGED
data/Gemfile.lock
CHANGED
|
@@ -1,7 +1,7 @@
|
|
|
1
1
|
PATH
|
|
2
2
|
remote: .
|
|
3
3
|
specs:
|
|
4
|
-
bucky-core (0.9.
|
|
4
|
+
bucky-core (0.9.17)
|
|
5
5
|
addressable (~> 2.5)
|
|
6
6
|
color_echo (~> 3.1)
|
|
7
7
|
json (~> 2.1)
|
|
@@ -15,16 +15,15 @@ PATH
|
|
|
15
15
|
GEM
|
|
16
16
|
remote: https://rubygems.org/
|
|
17
17
|
specs:
|
|
18
|
-
addressable (2.
|
|
19
|
-
public_suffix (>= 2.0.2, <
|
|
18
|
+
addressable (2.7.0)
|
|
19
|
+
public_suffix (>= 2.0.2, < 5.0)
|
|
20
20
|
ansi (1.5.0)
|
|
21
21
|
ast (2.4.0)
|
|
22
22
|
awesome_print (1.8.0)
|
|
23
23
|
binding_of_caller (0.8.0)
|
|
24
24
|
debug_inspector (>= 0.0.1)
|
|
25
25
|
byebug (9.1.0)
|
|
26
|
-
childprocess (
|
|
27
|
-
rake (< 13.0)
|
|
26
|
+
childprocess (3.0.0)
|
|
28
27
|
coderay (1.1.2)
|
|
29
28
|
color_echo (3.1.1)
|
|
30
29
|
debug_inspector (0.0.3)
|
|
@@ -50,7 +49,7 @@ GEM
|
|
|
50
49
|
pry-stack_explorer (0.4.9.2)
|
|
51
50
|
binding_of_caller (>= 0.7)
|
|
52
51
|
pry (>= 0.9.11)
|
|
53
|
-
public_suffix (
|
|
52
|
+
public_suffix (4.0.1)
|
|
54
53
|
rainbow (3.0.0)
|
|
55
54
|
rake (12.3.0)
|
|
56
55
|
rspec (3.7.0)
|
|
@@ -77,10 +76,10 @@ GEM
|
|
|
77
76
|
unicode-display_width (>= 1.4.0, < 1.6)
|
|
78
77
|
ruby-mysql (2.9.14)
|
|
79
78
|
ruby-progressbar (1.10.0)
|
|
80
|
-
rubyzip (
|
|
81
|
-
selenium-webdriver (3.142.
|
|
82
|
-
childprocess (>= 0.5, <
|
|
83
|
-
rubyzip (
|
|
79
|
+
rubyzip (2.0.0)
|
|
80
|
+
selenium-webdriver (3.142.6)
|
|
81
|
+
childprocess (>= 0.5, < 4.0)
|
|
82
|
+
rubyzip (>= 1.2.2)
|
|
84
83
|
sequel (4.49.0)
|
|
85
84
|
simplecov (0.15.1)
|
|
86
85
|
docile (~> 1.1.0)
|
|
@@ -91,7 +90,7 @@ GEM
|
|
|
91
90
|
hirb
|
|
92
91
|
simplecov
|
|
93
92
|
simplecov-html (0.10.2)
|
|
94
|
-
test-unit (3.3.
|
|
93
|
+
test-unit (3.3.4)
|
|
95
94
|
power_assert
|
|
96
95
|
unicode-display_width (1.5.0)
|
|
97
96
|
|
|
File without changes
|
data/exe/bucky
CHANGED
|
@@ -6,6 +6,7 @@ require 'optparse'
|
|
|
6
6
|
require 'color_echo'
|
|
7
7
|
require 'fileutils'
|
|
8
8
|
require_relative '../lib/bucky/version'
|
|
9
|
+
require_relative '../lib/bucky/core/test_core/exit_handler'
|
|
9
10
|
|
|
10
11
|
# Color Settings
|
|
11
12
|
CE.fg(:cyan)
|
|
@@ -135,6 +136,7 @@ if ARGV == RUN_COMMAND
|
|
|
135
136
|
test_cond.each { |k, v| test_cond[k] = v.split(',') if v.instance_of?(String) }
|
|
136
137
|
require_relative '../lib/bucky/core/test_core/test_manager'
|
|
137
138
|
Bucky::Core::TestCore::TestManager.new(test_cond).run
|
|
139
|
+
Bucky::Core::TestCore::ExitHandler.instance.bucky_exit
|
|
138
140
|
|
|
139
141
|
elsif ARGV == RERUN_COMMAND
|
|
140
142
|
$bucky_home_dir = Dir.pwd
|
|
@@ -146,6 +148,7 @@ elsif ARGV == RERUN_COMMAND
|
|
|
146
148
|
test_cond.each { |k, v| test_cond[k] = v.split(',') if v.instance_of?(String) }
|
|
147
149
|
require_relative '../lib/bucky/core/test_core/test_manager'
|
|
148
150
|
Bucky::Core::TestCore::TestManager.new(test_cond).rerun
|
|
151
|
+
Bucky::Core::TestCore::ExitHandler.instance.bucky_exit
|
|
149
152
|
|
|
150
153
|
elsif ARGV == LINT_COMMAND
|
|
151
154
|
$bucky_home_dir = Dir.pwd
|
|
@@ -0,0 +1,29 @@
|
|
|
1
|
+
# frozen_string_literal: true
|
|
2
|
+
|
|
3
|
+
require 'singleton'
|
|
4
|
+
|
|
5
|
+
module Bucky
|
|
6
|
+
module Core
|
|
7
|
+
module TestCore
|
|
8
|
+
class ExitHandler
|
|
9
|
+
include Singleton
|
|
10
|
+
|
|
11
|
+
def initialize
|
|
12
|
+
@exit_code = 0
|
|
13
|
+
end
|
|
14
|
+
|
|
15
|
+
def reset
|
|
16
|
+
@exit_code = 0
|
|
17
|
+
end
|
|
18
|
+
|
|
19
|
+
def raise
|
|
20
|
+
@exit_code = 1
|
|
21
|
+
end
|
|
22
|
+
|
|
23
|
+
def bucky_exit
|
|
24
|
+
exit @exit_code
|
|
25
|
+
end
|
|
26
|
+
end
|
|
27
|
+
end
|
|
28
|
+
end
|
|
29
|
+
end
|
|
@@ -4,6 +4,7 @@ require 'parallel'
|
|
|
4
4
|
require_relative '../test_core/test_case_loader'
|
|
5
5
|
require_relative '../../utils/config'
|
|
6
6
|
require_relative './test_class_generator'
|
|
7
|
+
require_relative '../test_core/exit_handler'
|
|
7
8
|
|
|
8
9
|
module Bucky
|
|
9
10
|
module Core
|
|
@@ -26,13 +27,19 @@ module Bucky
|
|
|
26
27
|
Signal.trap('CLD') { available_workers += 1 }
|
|
27
28
|
|
|
28
29
|
data_set.each do |data|
|
|
29
|
-
# Wait until worker is available
|
|
30
|
-
|
|
30
|
+
# Wait until worker is available and handle exit code from previous process
|
|
31
|
+
unless available_workers.positive?
|
|
32
|
+
Process.wait
|
|
33
|
+
Bucky::Core::TestCore::ExitHandler.instance.raise unless $CHILD_STATUS.exitstatus.zero?
|
|
34
|
+
end
|
|
31
35
|
# Workers decrease when start working
|
|
32
36
|
available_workers -= 1
|
|
33
37
|
fork { block.call(data) }
|
|
34
38
|
end
|
|
35
|
-
|
|
39
|
+
# Handle all exit code in waitall
|
|
40
|
+
Process.waitall.each do |child|
|
|
41
|
+
Bucky::Core::TestCore::ExitHandler.instance.raise unless child[1].exitstatus.zero?
|
|
42
|
+
end
|
|
36
43
|
end
|
|
37
44
|
|
|
38
45
|
def parallel_distribute_into_workers(data_set, max_processes, &block)
|
|
@@ -45,7 +52,10 @@ module Bucky
|
|
|
45
52
|
data_for_pre_worker.each { |data| block.call(data) }
|
|
46
53
|
end
|
|
47
54
|
end
|
|
48
|
-
|
|
55
|
+
# Handle all exit code in waitall
|
|
56
|
+
Process.waitall.each do |child|
|
|
57
|
+
Bucky::Core::TestCore::ExitHandler.instance.raise unless child[1].exitstatus.zero?
|
|
58
|
+
end
|
|
49
59
|
end
|
|
50
60
|
end
|
|
51
61
|
|
|
@@ -92,7 +102,6 @@ module Bucky
|
|
|
92
102
|
e2e_parallel_num = Bucky::Utils::Config.instance[:e2e_parallel_num]
|
|
93
103
|
linkstatus_parallel_num = Bucky::Utils::Config.instance[:linkstatus_parallel_num]
|
|
94
104
|
tcg = Bucky::Core::TestCore::TestClassGenerator.new(@test_cond)
|
|
95
|
-
|
|
96
105
|
case @test_cond[:test_category][0]
|
|
97
106
|
when 'e2e' then parallel_new_worker_each(test_suite_data, e2e_parallel_num) { |data| tcg.generate_test_class(data) }
|
|
98
107
|
when 'linkstatus' then
|
|
@@ -103,6 +112,7 @@ module Bucky
|
|
|
103
112
|
|
|
104
113
|
def execute_test
|
|
105
114
|
@re_test_count.times do |i|
|
|
115
|
+
Bucky::Core::TestCore::ExitHandler.instance.reset
|
|
106
116
|
$round = i + 1
|
|
107
117
|
test_suite_data = load_test_suites
|
|
108
118
|
do_test_suites(test_suite_data)
|
|
@@ -26,7 +26,8 @@ module Bucky
|
|
|
26
26
|
end
|
|
27
27
|
|
|
28
28
|
def input(args)
|
|
29
|
-
|
|
29
|
+
# when input successfully, return of click is nil.
|
|
30
|
+
wait_until_helper(5, 0.1, Selenium::WebDriver::Error::StaleElementReferenceError) { @pages.get_part(args).send_keys(args[:word]).nil? }
|
|
30
31
|
end
|
|
31
32
|
|
|
32
33
|
# Clear textbox
|
data/lib/bucky/version.rb
CHANGED
|
@@ -17,9 +17,9 @@ docker-compose -f docker-compose.system-test.yml down
|
|
|
17
17
|
| テスト条件 | テスト観点 | テストケース<br/>No. | テストケース | テスト手順 | 期待結果 |
|
|
18
18
|
|:--|:--|--:|:--|:--|:--|
|
|
19
19
|
| E2Eテスト実行機能 | Operateが正常に実行できるか<br/>・シナリオコードに実装されたOperateが実行できること<br/>・clickして遷移できること ※1種類のOperateができればOK<br/>ページタイトルで遷移したことを確認する | 1 | goを実行し正常に実行されること | 1. bucky run -t e2e -d -D pc -c pc_e2e_1<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>3. assert_titleメソッド実行 | goメソッドを実行後にページ遷移されていること<br/>（assert_titleメソッドの結果がOKであることを出力される文字列で判断） |
|
|
20
|
-
| | Verifyが正常に実行できるか<br/>・シナリオコードに実装されたVerifyが実行できること<br/>・titleの確認ができること ※1種類のVerifyが確認できればOK | 2 | assert_titleを実行し、正常に動作すること | 1. bucky run -t e2e -d -D pc -c pc_e2e_1<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>3. assert_titleメソッド実行 | assert_titleメソッド実行後にエラーが発生しないこと<br
|
|
21
|
-
| | | 3 | assert_titleを実行し、期待値と実際値が異なる場合に正常に検証NG時の動作をすること | 1. bucky run -t e2e -d -D pc -c pc_e2e_2<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>3. assert_titleメソッド実行 | assert_titleメソッド実行後に検証NG
|
|
22
|
-
| | 各デバイスのUAで正常に実行できるか | 4 | デバイスPCで実行し、正常にテストが実行されること | 1. bucky run -t e2e -d -D pc -c pc_e2e_3<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. assert_textメソッド実行 | assert_textでUseragentを表す文字列をチェックした結果OKであることを出力される文字列で判断<br/><br/>
|
|
20
|
+
| | Verifyが正常に実行できるか<br/>・シナリオコードに実装されたVerifyが実行できること<br/>・titleの確認ができること ※1種類のVerifyが確認できればOK | 2 | assert_titleを実行し、正常に動作すること | 1. bucky run -t e2e -d -D pc -c pc_e2e_1<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>3. assert_titleメソッド実行 | assert_titleメソッド実行後にエラーが発生しないこと<br/>終了後のステータスが0であること |
|
|
21
|
+
| | | 3 | assert_titleを実行し、期待値と実際値が異なる場合に正常に検証NG時の動作をすること | 1. bucky run -t e2e -d -D pc -c pc_e2e_2<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>3. assert_titleメソッド実行 | assert_titleメソッド実行後に検証NG判定されたことを表す文字列が表示されること<br/>終了後のステータスが1であること |
|
|
22
|
+
| | 各デバイスのUAで正常に実行できるか | 4 | デバイスPCで実行し、正常にテストが実行されること | 1. bucky run -t e2e -d -D pc -c pc_e2e_3<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. assert_textメソッド実行 | assert_textでUseragentを表す文字列をチェックした結果OKであることを出力される文字列で判断<br/><br/> |
|
|
23
23
|
| | | 5 | デバイスSPで実行し、正常にテストが実行されること | 1. bucky run -t e2e -d -D sp -c sp_e2e_1<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. assert_textメソッド実行 | assert_textでUseragentを表す文字列をチェックした結果OKであることを出力される文字列で判断<br/><br/>Mozilla/5.0 (iPhone; CPU iPhone OS 11_0 like Mac OS X) AppleWebKit/604.1.38 (KHTML, like Gecko) Version/11.0 Mobile/15A372 Safari/604.1 |
|
|
24
24
|
| | | 6 | デバイスTabletで実行し、正常にテストが実行されること | 1. bucky run -t e2e -d -D tablet -c tablet_e2e_1<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. assert_textメソッド実行 | assert_textでUseragentを表す文字列をチェックした結果OKであることを出力される文字列で判断<br/><br/>Mozilla/5.0 (iPad; CPU OS 11_0 like Mac OS X) AppleWebKit/604.1.34 (KHTML, like Gecko) Version/11.0 Mobile/15A5341f Safari/604.1 |
|
|
25
25
|
| | setup/teardown_eachが正常に動作するか | 7 | setup_eachでgoを実行し正常に実行されること | 1. bucky run -t e2e -d -D pc -c setup_each_pc_e2e_1<br/>- 以下シナリオファイル内の処理 -<br/>2. setup内でgoメソッド実行 (http://bucky.net)<br/>3. testcase内でassert_titleメソッド実行 | goメソッドを実行後にページ遷移されていること<br/>（assert_titleメソッドの結果がOKであることを出力される文字列で判断） |
|
|
@@ -28,16 +28,17 @@ docker-compose -f docker-compose.system-test.yml down
|
|
|
28
28
|
| LinkStatusテスト実行機能 | 起点URLの検証が正しく実施できるか | 10 | linkstatusを実行し、起点URLが検証されること | 1. bucky run -t linkstatus -d -D pc -c pc_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行 | 出力に http://bucky.net が含まれること |
|
|
29
29
|
| | ページ内のリンクの検証が正しく実施できるか | 11 | linkstatusを実行し、起点ページ内のリンクが検証されること | 1. bucky run -t linkstatus -d -D pc -c pc_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html に対してLinkチェック実行 | 出力に http://bucky.net/test_page.htmlが含まれること |
|
|
30
30
|
| | 各デバイス(PC/SP)のUAで正常に実行できるか | 12 | デバイスPCでlinkstatusを実行し、正常に動作すること | 1. bucky run -t linkstatus -d -D pc -c pc_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html に対してLinkチェック実行 | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
|
|
31
|
-
| | | 13 |
|
|
32
|
-
|
|
|
33
|
-
|
|
|
34
|
-
|
|
|
35
|
-
|
|
|
36
|
-
|
|
|
37
|
-
|
|
|
38
|
-
| |
|
|
39
|
-
|
|
|
40
|
-
|
|
|
41
|
-
|
|
|
42
|
-
|
|
|
43
|
-
|
|
|
31
|
+
| | | 13 | linkstatusNGテストを実行し、正常に動作すること | 1. bucky run -t linkstatus -d -D pc -c pc_link_2<br/>2. http://bucky-error.net に対してhttpリクエストチェック実行 | 終了後のステータスが1であること |
|
|
32
|
+
| | | 14 | デバイスSPでlinkstatusを実行し、正常に動作すること | 1. bucky run -t linkstatus -d -D sp -c sp_link_1<br/>2. http://bucky.net に対してhttpリクエストチェック実行<br/>3. http://bucky.net/test_page.html チェック実行 | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
|
|
33
|
+
| テスト用のプロジェクト作成機能 | 下記の構造のディレクトリ、ファイルが生成されること<br/>(./template/new 以下の内容）<br/>.<br/>├── config<br/>│ ├── bucky_config.yml<br/>│ ├── e2e_config.yml<br/>│ ├── for_spec<br/>│ │ └── test.yml<br/>│ ├── linkstatus_config.yml<br/>│ └── test_db_config.yml<br/>├── services<br/>│ └── README.md<br/>└── system<br/>├── evidences<br/>│ ├── README.md<br/>│ └── screen_shots<br/>│ └── README.md<br/>└── logs<br/>└── README.md | 15 | newコマンド実行後に期待通りのファイル、ディレクトリが作成されていること | 1. bucky new test_project | 対象ディレクトリとファイルが存在していること |
|
|
34
|
+
| ページオブジェクト・パーツファイル作成機能 | 指定のサービス名、デバイスのディレクトリ以下に指定のページ名で.rbファイルと.ymlファイルが生成されること | 16 | make serviceコマンド実行後に期待通りのファイルが作成されていること | 1. (事前条件) bucky new test_project<br/>2. bucky make service test_service | 対象ディレクトリとファイルが存在していること |
|
|
35
|
+
| | | 17 | make pageコマンド実行後に期待通りのファイルが作成されていること | 1. (事前条件) bucky new test_project<br/>2. (事前条件) bucky make service test_service<br/>3. bucky make page test_page | 対象ディレクトリとファイルが存在していること |
|
|
36
|
+
| 未定義コマンド実行時の動き | 出力されるメッセージに Invalid command error. が含まれるか<br/>終了ステータスが 0 以外になるか | 18 | 未定義コマンド実行後にエラー終了すること | 1. bucky hoge fuga | 終了後のステータスが0以外であること |
|
|
37
|
+
| whenを使用しての実行時の動き | 出力されるメッセージに click が含まれるか<br/>例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「0 failures, 0 errors」 と表示されること | 19 | 条件指定をしたテスト実行で不具合なくprocが実行されること | 1. STAGE=development bucky run -d -D -pc -c pc_e2e_4<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. whenを使ったclickメソッド実行 | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「0 failures, 0 errors」 と表示されること |
|
|
38
|
+
| | 出力されるメッセージに click が含まれないこと（終了後のステータスが0であること） | 20 | 条件指定をしないテスト実行で該当のprocが実行されないこと | 1. bucky run -d -D -pc -c pc_e2e_4<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. whenを使ったclickメソッドは実行されない | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「click」 が表示されないこと |
|
|
39
|
+
| | | 21 | 違う条件を指定したテスト実行で該当のprocが実行されないこと | 1. STAGE=staging bucky run -d -D -pc -c pc_e2e_4<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. whenを使ったclickメソッドは実行されない | 例外が発生していないこと（終了後のステータスが0であること）<br/>→ 「click」 が表示されないこと |
|
|
40
|
+
| 複数パーツ取得・選択機能 | Partファイルで複数取得、番号指定でエレメントが取得できること | 22 | CSSセレクタで指定したエレメントの２つ目の要素をクリックできること | 1. bucky run -t e2e -d -D pc -c pc_e2e_5<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. assert_textメソッド実行 | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
|
|
41
|
+
| PageObjectでのWebElement取得 | PageObjectファイルからパーツ（WebElement）が取得できること | 23 | PageObjectファイルからパーツ名でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_6<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. PageObjectメソッド click_single_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
|
|
42
|
+
| | | 24 | PageObjectファイルからパーツ名[数字]でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_7<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. PageObjectメソッド click_multiple_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
|
|
43
|
+
| VerificationでのWebElement取得 | Verificationファイルからパーツ（WebElement）が取得できること | 25 | Verificationファイルからパーツ名でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_8<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. Verificationメソッド click_single_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
|
|
44
|
+
| | | 26 | Verificationファイルからパーツ名[数字]でWebElementが取得できること | 1. bucky run -t e2e -d -D pc -c pc_e2e_9<br/>- 以下シナリオファイル内の処理 -<br/>2. goメソッド実行 (http://bucky.net)<br/>2. Verificationメソッド click_multiple_element | 終了後のステータスが0であること<br/>→ 「0 failures, 0 errors」 と表示されること |
|
|
@@ -13,19 +13,19 @@ teardown() {
|
|
|
13
13
|
rm -rf /tmp/$BUCKY_PROJECT_NAME
|
|
14
14
|
}
|
|
15
15
|
|
|
16
|
-
@test "#
|
|
16
|
+
@test "#15 After executing 'new' command, expected files and directories are created" {
|
|
17
17
|
run diff /bucky-core/template/new/ /tmp/$BUCKY_PROJECT_NAME
|
|
18
18
|
[ $status -eq 0 ]
|
|
19
19
|
}
|
|
20
20
|
|
|
21
|
-
@test "#
|
|
21
|
+
@test "#16 After executing 'make service' command, expected directory is created" {
|
|
22
22
|
cd /tmp/$BUCKY_PROJECT_NAME
|
|
23
23
|
bucky make service $TEST_SERVICE
|
|
24
24
|
run ls /tmp/$BUCKY_PROJECT_NAME/services/$TEST_SERVICE
|
|
25
25
|
[ $status -eq 0 ]
|
|
26
26
|
}
|
|
27
27
|
|
|
28
|
-
@test "#
|
|
28
|
+
@test "#17 After executing 'make page' command, expected page and parts file are created" {
|
|
29
29
|
cd /tmp/$BUCKY_PROJECT_NAME
|
|
30
30
|
bucky make service $TEST_SERVICE
|
|
31
31
|
bucky make page test_page --service $TEST_SERVICE --device pc
|
|
@@ -35,7 +35,7 @@ teardown() {
|
|
|
35
35
|
[ $status -eq 0 ]
|
|
36
36
|
}
|
|
37
37
|
|
|
38
|
-
@test "#
|
|
38
|
+
@test "#18 After executing undefined command, show error message and exit" {
|
|
39
39
|
cd /tmp/$BUCKY_PROJECT_NAME
|
|
40
40
|
run bucky hoge fuga
|
|
41
41
|
[ $(expr "$output" : ".*Invalid command error.*") -ne 0 ]
|
|
@@ -9,14 +9,16 @@ setup() {
|
|
|
9
9
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
10
10
|
}
|
|
11
11
|
|
|
12
|
-
@test "#02 After executing e2e verify assert_title, results contain verify words
|
|
12
|
+
@test "#02 After executing e2e verify assert_title, results contain verify words, no failures/errors and exit code is 0" {
|
|
13
13
|
run bucky run -t e2e -d -D pc -c pc_e2e_1
|
|
14
|
+
[ $status -eq 0 ]
|
|
14
15
|
[ $(expr "$output" : ".*:verify.*assert_title.*") -ne 0 ]
|
|
15
16
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
16
17
|
}
|
|
17
18
|
|
|
18
|
-
@test "#03 After executing e2e verify assert_title, results contain verify words and 1 failure" {
|
|
19
|
+
@test "#03 After executing e2e verify assert_title, results contain verify words and 1 failure and exit code is 1" {
|
|
19
20
|
run bucky run -t e2e -d -D pc -c pc_e2e_2
|
|
21
|
+
[ $status -eq 1 ]
|
|
20
22
|
[ $(expr "$output" : ".*:verify.*assert_title.*") -ne 0 ]
|
|
21
23
|
[ $(expr "$output" : ".*1 failures.*") -ne 0 ]
|
|
22
24
|
}
|
|
@@ -54,47 +56,47 @@ setup() {
|
|
|
54
56
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
55
57
|
}
|
|
56
58
|
|
|
57
|
-
@test "#
|
|
59
|
+
@test "#19 When 'when condition' is added, results have no failures nor errors" {
|
|
58
60
|
export STAGE=development
|
|
59
61
|
run bucky run -t e2e -d -D pc -c pc_e2e_4
|
|
60
62
|
[ $(expr "$output" : ".*click.*") -ne 0 ]
|
|
61
63
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
62
64
|
}
|
|
63
65
|
|
|
64
|
-
@test "#
|
|
66
|
+
@test "#20 When 'when condition' is not added, results have no click procedure" {
|
|
65
67
|
run bucky run -t e2e -d -D pc -c pc_e2e_4
|
|
66
68
|
[ $(expr "$output" : ".*click.*") -eq 0 ]
|
|
67
69
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
68
70
|
}
|
|
69
71
|
|
|
70
|
-
@test "#
|
|
72
|
+
@test "#21 When 'different when condition' is added, results have no click procedure" {
|
|
71
73
|
export STAGE=staging
|
|
72
74
|
run bucky run -t e2e -d -D pc -c pc_e2e_4
|
|
73
75
|
[ $(expr "$output" : ".*click.*") -eq 0 ]
|
|
74
76
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
75
77
|
}
|
|
76
78
|
|
|
77
|
-
@test "#
|
|
79
|
+
@test "#22 When click second element from scenario, results have no failures nor errors" {
|
|
78
80
|
run bucky run -t e2e -d -D pc -c pc_e2e_5
|
|
79
81
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
80
82
|
}
|
|
81
83
|
|
|
82
|
-
@test "#
|
|
84
|
+
@test "#23 When click element from PageObject file, results have no failures nor errors" {
|
|
83
85
|
run bucky run -t e2e -d -D pc -c pc_e2e_6
|
|
84
86
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
85
87
|
}
|
|
86
88
|
|
|
87
|
-
@test "#
|
|
89
|
+
@test "#24 When click second element from PageObject file, results have no failures nor errors" {
|
|
88
90
|
run bucky run -t e2e -d -D pc -c pc_e2e_7
|
|
89
91
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
90
92
|
}
|
|
91
93
|
|
|
92
|
-
@test "#
|
|
94
|
+
@test "#25 When click element from Verification file, results have no failures nor errors" {
|
|
93
95
|
run bucky run -t e2e -d -D pc -c pc_e2e_8
|
|
94
96
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
95
97
|
}
|
|
96
98
|
|
|
97
|
-
@test "#
|
|
99
|
+
@test "#26 When click second element from Verification file, results have no failures nor errors" {
|
|
98
100
|
run bucky run -t e2e -d -D pc -c pc_e2e_9
|
|
99
101
|
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
100
102
|
}
|
|
@@ -4,21 +4,25 @@ setup() {
|
|
|
4
4
|
cd /bucky-core/system_testing/test_bucky_project
|
|
5
5
|
}
|
|
6
6
|
|
|
7
|
-
|
|
8
|
-
# No failures and errors
|
|
9
|
-
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
10
|
-
}
|
|
11
|
-
|
|
12
|
-
@test "#10,#12 After executing linkstatus on pc , results contain target base url and no failures/errors." {
|
|
7
|
+
@test "#10,#12 After executing linkstatus on pc , results contain target base url, no failures/errors and exit code is 0." {
|
|
13
8
|
run bucky run -t linkstatus -d -D pc -c pc_link_1
|
|
9
|
+
[ $status -eq 0 ]
|
|
14
10
|
[ $(expr "$output" : ".*http://bucky\.net.*") -ne 0 ]
|
|
11
|
+
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
15
12
|
}
|
|
16
13
|
|
|
17
14
|
@test "#11 After executing linkstatus on pc , results contain target link url and no failures/errors." {
|
|
18
15
|
run bucky run -t linkstatus -d -D pc -c pc_link_1
|
|
19
16
|
[ $(expr "$output" : ".*http://bucky\.net/test_page.html.*") -ne 0 ]
|
|
17
|
+
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
18
|
+
}
|
|
19
|
+
|
|
20
|
+
@test "#13 After executing linkstatus failed test, exit code is 1" {
|
|
21
|
+
run bucky run -t linkstatus -d -D pc -c pc_link_2
|
|
22
|
+
[ $status -eq 1 ]
|
|
20
23
|
}
|
|
21
24
|
|
|
22
|
-
@test "#
|
|
25
|
+
@test "#14 After executing linkstatus on sp , results have no failures nor errors" {
|
|
23
26
|
run bucky run -t linkstatus -d -D sp -c sp_link_1
|
|
27
|
+
[ $(expr "$output" : ".*0 failures, 0 errors,.*") -ne 0 ]
|
|
24
28
|
}
|
metadata
CHANGED
|
@@ -1,7 +1,7 @@
|
|
|
1
1
|
--- !ruby/object:Gem::Specification
|
|
2
2
|
name: bucky-core
|
|
3
3
|
version: !ruby/object:Gem::Version
|
|
4
|
-
version: 0.9.
|
|
4
|
+
version: 0.9.18
|
|
5
5
|
platform: ruby
|
|
6
6
|
authors:
|
|
7
7
|
- NaotoKishino
|
|
@@ -13,7 +13,7 @@ authors:
|
|
|
13
13
|
autorequire:
|
|
14
14
|
bindir: exe
|
|
15
15
|
cert_chain: []
|
|
16
|
-
date: 2019-
|
|
16
|
+
date: 2019-10-15 00:00:00.000000000 Z
|
|
17
17
|
dependencies:
|
|
18
18
|
- !ruby/object:Gem::Dependency
|
|
19
19
|
name: awesome_print
|
|
@@ -360,7 +360,7 @@ files:
|
|
|
360
360
|
- example/hands-on/services/bucky_hands_on/pc/pageobject/github_top.rb
|
|
361
361
|
- example/hands-on/services/bucky_hands_on/pc/parts/github_search_list.yml
|
|
362
362
|
- example/hands-on/services/bucky_hands_on/pc/parts/github_top.yml
|
|
363
|
-
- example/hands-on/services/bucky_hands_on/pc/scenarios/e2e/
|
|
363
|
+
- example/hands-on/services/bucky_hands_on/pc/scenarios/e2e/search_and_assert.yml
|
|
364
364
|
- example/hands-on/services/bucky_hands_on/pc/scenarios/linkstatus/github_top.yml
|
|
365
365
|
- example/hands-on/system/evidences/README.md
|
|
366
366
|
- example/hands-on/system/evidences/screen_shots/README.md
|
|
@@ -371,6 +371,7 @@ files:
|
|
|
371
371
|
- lib/bucky/core/database/test_data_operator.rb
|
|
372
372
|
- lib/bucky/core/exception/bucky_exception.rb
|
|
373
373
|
- lib/bucky/core/report/screen_shot_generator.rb
|
|
374
|
+
- lib/bucky/core/test_core/exit_handler.rb
|
|
374
375
|
- lib/bucky/core/test_core/test_case_loader.rb
|
|
375
376
|
- lib/bucky/core/test_core/test_class_generator.rb
|
|
376
377
|
- lib/bucky/core/test_core/test_manager.rb
|