セルフテストを元に、テストの内容を再整理
[autotest_mk.git] / selftest / unittest / Define.beta.mk
1 ######################################################################
2 # テストグループのディレクトリー
3 ######################################################################
4 # テストグループとテストの両方で使う変数を定義したファイル
5 DEF_FILE := Define.mk
6
7 # テストのMakefileにインクルードするファイル
8 TEST_MAKEFILE := Test.mk
9
10 # テストグループログファイル
11 GROUP_LOG_FILE := $(shell echo $(GROUP) | tr '[a-z]' '[A-Z]').log
12
13 # テストグループ実行時間ファイル
14 GROUP_TIME_FILE := $(shell echo $(GROUP) | tr '[a-z]' '[A-Z]')_time.log
15
16 ######################################################################
17 # テストのディレクトリー
18 ######################################################################
19 # Makefile
20 MAKEFILE := Makefile
21
22 # 現在の日時
23 DATE = $(shell date +"%F %T")
24
25 # テストコマンドファイル
26 CMD_FILE := cmd
27
28 # テスト説明ファイル
29 DESC_FILE := desc.txt
30
31 # テスト想定結果ファイル
32 TEST0_FILE := 0.txt
33
34 # テスト結果ファイル
35 TEST1_FILE := 1.txt
36
37 # テストの、想定結果と結果の差分ファイル
38 DIFF_FILE := diff.txt
39
40 # テストエラーファイル
41 ERR_FILE := err.txt
42
43 # テストログファイル
44 LOG_FILE := test.log
45
46 # 実行時間ファイル
47 TIME_FILE := time.log
48
49 ######################################################################
50 # コマンド
51 ######################################################################
52
53 CP := cp
54
55 CAT := cat
56
57 MKDIR := mkdir
58
59 RM := rm -f
60
61 ECHO := echo
62
63 TIME := /usr/bin/time
64
65 DIFF := diff -c
66
67 DEV_NULL := /dev/null
68
69 CHMOD := chmod
70
71 # TESTディレクトリーのMakefileを作成
72 # 用例: $(call create_testmakefile,file)
73 define create_testmkfile
74     $(RM) $1
75     $(foreach mkfile, $(DEF_FILE) $(TEST_MAKEFILE), $(ECHO) "include ../$(mkfile)" >>$1; )
76 endef
77
78 # 説明ファイルの内容を、引数のファイルに出力。
79 # 用例: $(call desc_log,file_out)
80 define desc_log
81     $(if $(wildcard $(DESC_FILE)),$(CAT) $(DESC_FILE) >>$1)
82 endef
83
84 # テスト実行の経過時間をファイルに出力。引数は、テスト名、コマンドファイル、出力ファイル
85 # 用例: $(call time_cmd,name,file_cmd,file_out)
86 define time_cmd
87     $(TIME) -f "$1: %E" >>$3 $2>$(DEV_NULL)
88     $(CAT) $3
89 endef
90
91 # テスト実行コマンド。引数は、コマンドファイル、出力ファイル、エラーファイル
92 # ファイルの内容と、CMD_FILE実行の標準出力を、出力ファイルに保存。
93 # エラー発生時は、エラー出力を出力ファイルとエラーファイルに保存。
94 # 用例: $(call exec_cmd,file_cmd,file_out,file_err)
95 define exec_cmd
96     $(CHMOD) u+x $1
97     $(CAT) $1 >$2
98     ./$1 >>$2 2>$3
99     if test -s $3; then $(CAT) $3 >>$2; else $(RM) $3; fi
100 endef
101
102 # 2つのファイルを比較し、差分ファイルを作成。引数は、ファイル0、ファイル1、差分ファイル
103 # 用例: $(call diff_testfiles,file0,file1)
104 define diff_testfiles
105     diff $1 $2 >$3 2>&1
106     if test ! -s $3; then $(RM) $3; fi
107 endef
108
109 # 差分ファイルの内容をログファイルに出力。引数は、テスト名、差分ファイル、ログファイル
110 # 用例: $(call test_log,name,file_diff,file_log)
111 define test_log
112     $(ECHO) "$1: Test $(if $(wildcard $2),Failure,Success) $(DATE)" >>$3
113 endef
114
115 # テストごとのログファイルをグループログファイルに出力。引数は、テストのリスト、グループログファイル
116 # 用例: $(call group_log_each,tests,file_group_log)
117 define group_log_each
118     $(foreach target,$1,$(call group_log,$(target),$2))
119 endef
120
121 # テストのログファイルをグループログファイルに出力。引数は、テスト、グループログファイル
122 # 用例: $(call group_log_each,tests,file_group_log)
123 define group_log
124     $(ECHO) >>$2
125     if test -s $1/$(LOG_FILE); then $(CAT) $1/$(LOG_FILE) >>$2; else $(ECHO) $1 ": no log." >>$2; fi
126 endef
127
128 LOG_GROUP = for target in $^; do ($(ECHO) <$$target/$(LOG_FILE) && $(CAT) <$$target/$(LOG_FILE)) >>$@ || $(ECHO) $$target ": no log." >>$@; done
129
130 REPORT_GROUP = $(ECHO) "$(GROUP): $(SUCCESS_TEST) / $(ALL_TEST) tests passed. Details in `pwd`/$(GROUP_LOG_FILE)"; \
131                if test $(FAIL_TEST) -eq 0; then $(ECHO) "$(GROUP): All tests are succeded."; fi
132
133 LOG_TIME_REPORT = for target in ^; do ($(ECHO)<$$target/$(LOG_FILE) && $(CAT) <$$target/$(TIME_FILE)) >>$@ || $(ECHO) $$target ": no time." >>$@; done
134
135 ######################################################################
136 # エラー
137 ######################################################################
138
139 # chk_var_null: 変数がNULLの場合、エラー
140 # 用例: $(call chk_var_null, var)
141 define chk_var_null
142     $(if $($1),,$(error $1 is NULL))
143 endef
144
145 # chk_file_ext: 変数で指定されたファイルが実在する場合、エラー
146 # 用例: $(call chk_file_ext, var)
147 define chk_file_ext
148     $(if $(wildcard $($1)),$(error $(wildcard $($1)) exists))
149 endef