CASL II仕様書の作成
[YACASL2.git] / test / template / Group.mk
1 # autotest.mk > template > Group.mk
2 # テストグループのMakefile
3 #
4 # オペレーター
5 # make          : すべてのテストを実行し、結果をログファイルに出力
6 # make check    : ↓
7 # make checkall : すべてのテストを実行し、結果と実行時間をログファイルに出力
8 # make time     : すべてのテストを実行し、実行時間をログファイルに出力
9 # make create   : TESTNAMEで指定されたテストを新規に作成
10 # make clean    : すべてのテストで、"make" で生成されたファイルをクリア
11 # make cleantime: すべてのテストで、実行時間のログファイルをクリア
12
13 SHELL = /bin/sh
14
15 include Define.mk
16
17 ######################################################################
18 # テストグループのディレクトリー
19 ######################################################################
20
21 # グループディレクトリー
22 GROUP_DIR := $(CURRDIR)
23
24 # グループ名。ディレクトリ名から取得
25 GROUP := $(notdir $(GROUP_DIR))
26
27 # テスト名。カレントディレクトリー内の、名前が大文字または.以外で始まるディレクトリー
28 TESTS = $(notdir $(shell $(FIND) -maxdepth 1 -name "[^A-Z.]*" -type d))
29
30 # テストグループログファイル
31 GROUP_LOG_FILE := $(shell $(ECHO) $(GROUP) | $(TR) '[a-z]' '[A-Z]').log
32
33 # テストグループレポートファイル
34 GROUP_REPORT_FILE := Summary.log
35
36 # テストグループ実行時間ファイル
37 GROUP_TIME_FILE := $(shell echo $(GROUP) | $(TR) '[a-z]' '[A-Z]')_time.log
38
39 # グループで、テスト結果として作成されるファイル群
40 GROUP_RES_FILES := $(GROUP_LOG_FILE) $(GROUP_REPORT_FILE) $(GROUP_TIME_FILE)
41
42 # テストごとのログファイル
43 TEST_LOG_FILES := $(foreach test,$(TESTS),$(test)/$(LOG_FILE))
44
45 ######################################################################
46 # テストグループのマクロ
47 ######################################################################
48
49 # テストごとのファイルをグループファイルに出力
50 # 引数は、テストのリスト、グループファイル、テストファイル
51 # 用例: $(call group_log,files_test_log,file_group_log)
52 define group_log
53     $(foreach target,$1,$(call group_log_each,$(target),$2))
54 endef
55
56 # テストのログファイルをグループログファイルに出力。引数は、テスト、グループログファイル
57 # 用例: $(call group_log_each,file_test_log,file_group_log)
58 define group_log_each
59     $(ECHO) $(dir $1) >>$2;
60     if test -s $1; then $(CAT) $1 >>$2; else $(ECHO) $(dir $1)": no log" >>$2; fi
61     $(ECHO) >>$2;
62
63 endef
64
65 # 成功したテストの数。テストグループログファイルから取得
66 SUCCESS_TEST = $(shell $(GREP) "^[^A-Z.].*: Test Success" $(GROUP_LOG_FILE) | $(LINECOUNT))
67
68 # 失敗したテストの数。テストグループログファイルから取得
69 FAIL_TEST = $(shell $(GREP) "^[^A-Z.].*: Test Failure" $(GROUP_LOG_FILE) | $(LINECOUNT))
70
71 # すべてのテストの数
72 ALL_TEST = $(shell $(EXPR) $(SUCCESS_TEST) + $(FAIL_TEST))
73
74 # テストごとの実行時間ファイル
75 TEST_TIME_FILES := $(foreach test,$(TESTS),$(test)/$(TIME_FILE))
76
77 # テストの結果を、グループログファイルを元にレポート。
78 # 引数は、グループ名、グループログファイル、グループレポートファイル
79 # 用例: $(call group_report,name,file_log,file_report)
80 define group_report
81     $(ECHO) "$1: $(SUCCESS_TEST) / $(ALL_TEST) tests passed. Details in $(GROUP_DIR)/$2" >$3;
82     if test $(FAIL_TEST) -eq 0; then $(ECHO) "$1: All tests are succeded." >>$3; fi
83 endef
84
85 # リストで指定したディレクトリーでmakeを実行
86 # 用例: $(call make_tests,list_dir,target)
87 define make_tests
88     $(foreach dir,$1,$(call make_test_each,$(dir),$2))
89 endef
90
91 # 指定したディレクトリーでmakeを実行
92 # 用例: $(call make_test_each,tests,target)
93 define make_test_each
94     $(MAKE) $2 -sC $1;
95
96 endef
97
98 .PHONY: check checkall time create clean cleantime
99
100 check checkall: clean $(GROUP_REPORT_FILE)
101         @$(CAT) $(GROUP_REPORT_FILE)
102
103 time: cleantime $(GROUP_TIME_FILE)
104         @$(CAT) $(GROUP_TIME_FILE)
105
106 create:
107         @$(call create_dir,$(TEST))
108         @$(call create_makefile,$(TEST)/$(MAKEFILE),$(MAKEFILES))
109
110 clean:
111         @$(call make_tests,$(TESTS),$@)
112         @$(RM) $(GROUP_RES_FILES)
113
114 cleantime:
115         @$(call make_tests,$(TESTS),$@)
116         @$(RM) $(GROUP_TIME_FILE)
117
118 $(GROUP_REPORT_FILE): $(GROUP_LOG_FILE)
119         @$(call group_report,$(GROUP),$^,$@)
120
121 $(GROUP_LOG_FILE): $(TEST_LOG_FILES)
122         @$(call group_log,$^,$@)
123
124 $(TEST_LOG_FILES):
125         @$(MAKE) $(MAKECMDGOALS) -sC $(dir $@) NODISP=1
126
127 $(GROUP_TIME_FILE): $(TEST_TIME_FILES)
128         @$(call group_log,$^,$@)
129
130 $(TEST_TIME_FILES):
131         @$(MAKE) time -sC $(dir $@)