test/template/Group.mk

   1 # autotest.mk > template > Group.mk
   2 # テストグループのMakefile
   3 #
   4 # オペレーター
   5 # make          : すべてのテストを実行し、結果をログファイルに出力
   6 # make check    : ↓
   7 # make checkall : すべてのテストを実行し、結果と実行時間をログファイルに出力
   8 # make time     : すべてのテストを実行し、実行時間をログファイルに出力
   9 # make create   : TESTNAMEで指定されたテストを新規に作成
  10 # make clean    : すべてのテストで、"make" で生成されたファイルをクリア
  11 # make cleantime: すべてのテストで、実行時間のログファイルをクリア
  12
  13 SHELL = /bin/sh
  14
  15 include Define.mk
  16
  17 ######################################################################
  18 # テストグループのディレクトリー
  19 ######################################################################
  20
  21 # グループディレクトリー
  22 GROUP_DIR := $(CURRDIR)
  23
  24 # グループ名。ディレクトリ名から取得
  25 GROUP := $(notdir $(GROUP_DIR))
  26
  27 # テスト名。カレントディレクトリー内の、名前が大文字または.以外で始まるディレクトリー
  28 TESTS = $(notdir $(shell $(FIND) -maxdepth 1 -name "[^A-Z.]*" -type d))
  29
  30 # テストグループログファイル
  31 GROUP_LOG_FILE := $(shell $(ECHO) $(GROUP) | $(TR) '[a-z]' '[A-Z]').log
  32
  33 # テストグループレポートファイル
  34 GROUP_REPORT_FILE := Summary.log
  35
  36 # テストグループ実行時間ファイル
  37 GROUP_TIME_FILE := $(shell echo $(GROUP) | $(TR) '[a-z]' '[A-Z]')_time.log
  38
  39 # グループで、テスト結果として作成されるファイル群
  40 GROUP_RES_FILES := $(GROUP_LOG_FILE) $(GROUP_REPORT_FILE) $(GROUP_TIME_FILE)
  41
  42 # テストごとのログファイル
  43 TEST_LOG_FILES := $(foreach test,$(TESTS),$(test)/$(LOG_FILE))
  44
  45 ######################################################################
  46 # テストグループのマクロ
  47 ######################################################################
  48
  49 # テストごとのファイルをグループファイルに出力
  50 # 引数は、テストのリスト、グループファイル、テストファイル
  51 # 用例: $(call group_log,files_test_log,file_group_log)
  52 define group_log
  53     $(foreach target,$1,$(call group_log_each,$(target),$2))
  54 endef
  55
  56 # テストのログファイルをグループログファイルに出力。引数は、テスト、グループログファイル
  57 # 用例: $(call group_log_each,file_test_log,file_group_log)
  58 define group_log_each
  59     $(ECHO) $(dir $1) >>$2;
  60     if test -s $1; then $(CAT) $1 >>$2; else $(ECHO) $(dir $1)": no log" >>$2; fi
  61     $(ECHO) >>$2;
  62
  63 endef
  64
  65 # 成功したテストの数。テストグループログファイルから取得
  66 SUCCESS_TEST = $(shell $(GREP) "^[^A-Z.].*: Test Success" $(GROUP_LOG_FILE) | $(LINECOUNT))
  67
  68 # 失敗したテストの数。テストグループログファイルから取得
  69 FAIL_TEST = $(shell $(GREP) "^[^A-Z.].*: Test Failure" $(GROUP_LOG_FILE) | $(LINECOUNT))
  70
  71 # すべてのテストの数
  72 ALL_TEST = $(shell $(EXPR) $(SUCCESS_TEST) + $(FAIL_TEST))
  73
  74 # テストごとの実行時間ファイル
  75 TEST_TIME_FILES := $(foreach test,$(TESTS),$(test)/$(TIME_FILE))
  76
  77 # テストの結果を、グループログファイルを元にレポート。
  78 # 引数は、グループ名、グループログファイル、グループレポートファイル
  79 # 用例: $(call group_report,name,file_log,file_report)
  80 define group_report
  81     $(ECHO) "$1: $(SUCCESS_TEST) / $(ALL_TEST) tests passed. Details in $(GROUP_DIR)/$2" >$3;
  82     if test $(FAIL_TEST) -eq 0; then $(ECHO) "$1: All tests are succeded." >>$3; fi
  83 endef
  84
  85 # リストで指定したディレクトリーでmakeを実行
  86 # 用例: $(call make_tests,list_dir,target)
  87 define make_tests
  88     $(foreach dir,$1,$(call make_test_each,$(dir),$2))
  89 endef
  90
  91 # 指定したディレクトリーでmakeを実行
  92 # 用例: $(call make_test_each,tests,target)
  93 define make_test_each
  94     $(MAKE) $2 -sC $1;
  95
  96 endef
  97
  98 .PHONY: check checkall time create clean cleantime
  99
 100 check checkall: clean $(GROUP_REPORT_FILE)
 101         @$(CAT) $(GROUP_REPORT_FILE)
 102
 103 time: cleantime $(GROUP_TIME_FILE)
 104         @$(CAT) $(GROUP_TIME_FILE)
 105
 106 create:
 107         @$(call create_dir,$(TEST))
 108         @$(call create_makefile,$(TEST)/$(MAKEFILE),$(MAKEFILES))
 109
 110 clean:
 111         @$(call make_tests,$(TESTS),$@)
 112         @$(RM) $(GROUP_RES_FILES)
 113
 114 cleantime:
 115         @$(call make_tests,$(TESTS),$@)
 116         @$(RM) $(GROUP_TIME_FILE)
 117
 118 $(GROUP_REPORT_FILE): $(GROUP_LOG_FILE)
 119         @$(call group_report,$(GROUP),$^,$@)
 120
 121 $(GROUP_LOG_FILE): $(TEST_LOG_FILES)
 122         @$(call group_log,$^,$@)
 123
 124 $(TEST_LOG_FILES):
 125         @$(MAKE) $(MAKECMDGOALS) -sC $(dir $@) NODISP=1
 126
 127 $(GROUP_TIME_FILE): $(TEST_TIME_FILES)
 128         @$(call group_log,$^,$@)
 129
 130 $(TEST_TIME_FILES):
 131         @$(MAKE) time -sC $(dir $@)