template/Group.mk

   1 # autotest.mk > template > Group.mk
   2 # テストグループのMakefile
   3 #
   4 # オペレーター
   5 # make         : すべてのテストを実施し、ログファイルを作成
   6 # make check   : ↓
   7 # make create  : TESTNAMEで指定されたテストを新規に作成
   8 # make set     : すべてのテストの、想定結果を出力
   9 # make checkeach: すべてのテストを実施
  10 # make report  : ログファイルから、テストの結果をレポート
  11 # make clean   : すべてのテストで、"make" で生成されたファイルをクリア
  12 # make cleanall: すべてのテストで、"make" と "make set" で生成されたファイルをクリア
  13
  14 SHELL = /bin/sh
  15
  16 ######################################################################
  17 # テストグループの定義
  18 ######################################################################
  19
  20 include Define.mk
  21
  22 # グループディレクトリー
  23 GROUP_DIR := $(shell pwd)
  24
  25 # グループ名。ディレクトリ名から取得
  26 GROUP := $(notdir $(GROUP_DIR))
  27
  28 # テスト名。カレントディレクトリー内の、名前が大文字または.以外で始まるディレクトリー
  29 TESTS = $(notdir $(shell find -maxdepth 1 -name "[^A-Z.]*" -type d))
  30
  31 # テストグループログファイル
  32 GROUP_LOG_FILE := $(shell echo $(GROUP) | tr '[a-z]' '[A-Z]').log
  33
  34 # テストグループレポートファイル
  35 GROUP_REPORT_FILE := Report.log
  36
  37 # テストグループ実行時間ファイル
  38 GROUP_TIME_FILE := $(shell echo $(GROUP) | tr '[a-z]' '[A-Z]')_time.log
  39
  40 # グループで、テスト時に作成されるファイル群
  41 GROUP_TEMP_FILES := $(GROUP_LOG_FILE) $(GROUP_REPORT_FILE) $(GROUP_TIME_FILE)
  42
  43 # テストごとのログファイル
  44 TEST_LOG_FILES := $(foreach test,$(TESTS),$(test)/$(LOG_FILE))
  45
  46 # 指定したディレクトリーを作成
  47 # 用例: $(call create_dir,name)
  48 define create_dir
  49     $(call chk_var_null,$1)
  50     $(call chk_file_ext,$1)
  51     $(MKDIR) $1
  52 endef
  53
  54 # テストごとのMakefileを作成
  55 # 用例: $(call create_makefile,file)
  56 define create_makefile
  57     $(RM) $1
  58     $(foreach mkfile,$(DEF_FILE) $(TEST_MAKEFILE),$(ECHO) "include ../$(mkfile)" >>$1; )
  59 endef
  60
  61 # テストごとのファイルをグループファイルに出力
  62 # 引数は、テストのリスト、グループファイル、テストファイル
  63 # 用例: $(call group_log,files_test_log,file_group_log)
  64 define group_log
  65     $(foreach target,$1,$(call group_log_each,$(target),$2))
  66 endef
  67
  68 # テストのログファイルをグループログファイルに出力。引数は、テスト、グループログファイル
  69 # 用例: $(call group_log_each,file_test_log,file_group_log)
  70 define group_log_each
  71     if test -s $1; then $(CAT) $1 >>$2; else $(ECHO) $(dir $1)": no log" >>$2; fi
  72     echo >>$2;
  73
  74 endef
  75
  76 # 成功したテストの数。テストグループログファイルから取得
  77 SUCCESS_TEST = $(shell grep "^[^A-Z.].*: Test Success" $(GROUP_LOG_FILE) | wc -l)
  78
  79 # 失敗したテストの数。テストグループログファイルから取得
  80 FAIL_TEST = $(shell grep "^[^A-Z.].*: Test Failure" $(GROUP_LOG_FILE) | wc -l)
  81
  82 # すべてのテストの数
  83 ALL_TEST = $(shell expr $(SUCCESS_TEST) + $(FAIL_TEST))
  84
  85 # テストごとの実行時間ファイル
  86 TEST_TIME_FILES := $(foreach test,$(TESTS),$(test)/$(TIME_FILE))
  87
  88 # テストの結果を、グループログファイルを元にレポート。
  89 # 引数は、グループログファイル
  90 # 用例: $(call group_report,name,file_log,file_report)
  91 define group_report
  92     $(ECHO) "$1: $(SUCCESS_TEST) / $(ALL_TEST) tests passed. Details in $(GROUP_DIR)/$2" >$3;
  93     if test $(FAIL_TEST) -eq 0; then $(ECHO) "$1: All tests are succeded." >>$3; fi
  94 endef
  95
  96 # リストで指定したディレクトリーでmakeを実行
  97 # 用例: $(call make_tests,list_dir,target)
  98 define make_tests
  99     $(foreach dir,$1,$(call make_test_each,$(dir),$2))
 100 endef
 101
 102 # 指定したディレクトリーでMakeを実行
 103 # 用例: $(call make_test_each,tests,target)
 104 define make_test_each
 105     $(MAKE) $2 -sC $1;
 106
 107 endef
 108
 109 ######################################################################
 110 # ターゲット
 111 ######################################################################
 112
 113 .PHONY: check checkall time create clean cleantime
 114
 115 check checkall: clean $(GROUP_REPORT_FILE)
 116         @$(CAT) $(GROUP_REPORT_FILE)
 117
 118 time: cleantime $(GROUP_TIME_FILE)
 119         @$(CAT) $(GROUP_TIME_FILE)
 120
 121 create:
 122         @$(call create_dir,$(TEST))
 123         @$(call create_makefile,$(TEST)/$(MAKEFILE))
 124
 125 clean:
 126         @$(call make_tests,$(TESTS),$@)
 127         @$(RM) $(GROUP_TEMP_FILES)
 128
 129 cleantime:
 130         @$(call make_tests,$(TESTS),$@)
 131         @$(RM) $(GROUP_TIME_FILE)
 132
 133 $(GROUP_REPORT_FILE): $(GROUP_LOG_FILE)
 134         @$(call group_report,$(GROUP),$^,$@)
 135
 136 $(GROUP_LOG_FILE): $(TEST_LOG_FILES)
 137         @$(call group_log,$^,$@)
 138
 139 $(TEST_LOG_FILES):
 140         @$(MAKE) $(MAKECMDGOALS) -sC $(dir $@)
 141
 142 $(GROUP_TIME_FILE): $(TEST_TIME_FILES)
 143         @$(call group_log,$^,$@)
 144
 145 $(TEST_TIME_FILES):
 146         @$(MAKE) time -sC $(dir $@)