mpmc-queue: makefile bugfix
[model-checker-benchmarks.git] / bench.sh
index 852c166..8886bcc 100755 (executable)
--- a/bench.sh
+++ b/bench.sh
@@ -1,23 +1,33 @@
 #!/bin/bash
 
 # A (work-in-progress) test script for running our benchmarks
+# Runs all tests, logging output to a directory named
+# '${BASEDIR}/run-<date-time>', where ${BASEDIR} is either the current
+# directory or the first parameter to this script
 
 ## Unfinished benchmarks - do not use
 # queue williams-queue
 
-RUN="./run.sh"
-DATE="date +%Y-%m-%d-%R"
+DATECMD="date +%Y-%m-%d-%R"
+DATE="`${DATECMD}`"
+BASEDIR=.
 
-${DATE}
+[ $# -gt 0 ] && [ -d "$1" ] && BASEDIR="$1" && shift
 
+DIR="${BASEDIR}/run-${DATE}"
+
+TESTS="barrier/barrier mcs-lock/mcs-lock spsc-queue/spsc-queue mpmc-queue/mpmc-1r2w mpmc-queue/mpmc-2r1w mpmc-queue/mpmc-queue linuxrwlocks/linuxrwlocks"
+MODEL_ARGS="-f 4 -m 2"
 COUNT=0
 
 function run_test {
        t=$1
        shift
        ARGS="$@"
+       RUN="./run.sh"
+       LOG=${DIR}/log-${COUNT}
+
        echo "-----------------------------------------------"
-       LOG=log-${COUNT}
        echo "*******************************"
        echo "Running test ${COUNT} (${t}): logging to ${LOG}"
        echo "ARGS=${ARGS}"
@@ -33,7 +43,7 @@ function run_test {
        echo "*******************************"
        echo "Re-running test for timing data"
        echo "*******************************"
-       time ${RUN} ${t} ${ARGS} > /dev/null 2>&1
+       (time ${RUN} ${t} ${ARGS} > /dev/null 2>&1) 2>&1
        echo
        echo "Test done; sleeping for a few seconds"
        echo
@@ -41,12 +51,17 @@ function run_test {
        let COUNT++
 }
 
-TESTS="barrier/barrier mcs-lock/mcs-lock spsc-queue/spsc-queue mpmc-queue/mpmc-1r2w mpmc-queue/mpmc-2r1w mpmc-queue/mpmc-queue"
-MODEL_ARGS="-f 4 -m 1"
-for t in ${TESTS}
-do
-       run_test ${t} ${MODEL_ARGS}
-done
-#run_test mpmc-queue/mpmc-queue ${MODEL_ARGS} -- -r 2 -w 1
-#run_test mpmc-queue/mpmc-queue ${MODEL_ARGS} -- -r 1 -w 2
-#run_test mpmc-queue/mpmc-queue ${MODEL_ARGS} -- -r 2 -w 2
+function run_all_tests {
+       echo ${DATE}
+
+       for t in ${TESTS}
+       do
+               run_test ${t} ${MODEL_ARGS}
+       done
+       #run_test mpmc-queue/mpmc-queue ${MODEL_ARGS} -- -r 2 -w 1
+       #run_test mpmc-queue/mpmc-queue ${MODEL_ARGS} -- -r 1 -w 2
+       #run_test mpmc-queue/mpmc-queue ${MODEL_ARGS} -- -r 2 -w 2
+}
+
+mkdir ${DIR}
+(git log --oneline -1; echo; run_all_tests) | tee ${DIR}/timing.log