Robust/src/buildscript

   1 #!/bin/bash
   2
   3 printhelp() {
   4 echo -robustroot set up the ROBUSTROOT to directory other than default one
   5 echo -dsm distributed shared memory
   6 echo -abortreaders abort readers immediately
   7 echo -trueprob double - probabiltiy of true branch
   8 echo -dsmcaching -enable caching in dsm runtime
   9 echo -mac distributed shared memory mac support
  10 echo -check generate check code
  11 echo -dmalloc link in dmalloc
  12 echo -recover compile task code
  13 echo -fastcheck fast checkpointing for Bristlecone
  14 echo -specdir directory
  15 echo -printflat print out flat representation
  16 echo -selfloop task - this task cannot self loop forever
  17 echo "-excprefetch methoddescriptor - exclude prefetches for this method (specified as class.method)"
  18 echo -taskstate do task state analysis
  19 echo -tagstate do tag state analysis
  20 echo -scheduling do task scheduling
  21 echo -multicore generate multi-core version binary
  22 echo "-numcore set the number of cores (should be used together with -multicore), defaultly set as 1"
  23 echo "-raw generate raw version binary (should be used together with -multicore)"
  24 echo "-rawcacheflush enable cache flush in raw version binary (should be used togethere with -raw)"
  25 echo "-interrupt generate raw version binary with interruption (should be used togethere with -raw)"
  26 echo "-rawconfig config raw simulator as 4xn (should be used together with -raw)"
  27 echo "-rawpath print out execute path information for raw version (should be used together with -raw)"
  28 echo "-useprofile use profiling data for scheduling (should be used together with -raw)"
  29 echo -threadsimulate generate multi-thread simulate version binary
  30 echo -printscheduling print out scheduling graphs
  31 echo -printschedulesim print out scheduling simulator result graphs
  32 echo -optional enable optional
  33 echo -debug generate debug symbols
  34 echo -prefetch do prefetch analysis
  35 echo -transstats generates transaction stats on commits and aborts
  36 echo -webinterface enable web interface
  37 echo -runtimedebug printout runtime debug messages
  38 echo "-thread use support for multiple threads"
  39 echo "-optimize call gcc with -O9 (optimize)"
  40 echo "-nooptimize call gcc with -O0 (do not optimize)"
  41 echo -curdir directory
  42 echo -mainclass class with main method
  43 echo -o binary
  44 echo -nojava do not run bristlecone compiler
  45 echo -instructionfailures inject code for instructionfailures
  46 echo -profile build with profile options
  47 echo "-rawuseio use standard io to output profiling data (should be used together with -raw and -profile), it only works with single core version"
  48 echo "-enable-assertions execute assert statements during compilation"
  49 echo -justanalyze exit after compiler analyses complete
  50 echo -help help
  51 }
  52
  53 ABORTREADERS=false;
  54 ROBUSTROOT=~/research/Robust/src
  55 DSMRUNTIME=$ROBUSTROOT/Runtime/DSTM/interface/
  56 REPAIRROOT=~/research/Repair/RepairCompiler/
  57 CURDIR=`pwd`
  58 DSMFLAG=false
  59 NOJAVA=false
  60 CHECKFLAG=false
  61 RECOVERFLAG=false
  62 MULTICOREFLAG=false
  63 TRANSSTATSFLAG=false
  64 RAWFLAG=false
  65 RAWCACHEFLUSHFLAG=false
  66 RAWCONFIG=''
  67 RAWDEBUGFLAG=false
  68 RAWPATHFLAG=false
  69 RAWPROFILEFLAG=false
  70 RAWUSEIOFLAG=false
  71 INTERRUPTFLAG=false
  72 THREADSIMULATEFLAG=false;
  73 USEDMALLOC=false
  74 THREADFLAG=false
  75 FASTCHECK=false
  76 SPECDIR=`pwd`
  77 SRCFILES=''
  78 EXTRAOPTIONS=''
  79 MAINFILE='a'
  80 JAVAFORWARDOPTS=''
  81 JAVAOPTS=''
  82 OPTIONALFLAG=false
  83 EXITAFTERANALYSIS=false
  84
  85 if [[ -z $1 ]]
  86 then
  87 printhelp
  88 exit
  89 fi
  90
  91 while [[ -n $1 ]]
  92 do
  93 if [[ $1 = '-help' ]]
  94 then
  95 printhelp
  96 exit
  97 elif [[ $1 = '-justanalyze' ]]
  98 then
  99 EXITAFTERANALYSIS=true
 100 elif [[ $1 = '-abortreaders' ]]
 101 then
 102 ABORTREADERS=true
 103 EXTRAOPTIONS="$EXTRAOPTIONS -DABORTREADERS"
 104 JAVAOPTS="$JAVAOPTS -abortreaders"
 105 elif [[ $1 = '-robustroot' ]]
 106 then
 107 ROBUSTROOT="$2"
 108 shift
 109 elif [[ $1 = '-nojava' ]]
 110 then
 111 NOJAVA=true
 112 elif [[ $1 = '-fastcheck' ]]
 113 then
 114 EXTRAOPTIONS="$EXTRAOPTIONS -DFASTCHECK"
 115 JAVAOPTS="$JAVAOPTS -fastcheck"
 116 FASTCHECK=true
 117 elif [[ $1 = '-o' ]]
 118 then
 119 MAINFILE="$2"
 120 shift
 121 elif [[ $1 = '-mainclass' ]]
 122 then
 123 JAVAOPTS="$JAVAOPTS -mainclass $2"
 124 shift
 125 elif [[ $1 = '-selfloop' ]]
 126 then
 127 JAVAOPTS="$JAVAOPTS -selfloop $2"
 128 shift
 129 elif [[ $1 = '-excprefetch' ]]
 130 then
 131 JAVAOPTS="$JAVAOPTS -excprefetch $2"
 132 shift
 133 elif [[ $1 = '-dsm' ]]
 134 then
 135 JAVAOPTS="$JAVAOPTS -dsm"
 136 DSMFLAG=true
 137 elif [[ $1 = '-prefetch' ]]
 138 then
 139 JAVAOPTS="$JAVAOPTS -prefetch"
 140 elif [[ $1 = '-transstats' ]]
 141 then
 142 TRANSSTATSFLAG=true
 143 elif [[ $1 = '-printflat' ]]
 144 then
 145 JAVAOPTS="$JAVAOPTS -printflat"
 146 elif [[ $1 = '-trueprob' ]]
 147 then
 148 JAVAOPTS="$JAVAOPTS -trueprob $2"
 149 shift
 150 elif [[ $1 = '-mac' ]]
 151 then
 152 EXTRAOPTIONS="$EXTRAOPTIONS -DMAC"
 153 elif [[ $1 = '-profile' ]]
 154 then
 155 RAWPROFILEFLAG=true
 156 EXTRAOPTIONS="$EXTRAOPTIONS -pg"
 157 elif [[ $1 = '-rawuseio' ]]
 158 then
 159 RAWUSEIOFLAG=true
 160 elif [[ $1 = '-taskstate' ]]
 161 then
 162 JAVAOPTS="$JAVAOPTS -taskstate"
 163 elif [[ $1 = '-tagstate' ]]
 164 then
 165 JAVAOPTS="$JAVAOPTS -tagstate"
 166 elif [[ $1 = '-scheduling' ]]
 167 then
 168 JAVAOPTS="$JAVAOPTS -scheduling"
 169 elif [[ $1 = '-multicore' ]]
 170 then
 171 MULTICOREFLAG=true
 172 JAVAOPTS="$JAVAOPTS -multicore"
 173 elif [[ $1 = '-numcore' ]]
 174 then
 175 JAVAOPTS="$JAVAOPTS -numcore $2"
 176 shift
 177 elif [[ $1 = '-raw' ]]
 178 then
 179 RAWFLAG=true
 180 JAVAOPTS="$JAVAOPTS -raw"
 181 elif [[ $1 = '-rawcacheflush' ]]
 182 then
 183 RAWCACHEFLUSHFLAG=true
 184 elif [[ $1 = '-rawconfig' ]]
 185 then
 186 RAWCONFIG="$2"
 187 shift
 188 elif [[ $1 = '-interrupt' ]]
 189 then
 190 INTERRUPTFLAG=true
 191 elif [[ $1 = '-threadsimulate' ]]
 192 then
 193 THREADSIMULATEFLAG=true
 194 elif [[ $1 = '-optional' ]]
 195 then
 196 JAVAOPTS="$JAVAOPTS -optional"
 197 OPTIONALFLAG=true
 198 elif [[ $1 = '-dmalloc' ]]
 199 then
 200 USEDMALLOC=true
 201 elif [[ $1 = '-recover' ]]
 202 then
 203 RECOVERFLAG=true
 204 JAVAOPTS="$JAVAOPTS -task"
 205 elif [[ $1 = '-useprofile' ]]
 206 then
 207 JAVAOPTS="$JAVAOPTS -useprofile"
 208 elif [[ $1 = '-webinterface' ]]
 209 then
 210 JAVAOPTS="$JAVAOPTS -webinterface"
 211 elif [[ $1 = '-instructionfailures' ]]
 212 then
 213 JAVAOPTS="$JAVAOPTS -instructionfailures"
 214 elif [[ $1 = '-check' ]]
 215 then
 216 CHECKFLAG=true
 217 JAVAOPTS="$JAVAOPTS -conscheck"
 218 elif [[ $1 = '-enable-assertions' ]]
 219 then
 220 JAVAFORWARDOPTS="$JAVAFORWARDOPTS -ea"
 221 elif [[ $1 = '-specdir' ]]
 222 then
 223 cd $2
 224 SPECDIR=`pwd`
 225 cd $CURDIR
 226 shift
 227 elif [[ $1 = '-debug' ]]
 228 then
 229 RAWDEBUGFLAG=true
 230 EXTRAOPTIONS="$EXTRAOPTIONS -g"
 231 elif [[ $1 = '-rawpath' ]]
 232 then
 233 RAWPATHFLAG=true
 234 elif [[ $1 = '-runtimedebug' ]]
 235 then
 236 EXTRAOPTIONS="$EXTRAOPTIONS -DDEBUG"
 237 elif [[ $1 = '-dsmcaching' ]]
 238 then
 239 EXTRAOPTIONS="$EXTRAOPTIONS -DCACHE"
 240 elif [[ $1 = '-rangeprefetch' ]]
 241 then
 242 EXTRAOPTIONS="$EXTRAOPTIONS -DRANGEPREFETCH"
 243 elif [[ $1 = '-nooptimize' ]]
 244 then
 245 EXTRAOPTIONS="$EXTRAOPTIONS -O0"
 246 elif [[ $1 = '-optimize' ]]
 247 then
 248 EXTRAOPTIONS="$EXTRAOPTIONS -O9"
 249 elif [[ $1 = '-thread' ]]
 250 then
 251 JAVAOPTS="$JAVAOPTS -thread"
 252 EXTRAOPTIONS="$EXTRAOPTIONS -DTHREADS -lpthread"
 253 THREADFLAG=true
 254 elif [[ $1 = '-curdir' ]]
 255 then
 256 CURDIR=$2
 257 shift
 258 elif [[ $1 = '-outputdir' ]]
 259 then
 260 JAVAOPTS="$JAVAOPTS -outputdir $2"
 261 shift
 262 else
 263 SRCFILES="$SRCFILES $1"
 264 fi
 265 shift
 266 done
 267
 268 BUILDDIR="$CURDIR/tmpbuilddirectory"
 269
 270 cd $1
 271 cd $CURDIR
 272 shift
 273
 274 mkdir $BUILDDIR
 275
 276 if $CHECKFLAG #Generate structure files for repair tool
 277 then
 278 JAVAOPTS="$JAVAOPTS -struct structfile"
 279 fi
 280
 281 # Setup class path
 282
 283 if $RECOVERFLAG
 284 then
 285 if $FASTCHECK
 286 then
 287 #fast transactions
 288 JAVAOPTS="$JAVAOPTS -classlibrary $ROBUSTROOT/ClassLibrary/FastCheck"
 289 fi
 290 #base bristlecone files
 291 JAVAOPTS="$JAVAOPTS -classlibrary $ROBUSTROOT/ClassLibrary/Bristlecone"
 292 else
 293 if $DSMFLAG
 294 then
 295 #dsm stuff
 296 JAVAOPTS="$JAVAOPTS -classlibrary $ROBUSTROOT/ClassLibrary/JavaDSM"
 297 elif $THREADFLAG
 298 then
 299 #threading java stuff
 300 JAVAOPTS="$JAVAOPTS -classlibrary $ROBUSTROOT/ClassLibrary/JavaThread"
 301 fi
 302 #base java stuff
 303 JAVAOPTS="$JAVAOPTS -classlibrary $ROBUSTROOT/ClassLibrary/Java"
 304 fi
 305
 306 # Build bristlecone/java sources
 307
 308 if $MULTICOREFLAG
 309 then
 310 if ! ${ROBUSTROOT}/ourjava -Xms50m -Xmx800m $JAVAFORWARDOPTS -classpath $ROBUSTROOT/../cup/:$ROBUSTROOT Main.Main -classlibrary \
 311 $ROBUSTROOT/ClassLibrary/ -classlibrary $ROBUSTROOT/ClassLibrary/gnu/ \
 312 -dir $BUILDDIR $JAVAOPTS $SRCFILES
 313 then exit $?
 314 fi
 315 else
 316 #if ! ${ROBUSTROOT}/ourjava -Xms5m -Xmx100m $JAVAFORWARDOPTS -classpath $ROBUSTROOT/../cup/:$ROBUSTROOT Main.Main -classlibrary \
 317 if ! $NOJAVA
 318 then
 319 if ! ${ROBUSTROOT}/ourjava -Xms50m -Xmx600m $JAVAFORWARDOPTS -classpath $ROBUSTROOT/../cup/:$ROBUSTROOT Main.Main -classlibrary \
 320 $ROBUSTROOT/ClassLibrary/ -classlibrary $ROBUSTROOT/ClassLibrary/gnu/ -dir $BUILDDIR -precise \
 321 $JAVAOPTS $SRCFILES
 322 then exit $?
 323 fi
 324 fi
 325 fi
 326
 327 if $EXITAFTERANALYSIS
 328 then
 329 exit
 330 fi
 331
 332 # Build all of the consistency specs
 333
 334 if $CHECKFLAG # CHECKFLAG
 335 then
 336 cd $SPECDIR
 337 mkdir $BUILDDIR/specdir
 338 cp $REPAIRROOT/MCC/CRuntime/* $BUILDDIR/specdir
 339
 340 echo > $BUILDDIR/specs
 341
 342 # compile specs into C code
 343 for i in * # iterate over all directories
 344 do
 345 if [[ "$i" != "CVS" ]] # CVSDIR CHECK
 346 then
 347 cd $SPECDIR/$i
 348 cat $BUILDDIR/structfile.struct $i.label > $i.struct
 349 java -cp $REPAIRROOT/:. MCC.Compiler -name $i -checkonly $i
 350 cp size.[c,h] $BUILDDIR/specdir
 351 cp $i.c $i\_aux.[c,h] $BUILDDIR/specdir
 352 echo $i >> $BUILDDIR/specs
 353 fi # CVSDIR CHECK
 354 done # iterate over all directories
 355
 356 #compile C code
 357
 358 cd $BUILDDIR/specdir
 359 ./buildrobust
 360 echo > $BUILDDIR/checkers.h
 361 for i in `cat $BUILDDIR/specs`
 362 do
 363 gcc -O0 -g -fbounds-check -c $i\_aux.c
 364 echo \#include \"specdir\/$i\_aux.h\" >> $BUILDDIR/checkers.h
 365 done
 366 fi # CHECKFLAG
 367
 368 #build and link everything
 369
 370 if $RAWFLAG
 371 then # RAWFLAG
 372 RAWDIR="$CURDIR/raw"
 373 MAKEFILE="../Makefile.raw"
 374 mkdir $RAWDIR
 375 cd $RAWDIR
 376 make clean
 377 rm ./*
 378
 379 export RAWRGCCFLAGS="-DTASK -DMULTICORE -DRAW"
 380
 381 if $RAWCACHEFLUSHFLAG
 382 then # print path
 383 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWCACHEFLUSH"
 384 fi
 385
 386 if $RAWPATHFLAG
 387 then # print path
 388 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWPATH"
 389 fi
 390
 391 if $RAWDEBUGFLAG
 392 then #debug version
 393 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWDEBUG"
 394 fi
 395
 396 if $RAWPROFILEFLAG
 397 then # profile version
 398 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWPROFILE"
 399 fi
 400
 401 if $RAWUSEIOFLAG
 402 then # useio version
 403 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWUSEIO"
 404 fi
 405
 406 if $INTERRUPTFLAG
 407 then #INTERRUPT version
 408 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DINTERRUPT"
 409 fi #INTERRUPT version
 410
 411 if $RAWUSEIOFLAG
 412 then # useio version
 413 MAKEFILE="$MAKEFILE.io"
 414 echo "+++++++++++use Makefile.raw.io++++++++++++++++"
 415 else
 416 MAKEFILE="$MAKEFILE.$RAWCONFIG"
 417 fi #useio version
 418
 419 cp $MAKEFILE ./Makefile
 420 cp ../Runtime/*.c ./
 421 cp ../Runtime/*.h ./
 422 cp ../Runtime/*.S ./
 423 cp ../Runtime/*.s ./
 424 cp ../tmpbuilddirectory/*.c ./
 425 cp ../tmpbuilddirectory/*.h ./
 426
 427 make
 428
 429 else #!RAWFLAG
 430 cd $CURDIR
 431
 432 INCLUDES="$INCLUDES -I$ROBUSTROOT/Runtime -I. -IRuntime/include \
 433 -I$BUILDDIR"
 434
 435 if $MULTICOREFLAG
 436 then
 437 RUNTIMEFILE="$ROBUSTROOT/Runtime/multicoreruntime.c $ROBUSTROOT/Runtime/multicoretask.c"
 438 else
 439 RUNTIMEFILE="$ROBUSTROOT/Runtime/runtime.c $ROBUSTROOT/Runtime/task.c"
 440 fi
 441
 442 FILES="$RUNTIMEFILE \
 443 $ROBUSTROOT/Runtime/file.c $ROBUSTROOT/Runtime/Queue.c \
 444 $ROBUSTROOT/Runtime/SimpleHash.c $ROBUSTROOT/Runtime/option.c \
 445 $ROBUSTROOT/Runtime/ObjectHash.c \
 446 $ROBUSTROOT/Runtime/garbage.c $ROBUSTROOT/Runtime/socket.c \
 447 $ROBUSTROOT/Runtime/math.c \
 448 $ROBUSTROOT/Runtime/GenericHashtable.c $ROBUSTROOT/Runtime/object.c"
 449
 450 if $DSMFLAG
 451 then
 452 EXTRAOPTIONS="$EXTRAOPTIONS -lpthread -DCOMPILER -DDSTM -I$DSMRUNTIME"
 453 if $TRANSSTATSFLAG
 454 then
 455 EXTRAOPTIONS="$EXTRAOPTIONS -lpthread -DTRANSSTATS -DCOMPILER -DDSTM -I$DSMRUNTIME"
 456 fi
 457 FILES="$FILES $DSMRUNTIME/trans.c $DSMRUNTIME/mcpileq.c $DSMRUNTIME/objstr.c $DSMRUNTIME/dstm.c $DSMRUNTIME/mlookup.c $DSMRUNTIME/clookup.c $DSMRUNTIME/llookup.c $DSMRUNTIME/threadnotify.c $DSMRUNTIME/dstmserver.c $DSMRUNTIME/plookup.c $DSMRUNTIME/ip.c $DSMRUNTIME/queue.c $DSMRUNTIME/prelookup.c $DSMRUNTIME/machinepile.c $ROBUSTROOT/Runtime/localobjects.c $ROBUSTROOT/Runtime/thread.c $DSMRUNTIME/sockpool.c $DSMRUNTIME/addUdpEnhance.c $DSMRUNTIME/signal.c $DSMRUNTIME/gCollect.c $DSMRUNTIME/addPrefetchEnhance.c $DSMRUNTIME/dsmlock.c $DSMRUNTIME/prefetch.c"
 458 fi
 459
 460 if $ABORTREADERS
 461 then
 462 FILES="$FILES $DSMRUNTIME/abortreaders.c"
 463 fi
 464
 465 if $FASTCHECK
 466 then
 467 FILES="$FILES $ROBUSTROOT/Runtime/localobjects.c"
 468 fi
 469
 470 if $RECOVERFLAG
 471 then
 472 EXTRAOPTIONS="$EXTRAOPTIONS -DTASK"
 473 if $MULTICOREFLAG
 474 then
 475 EXTRAOPTIONS="$EXTRAOPTIONS -DMULTICORE"
 476 fi
 477 FILES="$FILES tmpbuilddirectory/taskdefs.c $ROBUSTROOT/Runtime/checkpoint.c $ROBUSTROOT/Runtime/chash.c"
 478 if $RAWFLAG
 479 then
 480 EXTRAOPTIONS="$EXTRAOPTIONS -DRAW"
 481 fi
 482 if $THREADSIMULATEFLAG
 483 then
 484 # -lpthread for pthread functions, -lrt for message queue functions
 485 EXTRAOPTIONS="$EXTRAOPTIONS -DTHREADSIMULATE -lpthread -lrt"
 486 fi
 487 fi
 488
 489 if $OPTIONALFLAG
 490 then
 491 EXTRAOPTIONS="$EXTRAOPTIONS -DOPTIONAL"
 492 FILES="$FILES tmpbuilddirectory/optionalarrays.c"
 493 fi
 494
 495 if $THREADFLAG
 496 then
 497 FILES="$FILES $ROBUSTROOT/Runtime/thread.c"
 498 fi
 499
 500 if $CHECKFLAG
 501 then
 502 EXTRAOPTIONS="$EXTRAOPTIONS -DCONSCHECK $BUILDDIR/specdir/*.o"
 503 INCLUDES="$INCLUDES -I$BUILDDIR/specdir"
 504 fi
 505
 506 if $USEDMALLOC
 507 then
 508 EXTRAOPTIONS="$EXTRAOPTIONS -ldmalloc -DDMALLOC"
 509 fi
 510
 511 if $MULTICOREFLAG
 512 then
 513 gcc $INCLUDES $EXTRAOPTIONS \
 514 tmpbuilddirectory/methods.c $FILES -lm -o $MAINFILE.bin
 515 else
 516 gcc $INCLUDES $EXTRAOPTIONS -DPRECISE_GC \
 517 tmpbuilddirectory/methods.c $FILES -lm -o $MAINFILE.bin
 518 fi
 519
 520 fi #!RAWFLAG
 521
 522 exit
 523