Robust/src/buildscript

   1 #!/bin/bash
   2
   3 printhelp() {
   4 echo -robustroot set up the ROBUSTROOT to directory other than default one
   5 echo -dsm distributed shared memory
   6 echo -abortreaders abort readers immediately
   7 echo -trueprob double - probabiltiy of true branch
   8 echo -dsmcaching -enable caching in dsm runtime
   9 echo -mac distributed shared memory mac support
  10 echo -check generate check code
  11 echo -dmalloc link in dmalloc
  12 echo -recover compile task code
  13 echo -fastcheck fast checkpointing for Bristlecone
  14 echo -specdir directory
  15 echo -printflat print out flat representation
  16 echo -selfloop task - this task cannot self loop forever
  17 echo "-excprefetch methoddescriptor - exclude prefetches for this method (specified as class.method)"
  18 echo -taskstate do task state analysis
  19 echo -tagstate do tag state analysis
  20 echo -scheduling do task scheduling
  21 echo -multicore generate multi-core version binary
  22 echo "-numcore set the number of cores (should be used together with -multicore), defaultly set as 1"
  23 echo "-raw generate raw version binary (should be used together with -multicore)"
  24 echo "-rawcacheflush enable cache flush in raw version binary (should be used togethere with -raw)"
  25 echo "-interrupt generate raw version binary with interruption (should be used togethere with -raw)"
  26 echo "-rawconfig config raw simulator as 4xn (should be used together with -raw)"
  27 echo "-rawpath print out execute path information for raw version (should be used together with -raw)"
  28 echo "-useprofile use profiling data for scheduling (should be used together with -raw)"
  29 echo -threadsimulate generate multi-thread simulate version binary
  30 echo -printscheduling print out scheduling graphs
  31 echo -printschedulesim print out scheduling simulator result graphs
  32 echo -optional enable optional
  33 echo -debug generate debug symbols
  34 echo -prefetch do prefetch analysis
  35 echo -transstats generates transaction stats on commits and aborts
  36 echo -webinterface enable web interface
  37 echo -runtimedebug printout runtime debug messages
  38 echo "-thread use support for multiple threads"
  39 echo "-optimize call gcc with -O9 (optimize)"
  40 echo "-nooptimize call gcc with -O0 (do not optimize)"
  41 echo -curdir directory
  42 echo -mainclass class with main method
  43 echo -o binary
  44 echo -nojava do not run bristlecone compiler
  45 echo -instructionfailures inject code for instructionfailures
  46 echo -profile build with profile options
  47 echo "-rawuseio use standard io to output profiling data (should be used together with -raw and -profile), it only works with single core version"
  48 echo "-enable-assertions execute assert statements during compilation"
  49 echo -justanalyze exit after compiler analyses complete
  50 echo -help help
  51 }
  52
  53 ABORTREADERS=false;
  54 ROBUSTROOT=~/research/Robust/src
  55 DSMRUNTIME=$ROBUSTROOT/Runtime/DSTM/interface/
  56 REPAIRROOT=~/research/Repair/RepairCompiler/
  57 CURDIR=`pwd`
  58 DSMFLAG=false
  59 NOJAVA=false
  60 CHECKFLAG=false
  61 RECOVERFLAG=false
  62 MULTICOREFLAG=false
  63 TRANSSTATSFLAG=false
  64 RAWFLAG=false
  65 RAWCACHEFLUSHFLAG=false
  66 RAWCONFIG=''
  67 RAWDEBUGFLAG=false
  68 RAWPATHFLAG=false
  69 RAWPROFILEFLAG=false
  70 RAWUSEIOFLAG=false
  71 INTERRUPTFLAG=false
  72 THREADSIMULATEFLAG=false;
  73 USEDMALLOC=false
  74 THREADFLAG=false
  75 FASTCHECK=false
  76 SPECDIR=`pwd`
  77 SRCFILES=''
  78 EXTRAOPTIONS=''
  79 MAINFILE='a'
  80 JAVAFORWARDOPTS=''
  81 JAVAOPTS=''
  82 OPTIONALFLAG=false
  83 EXITAFTERANALYSIS=false
  84
  85 if [[ -z $1 ]]
  86 then
  87 printhelp
  88 exit
  89 fi
  90
  91 while [[ -n $1 ]]
  92 do
  93 if [[ $1 = '-help' ]]
  94 then
  95 printhelp
  96 exit
  97 elif [[ $1 = '-justanalyze' ]]
  98 then
  99 EXITAFTERANALYSIS=true
 100 elif [[ $1 = '-abortreaders' ]]
 101 then
 102 ABORTREADERS=true
 103 EXTRAOPTIONS="$EXTRAOPTIONS -DABORTREADERS"
 104 JAVAOPTS="$JAVAOPTS -abortreaders"
 105 elif [[ $1 = '-robustroot' ]]
 106 then
 107 ROBUSTROOT="$2"
 108 shift
 109 elif [[ $1 = '-nojava' ]]
 110 then
 111 NOJAVA=true
 112 elif [[ $1 = '-fastcheck' ]]
 113 then
 114 EXTRAOPTIONS="$EXTRAOPTIONS -DFASTCHECK"
 115 JAVAOPTS="$JAVAOPTS -fastcheck"
 116 FASTCHECK=true
 117 elif [[ $1 = '-o' ]]
 118 then
 119 MAINFILE="$2"
 120 shift
 121 elif [[ $1 = '-mainclass' ]]
 122 then
 123 JAVAOPTS="$JAVAOPTS -mainclass $2"
 124 shift
 125 elif [[ $1 = '-selfloop' ]]
 126 then
 127 JAVAOPTS="$JAVAOPTS -selfloop $2"
 128 shift
 129 elif [[ $1 = '-excprefetch' ]]
 130 then
 131 JAVAOPTS="$JAVAOPTS -excprefetch $2"
 132 shift
 133 elif [[ $1 = '-dsm' ]]
 134 then
 135 JAVAOPTS="$JAVAOPTS -dsm"
 136 DSMFLAG=true
 137 elif [[ $1 = '-prefetch' ]]
 138 then
 139 JAVAOPTS="$JAVAOPTS -prefetch"
 140 elif [[ $1 = '-transstats' ]]
 141 then
 142 TRANSSTATSFLAG=true
 143 elif [[ $1 = '-printflat' ]]
 144 then
 145 JAVAOPTS="$JAVAOPTS -printflat"
 146 elif [[ $1 = '-trueprob' ]]
 147 then
 148 JAVAOPTS="$JAVAOPTS -trueprob $2"
 149 shift
 150 elif [[ $1 = '-mac' ]]
 151 then
 152 EXTRAOPTIONS="$EXTRAOPTIONS -DMAC"
 153 elif [[ $1 = '-profile' ]]
 154 then
 155 RAWPROFILEFLAG=true
 156 EXTRAOPTIONS="$EXTRAOPTIONS -pg"
 157 elif [[ $1 = '-rawuseio' ]]
 158 then
 159 RAWUSEIOFLAG=true
 160 elif [[ $1 = '-taskstate' ]]
 161 then
 162 JAVAOPTS="$JAVAOPTS -taskstate"
 163 elif [[ $1 = '-tagstate' ]]
 164 then
 165 JAVAOPTS="$JAVAOPTS -tagstate"
 166 elif [[ $1 = '-scheduling' ]]
 167 then
 168 JAVAOPTS="$JAVAOPTS -scheduling"
 169 elif [[ $1 = '-multicore' ]]
 170 then
 171 MULTICOREFLAG=true
 172 JAVAOPTS="$JAVAOPTS -multicore"
 173 elif [[ $1 = '-numcore' ]]
 174 then
 175 JAVAOPTS="$JAVAOPTS -numcore $2"
 176 shift
 177 elif [[ $1 = '-raw' ]]
 178 then
 179 RAWFLAG=true
 180 JAVAOPTS="$JAVAOPTS -raw"
 181 elif [[ $1 = '-rawcacheflush' ]]
 182 then
 183 RAWCACHEFLUSHFLAG=true
 184 elif [[ $1 = '-rawconfig' ]]
 185 then
 186 RAWCONFIG="$2"
 187 shift
 188 elif [[ $1 = '-interrupt' ]]
 189 then
 190 INTERRUPTFLAG=true
 191 elif [[ $1 = '-threadsimulate' ]]
 192 then
 193 THREADSIMULATEFLAG=true
 194 elif [[ $1 = '-optional' ]]
 195 then
 196 JAVAOPTS="$JAVAOPTS -optional"
 197 OPTIONALFLAG=true
 198 elif [[ $1 = '-dmalloc' ]]
 199 then
 200 USEDMALLOC=true
 201 elif [[ $1 = '-recover' ]]
 202 then
 203 RECOVERFLAG=true
 204 JAVAOPTS="$JAVAOPTS -task"
 205 elif [[ $1 = '-useprofile' ]]
 206 then
 207 JAVAOPTS="$JAVAOPTS -useprofile"
 208 elif [[ $1 = '-webinterface' ]]
 209 then
 210 JAVAOPTS="$JAVAOPTS -webinterface"
 211 elif [[ $1 = '-instructionfailures' ]]
 212 then
 213 JAVAOPTS="$JAVAOPTS -instructionfailures"
 214 elif [[ $1 = '-check' ]]
 215 then
 216 CHECKFLAG=true
 217 JAVAOPTS="$JAVAOPTS -conscheck"
 218 elif [[ $1 = '-enable-assertions' ]]
 219 then
 220 JAVAFORWARDOPTS="$JAVAFORWARDOPTS -ea"
 221 elif [[ $1 = '-specdir' ]]
 222 then
 223 cd $2
 224 SPECDIR=`pwd`
 225 cd $CURDIR
 226 shift
 227 elif [[ $1 = '-debug' ]]
 228 then
 229 RAWDEBUGFLAG=true
 230 EXTRAOPTIONS="$EXTRAOPTIONS -g"
 231 elif [[ $1 = '-rawpath' ]]
 232 then
 233 RAWPATHFLAG=true
 234 elif [[ $1 = '-runtimedebug' ]]
 235 then
 236 EXTRAOPTIONS="$EXTRAOPTIONS -DDEBUG"
 237 elif [[ $1 = '-dsmcaching' ]]
 238 then
 239 EXTRAOPTIONS="$EXTRAOPTIONS -DCACHE"
 240 elif [[ $1 = '-rangeprefetch' ]]
 241 then
 242 EXTRAOPTIONS="$EXTRAOPTIONS -DRANGEPREFETCH"
 243 elif [[ $1 = '-nooptimize' ]]
 244 then
 245 EXTRAOPTIONS="$EXTRAOPTIONS -O0"
 246 elif [[ $1 = '-optimize' ]]
 247 then
 248 EXTRAOPTIONS="$EXTRAOPTIONS -O9"
 249 elif [[ $1 = '-thread' ]]
 250 then
 251 JAVAOPTS="$JAVAOPTS -thread"
 252 EXTRAOPTIONS="$EXTRAOPTIONS -DTHREADS -lpthread"
 253 THREADFLAG=true
 254 elif [[ $1 = '-curdir' ]]
 255 then
 256 CURDIR=$2
 257 shift
 258 else
 259 SRCFILES="$SRCFILES $1"
 260 fi
 261 shift
 262 done
 263
 264 BUILDDIR="$CURDIR/tmpbuilddirectory"
 265
 266 cd $1
 267 cd $CURDIR
 268 shift
 269
 270 mkdir $BUILDDIR
 271
 272 if $CHECKFLAG #Generate structure files for repair tool
 273 then
 274 JAVAOPTS="$JAVAOPTS -struct structfile"
 275 fi
 276
 277 # Build bristlecone/java sources
 278
 279 if $MULTICOREFLAG
 280 then
 281 if ! ${ROBUSTROOT}/ourjava -Xms50m -Xmx800m $JAVAFORWARDOPTS -classpath $ROBUSTROOT/../cup/:$ROBUSTROOT Main.Main -classlibrary \
 282 $ROBUSTROOT/ClassLibrary/ -dir $BUILDDIR \
 283 $JAVAOPTS $SRCFILES
 284 then exit $?
 285 fi
 286 else
 287 #if ! ${ROBUSTROOT}/ourjava -Xms5m -Xmx100m $JAVAFORWARDOPTS -classpath $ROBUSTROOT/../cup/:$ROBUSTROOT Main.Main -classlibrary \
 288 if ! $NOJAVA
 289 then
 290 if ! ${ROBUSTROOT}/ourjava -Xms50m -Xmx600m $JAVAFORWARDOPTS -classpath $ROBUSTROOT/../cup/:$ROBUSTROOT Main.Main -classlibrary \
 291 $ROBUSTROOT/ClassLibrary/ -dir $BUILDDIR -precise \
 292 $JAVAOPTS $SRCFILES
 293 then exit $?
 294 fi
 295 fi
 296 fi
 297
 298 if $EXITAFTERANALYSIS
 299 then
 300 exit
 301 fi
 302
 303 # Build all of the consistency specs
 304
 305 if $CHECKFLAG # CHECKFLAG
 306 then
 307 cd $SPECDIR
 308 mkdir $BUILDDIR/specdir
 309 cp $REPAIRROOT/MCC/CRuntime/* $BUILDDIR/specdir
 310
 311 echo > $BUILDDIR/specs
 312
 313 # compile specs into C code
 314 for i in * # iterate over all directories
 315 do
 316 if [[ "$i" != "CVS" ]] # CVSDIR CHECK
 317 then
 318 cd $SPECDIR/$i
 319 cat $BUILDDIR/structfile.struct $i.label > $i.struct
 320 java -cp $REPAIRROOT/:. MCC.Compiler -name $i -checkonly $i
 321 cp size.[c,h] $BUILDDIR/specdir
 322 cp $i.c $i\_aux.[c,h] $BUILDDIR/specdir
 323 echo $i >> $BUILDDIR/specs
 324 fi # CVSDIR CHECK
 325 done # iterate over all directories
 326
 327 #compile C code
 328
 329 cd $BUILDDIR/specdir
 330 ./buildrobust
 331 echo > $BUILDDIR/checkers.h
 332 for i in `cat $BUILDDIR/specs`
 333 do
 334 gcc -O0 -g -fbounds-check -c $i\_aux.c
 335 echo \#include \"specdir\/$i\_aux.h\" >> $BUILDDIR/checkers.h
 336 done
 337 fi # CHECKFLAG
 338
 339 #build and link everything
 340
 341 if $RAWFLAG
 342 then # RAWFLAG
 343 RAWDIR="$CURDIR/raw"
 344 MAKEFILE="../Makefile.raw"
 345 mkdir $RAWDIR
 346 cd $RAWDIR
 347 make clean
 348 rm ./*
 349
 350 export RAWRGCCFLAGS="-DTASK -DMULTICORE -DRAW"
 351
 352 if $RAWCACHEFLUSHFLAG
 353 then # print path
 354 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWCACHEFLUSH"
 355 fi
 356
 357 if $RAWPATHFLAG
 358 then # print path
 359 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWPATH"
 360 fi
 361
 362 if $RAWDEBUGFLAG
 363 then #debug version
 364 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWDEBUG"
 365 fi
 366
 367 if $RAWPROFILEFLAG
 368 then # profile version
 369 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWPROFILE"
 370 fi
 371
 372 if $RAWUSEIOFLAG
 373 then # useio version
 374 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DRAWUSEIO"
 375 fi
 376
 377 if $INTERRUPTFLAG
 378 then #INTERRUPT version
 379 RAWRGCCFLAGS="${RAWRGCCFLAGS} -DINTERRUPT"
 380 fi #INTERRUPT version
 381
 382 if $RAWUSEIOFLAG
 383 then # useio version
 384 MAKEFILE="$MAKEFILE.io"
 385 echo "+++++++++++use Makefile.raw.io++++++++++++++++"
 386 else
 387 MAKEFILE="$MAKEFILE.$RAWCONFIG"
 388 fi #useio version
 389
 390 cp $MAKEFILE ./Makefile
 391 cp ../Runtime/*.c ./
 392 cp ../Runtime/*.h ./
 393 cp ../Runtime/*.S ./
 394 cp ../Runtime/*.s ./
 395 cp ../tmpbuilddirectory/*.c ./
 396 cp ../tmpbuilddirectory/*.h ./
 397
 398 make
 399
 400 else #!RAWFLAG
 401 cd $CURDIR
 402
 403 INCLUDES="$INCLUDES -I$ROBUSTROOT/Runtime -I. -IRuntime/include \
 404 -I$BUILDDIR"
 405
 406 if $MULTICOREFLAG
 407 then
 408 RUNTIMEFILE="$ROBUSTROOT/Runtime/multicoreruntime.c $ROBUSTROOT/Runtime/multicoretask.c"
 409 else
 410 RUNTIMEFILE="$ROBUSTROOT/Runtime/runtime.c $ROBUSTROOT/Runtime/task.c"
 411 fi
 412
 413 FILES="$RUNTIMEFILE \
 414 $ROBUSTROOT/Runtime/file.c $ROBUSTROOT/Runtime/Queue.c \
 415 $ROBUSTROOT/Runtime/SimpleHash.c $ROBUSTROOT/Runtime/option.c \
 416 $ROBUSTROOT/Runtime/ObjectHash.c \
 417 $ROBUSTROOT/Runtime/garbage.c $ROBUSTROOT/Runtime/socket.c \
 418 $ROBUSTROOT/Runtime/math.c \
 419 $ROBUSTROOT/Runtime/GenericHashtable.c $ROBUSTROOT/Runtime/object.c"
 420
 421 if $DSMFLAG
 422 then
 423 EXTRAOPTIONS="$EXTRAOPTIONS -lpthread -DCOMPILER -DDSTM -I$DSMRUNTIME"
 424 if $TRANSSTATSFLAG
 425 then
 426 EXTRAOPTIONS="$EXTRAOPTIONS -lpthread -DTRANSSTATS -DCOMPILER -DDSTM -I$DSMRUNTIME"
 427 fi
 428 FILES="$FILES $DSMRUNTIME/trans.c $DSMRUNTIME/mcpileq.c $DSMRUNTIME/objstr.c $DSMRUNTIME/dstm.c $DSMRUNTIME/mlookup.c $DSMRUNTIME/clookup.c $DSMRUNTIME/llookup.c $DSMRUNTIME/threadnotify.c $DSMRUNTIME/dstmserver.c $DSMRUNTIME/plookup.c $DSMRUNTIME/ip.c $DSMRUNTIME/queue.c $DSMRUNTIME/prelookup.c $DSMRUNTIME/machinepile.c $ROBUSTROOT/Runtime/localobjects.c $ROBUSTROOT/Runtime/thread.c $DSMRUNTIME/sockpool.c $DSMRUNTIME/addUdpEnhance.c $DSMRUNTIME/signal.c $DSMRUNTIME/gCollect.c $DSMRUNTIME/addPrefetchEnhance.c $DSMRUNTIME/dsmlock.c $DSMRUNTIME/prefetch.c"
 429 fi
 430
 431 if $ABORTREADERS
 432 then
 433 FILES="$FILES $DSMRUNTIME/abortreaders.c"
 434 fi
 435
 436 if $FASTCHECK
 437 then
 438 FILES="$FILES $ROBUSTROOT/Runtime/localobjects.c"
 439 fi
 440
 441 if $RECOVERFLAG
 442 then
 443 EXTRAOPTIONS="$EXTRAOPTIONS -DTASK"
 444 if $MULTICOREFLAG
 445 then
 446 EXTRAOPTIONS="$EXTRAOPTIONS -DMULTICORE"
 447 fi
 448 FILES="$FILES tmpbuilddirectory/taskdefs.c $ROBUSTROOT/Runtime/checkpoint.c $ROBUSTROOT/Runtime/chash.c"
 449 if $RAWFLAG
 450 then
 451 EXTRAOPTIONS="$EXTRAOPTIONS -DRAW"
 452 fi
 453 if $THREADSIMULATEFLAG
 454 then
 455 # -lpthread for pthread functions, -lrt for message queue functions
 456 EXTRAOPTIONS="$EXTRAOPTIONS -DTHREADSIMULATE -lpthread -lrt"
 457 fi
 458 fi
 459
 460 if $OPTIONALFLAG
 461 then
 462 EXTRAOPTIONS="$EXTRAOPTIONS -DOPTIONAL"
 463 FILES="$FILES tmpbuilddirectory/optionalarrays.c"
 464 fi
 465
 466 if $THREADFLAG
 467 then
 468 FILES="$FILES $ROBUSTROOT/Runtime/thread.c"
 469 fi
 470
 471 if $CHECKFLAG
 472 then
 473 EXTRAOPTIONS="$EXTRAOPTIONS -DCONSCHECK $BUILDDIR/specdir/*.o"
 474 INCLUDES="$INCLUDES -I$BUILDDIR/specdir"
 475 fi
 476
 477 if $USEDMALLOC
 478 then
 479 EXTRAOPTIONS="$EXTRAOPTIONS -ldmalloc -DDMALLOC"
 480 fi
 481
 482 if $MULTICOREFLAG
 483 then
 484 gcc $INCLUDES $EXTRAOPTIONS \
 485 tmpbuilddirectory/methods.c $FILES -lm -o $MAINFILE.bin
 486 else
 487 gcc $INCLUDES $EXTRAOPTIONS -DPRECISE_GC \
 488 tmpbuilddirectory/methods.c $FILES -lm -o $MAINFILE.bin
 489 fi
 490
 491 fi #!RAWFLAG
 492
 493 exit
 494