utils/NightlyTestTemplate.html

   1
   2 <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
   3 <html><head><title>LLVM Test Results for $DateString</title></head>
   4
   5 <body bgcolor=white>
   6 <center><font size=+3 face=Verdana><b>LLVM Test Results for $DateString</b></font></center>
   7 <hr height=1>
   8
   9 <table width=100%>
  10 <tr><td valign=top align=center>
  11
  12 <table border="0" cellspacing="0" cellpadding="2"><tr><td bgcolor="#000000">
  13 <table border="0" cellpadding="5" cellspacing="0"><tr><td bgcolor="#DDAA77">
  14 <font size=+1><b>Sections:</b></font><br>
  15 </td></tr><tr><td bgcolor="#FFCC99" align=center>
  16 <a href="#Overview">Overview</a><br>
  17 <a href="#Changes">Changes</a><br>
  18 <a href="#Trends">Trends</a><br>
  19 <a href="#Programs">Programs</a><br>
  20 <a href="#Regression">Regression</a><br>
  21 </td></tr></table></td></tr></table>
  22
  23 <p>
  24 <table border="0" cellspacing="0" cellpadding="2"><tr><td bgcolor="#000000">
  25 <table border="0" cellpadding="5" cellspacing="0"><tr><td bgcolor="#DDAA77"
  26 <font size=+1><b>Previous:</b></font><br>
  27 </td></tr><tr><td bgcolor="#FFCC99">
  28   $PrevDaysList
  29 </td></tr></table></td></tr></table>
  30 <p>
  31
  32 <font size=+1><b>Back to:</b></font><br>
  33 <a href="..">Test&nbsp;Results</a><br>
  34 <a href="../..">LLVM&nbsp;Page</a><p>
  35
  36 </td><td valign=top>
  37
  38 <center>
  39 <table border="0" cellspacing="0" cellpadding="2"><tr><td bgcolor="#000000">
  40 <table border="0" cellpadding="10" cellspacing="0"><tr><td bgcolor="#DDAA77"
  41 <font size=+2 face=Verdana><b><a name="Overview">Today's Test Results Overview</font></b>
  42 </td></tr></table></td></tr></table></center><p>
  43
  44 <h2>CVS Tree Overview:</h2>
  45 <ul>
  46 <li><a href="$DATE-CVS-Log.txt">CVS Checkout Log</a>
  47 <ul>
  48     Time to check out CVS tree:  <b>$CVSCheckoutTime</b> seconds<br>
  49     Number of directories in CVS: <b>$NumDirsInCVS</b><br>
  50     Number of files in CVS: <b>$NumFilesInCVS</b><br>
  51     Number of lines of code: <b>$LOC</b></ul>
  52 <li><a href="$DATE-Build-Log.txt">Compilation Log</a>
  53 <ul>
  54     $BuildError
  55     Time to build CVS tree:      <b>$BuildTime</b> seconds
  56                (<b>$BuildWallTime</b> seconds wall time)<br>
  57     Number of object files compiled: <b>$NumObjects</b><br>
  58     Number of libraries linked: <b>$NumLibraries</b><br>
  59     Number of executables linked:<b> $NumExecutables</b><br>
  60 </ul>
  61 </ul>
  62
  63 <h2>Warnings during the build:</h2>
  64 <ul>$WarningsList
  65 </ul><p>
  66
  67 <br><br><center>
  68 <table border="0" cellspacing="0" cellpadding="2"><tr><td bgcolor="#000000">
  69 <table border="0" cellpadding="10" cellspacing="0"><tr><td bgcolor="#DDAA77"
  70 <font size=+2 face=Verdana><b><a name="Changes">Changes from Yesterday</font></b>
  71 </td></tr></table></td></tr></table></center><p>
  72
  73 <h2>Changes to CVS:</h2>
  74 <ul>
  75 <li>Users who committed to CVS: <b>$UserCommitList</b>
  76 <li>Users who updated from CVS: <b>$UserUpdateList</b>
  77 <li>Added Files:    $AddedFilesList
  78 <li>Modified Files: $ModifiedFilesList
  79 <li>Removed Files:  $RemovedFilesList
  80 </ul><p>
  81
  82 <h2>Changes to Warnings:</h2>
  83 <ul>
  84 <li>Warnings Added: $WarningsAdded
  85 <li>Warnings Removed: $WarningsRemoved
  86 </ul><p>
  87
  88 <h2>Changes in the test suite:</h2>
  89 <ul>
  90 <li>New Tests: $TestsAdded
  91 <li>Removed Tests: $TestsRemoved
  92 <li>Newly passing tests: $TestsFixed
  93 <li>Newly failing tests: $TestsBroken
  94 </ul>
  95
  96 <br><br><center>
  97 <table border="0" cellspacing="0" cellpadding="2"><tr><td bgcolor="#000000">
  98 <table border="0" cellpadding="10" cellspacing="0"><tr><td bgcolor="#DDAA77"
  99 <font size=+2 face=Verdana><b><a name="Trends">Changes over Time</font></b>
 100 </td></tr></table></td></tr></table></center><p>
 101
 102 GNUplot <b>charts</b> showing a couple of things:
 103 <ol>
 104 <li>LOC in CVS
 105 <li>Compile Time
 106 <li>Testing Time
 107 <li>Time to run some programs, say all of Olden
 108 <li>Time to compile something, say Olden.
 109 <li>Size of bytecode files for Olden
 110 </ol>
 111
 112 <br><br><center>
 113 <table border="0" cellspacing="0" cellpadding="2"><tr><td bgcolor="#000000">
 114 <table border="0" cellpadding="10" cellspacing="0"><tr><td bgcolor="#DDAA77"
 115 <font size=+2 face=Verdana><b><a name="Programs">Program Tests</font></b>
 116 </td></tr></table></td></tr></table></center><p>
 117
 118 This section tests LLVM on a variety of programs in the test suite.  This
 119 includes benchmark suites like the Olden, ptrdist, and SPEC benchmarks as well
 120 as a few random programs with test inputs.  This section is meant to track how
 121 stable LLVM is as a whole.  The columns of the tables are:<p>
 122
 123 <ol>
 124 <li><a name="Program">Program - The name of the program for that row
 125 <li><a name="GCCAS">GCCAS - Time to run LLVM optimizers on the program
 126 <li><a name="Bytecode">Bytecode - The size of the bytecode for the program
 127 <li><a name="Instrs">Instrs - The number of LLVM instructions in the
 128     compiled bytecode
 129 <li><a name="LLC">LLC - The time taken compile with LLC (the static X86 backend)
 130 <li><a name="NAT">NAT - The time taken to execute the program when compiled
 131     with GCC -O3.
 132 <li><a name="CBE">CBE - The time taken to execute the program after compilation
 133     through the C Backend.  If the diff fails, this a *.
 134 <li><a name="JIT">JIT - How long does the program take to execute in the
 135     Just-In-Time compiler.
 136 <li><a name="MachCode">MachCode - The number of bytes of machine code
 137     generated by the JIT.
 138 <li><a name="CompTime">CompTime - The amount of time spent in the JIT itself,
 139     instead of executing the program.
 140 </ol><p>
 141
 142 A complete log of testing <a href="$DATE-ProgramTest.txt.gz">is available</a>
 143 for further analysis.
 144
 145 <h2>Programs/MultiSource</h2>
 146
 147 <center>
 148 <table border="0" cellspacing="0" cellpadding="2"><tr><td bgcolor="#000000">
 149 $ProgramsTable
 150 </td></tr></table></center>
 151
 152 <h2>Programs/SingleSource</h2>
 153
 154
 155
 156 <br><br><center>
 157 <table border="0" cellspacing="0" cellpadding="2"><tr><td bgcolor="#000000">
 158 <table border="0" cellpadding="10" cellspacing="0"><tr><td bgcolor="#DDAA77"
 159 <font size=+2 face=Verdana><b><a name="Regression">Regression Tests</font></b>
 160 </td></tr></table></td></tr></table></center><p>
 161
 162 Not yet implemented<p>
 163
 164 </td></tr>
 165
 166 </html>