This commit adds a new feature called find-bugs. The find-bugs option can be invoked...
[oota-llvm.git] / tools / bugpoint / BugDriver.cpp
1 //===- BugDriver.cpp - Top-Level BugPoint class implementation ------------===//
2 //
3 //                     The LLVM Compiler Infrastructure
4 //
5 // This file was developed by the LLVM research group and is distributed under
6 // the University of Illinois Open Source License. See LICENSE.TXT for details.
7 //
8 //===----------------------------------------------------------------------===//
9 //
10 // This class contains all of the shared state and information that is used by
11 // the BugPoint tool to track down errors in optimizations.  This class is the
12 // main driver class that invokes all sub-functionality.
13 //
14 //===----------------------------------------------------------------------===//
15
16 #include "BugDriver.h"
17 #include "ToolRunner.h"
18 #include "llvm/Linker.h"
19 #include "llvm/Module.h"
20 #include "llvm/Pass.h"
21 #include "llvm/Assembly/Parser.h"
22 #include "llvm/Bytecode/Reader.h"
23 #include "llvm/Support/CommandLine.h"
24 #include "llvm/Support/FileUtilities.h"
25 #include <iostream>
26 #include <memory>
27
28 using namespace llvm;
29
30 // Anonymous namespace to define command line options for debugging.
31 //
32 namespace {
33   // Output - The user can specify a file containing the expected output of the
34   // program.  If this filename is set, it is used as the reference diff source,
35   // otherwise the raw input run through an interpreter is used as the reference
36   // source.
37   //
38   cl::opt<std::string>
39   OutputFile("output", cl::desc("Specify a reference program output "
40                                 "(for miscompilation detection)"));
41 }
42
43 /// setNewProgram - If we reduce or update the program somehow, call this method
44 /// to update bugdriver with it.  This deletes the old module and sets the
45 /// specified one as the current program.
46 void BugDriver::setNewProgram(Module *M) {
47   delete Program;
48   Program = M;
49 }
50
51
52 /// getPassesString - Turn a list of passes into a string which indicates the
53 /// command line options that must be passed to add the passes.
54 ///
55 std::string llvm::getPassesString(const std::vector<const PassInfo*> &Passes) {
56   std::string Result;
57   for (unsigned i = 0, e = Passes.size(); i != e; ++i) {
58     if (i) Result += " ";
59     Result += "-";
60     Result += Passes[i]->getPassArgument();
61   }
62   return Result;
63 }
64
65 BugDriver::BugDriver(const char *toolname, bool as_child, bool find_bugs,
66                      unsigned timeout)
67   : ToolName(toolname), ReferenceOutputFile(OutputFile),
68     Program(0), Interpreter(0), cbe(0), gcc(0), run_as_child(as_child),
69     run_find_bugs(find_bugs), Timeout(timeout) {}
70
71
72 /// ParseInputFile - Given a bytecode or assembly input filename, parse and
73 /// return it, or return null if not possible.
74 ///
75 Module *llvm::ParseInputFile(const std::string &InputFilename) {
76   Module *Result = 0;
77   try {
78     Result = ParseBytecodeFile(InputFilename);
79     if (!Result && !(Result = ParseAssemblyFile(InputFilename))){
80       std::cerr << "bugpoint: could not read input file '"
81                 << InputFilename << "'!\n";
82     }
83   } catch (const ParseException &E) {
84     std::cerr << "bugpoint: " << E.getMessage() << '\n';
85     Result = 0;
86   }
87   return Result;
88 }
89
90 // This method takes the specified list of LLVM input files, attempts to load
91 // them, either as assembly or bytecode, then link them together. It returns
92 // true on failure (if, for example, an input bytecode file could not be
93 // parsed), and false on success.
94 //
95 bool BugDriver::addSources(const std::vector<std::string> &Filenames) {
96   assert(Program == 0 && "Cannot call addSources multiple times!");
97   assert(!Filenames.empty() && "Must specify at least on input filename!");
98
99   try {
100     // Load the first input file.
101     Program = ParseInputFile(Filenames[0]);
102     if (Program == 0) return true;
103     if (!run_as_child)
104       std::cout << "Read input file      : '" << Filenames[0] << "'\n";
105
106     for (unsigned i = 1, e = Filenames.size(); i != e; ++i) {
107       std::auto_ptr<Module> M(ParseInputFile(Filenames[i]));
108       if (M.get() == 0) return true;
109
110       if (!run_as_child)
111         std::cout << "Linking in input file: '" << Filenames[i] << "'\n";
112       std::string ErrorMessage;
113       if (Linker::LinkModules(Program, M.get(), &ErrorMessage)) {
114         std::cerr << ToolName << ": error linking in '" << Filenames[i] << "': "
115                   << ErrorMessage << '\n';
116         return true;
117       }
118     }
119   } catch (const std::string &Error) {
120     std::cerr << ToolName << ": error reading input '" << Error << "'\n";
121     return true;
122   }
123
124   if (!run_as_child)
125     std::cout << "*** All input ok\n";
126
127   // All input files read successfully!
128   return false;
129 }
130
131
132
133 /// run - The top level method that is invoked after all of the instance
134 /// variables are set up from command line arguments.
135 ///
136 bool BugDriver::run() {
137   // The first thing to do is determine if we're running as a child. If we are,
138   // then what to do is very narrow. This form of invocation is only called
139   // from the runPasses method to actually run those passes in a child process.
140   if (run_as_child) {
141     // Execute the passes
142     return runPassesAsChild(PassesToRun);
143   }
144   
145   if (run_find_bugs) {
146     // Rearrange the passes and apply them to the program. Repeat this process
147     // until the user kills the program or we find a bug.
148     return runManyPasses(PassesToRun);
149   }
150
151   // If we're not running as a child, the first thing that we must do is 
152   // determine what the problem is. Does the optimization series crash the 
153   // compiler, or does it produce illegal code?  We make the top-level 
154   // decision by trying to run all of the passes on the the input program, 
155   // which should generate a bytecode file.  If it does generate a bytecode 
156   // file, then we know the compiler didn't crash, so try to diagnose a 
157   // miscompilation.
158   if (!PassesToRun.empty()) {
159     std::cout << "Running selected passes on program to test for crash: ";
160     if (runPasses(PassesToRun))
161       return debugOptimizerCrash();
162   }
163
164   // Set up the execution environment, selecting a method to run LLVM bytecode.
165   if (initializeExecutionEnvironment()) return true;
166
167   // Test to see if we have a code generator crash.
168   std::cout << "Running the code generator to test for a crash: ";
169   try {
170     compileProgram(Program);
171     std::cout << '\n';
172   } catch (ToolExecutionError &TEE) {
173     std::cout << TEE.what();
174     return debugCodeGeneratorCrash();
175   }
176
177
178   // Run the raw input to see where we are coming from.  If a reference output
179   // was specified, make sure that the raw output matches it.  If not, it's a
180   // problem in the front-end or the code generator.
181   //
182   bool CreatedOutput = false;
183   if (ReferenceOutputFile.empty()) {
184     std::cout << "Generating reference output from raw program: ";
185     if(!createReferenceFile(Program)){
186         return debugCodeGeneratorCrash();
187     }
188     CreatedOutput = true;
189   }
190
191   // Make sure the reference output file gets deleted on exit from this
192   // function, if appropriate.
193   sys::Path ROF(ReferenceOutputFile);
194   FileRemover RemoverInstance(ROF, CreatedOutput);
195
196   // Diff the output of the raw program against the reference output.  If it
197   // matches, then we assume there is a miscompilation bug and try to 
198   // diagnose it.
199   std::cout << "*** Checking the code generator...\n";
200   try {
201     if (!diffProgram()) {
202       std::cout << "\n*** Debugging miscompilation!\n";
203       return debugMiscompilation();
204     }
205   } catch (ToolExecutionError &TEE) {
206     std::cerr << TEE.what();
207     return debugCodeGeneratorCrash();
208   }
209
210   std::cout << "\n*** Input program does not match reference diff!\n";
211   std::cout << "Debugging code generator problem!\n";
212   try {
213     return debugCodeGenerator();
214   } catch (ToolExecutionError &TEE) {
215     std::cerr << TEE.what();
216     return debugCodeGeneratorCrash();
217   }
218 }
219
220 void llvm::PrintFunctionList(const std::vector<Function*> &Funcs) {
221   unsigned NumPrint = Funcs.size();
222   if (NumPrint > 10) NumPrint = 10;
223   for (unsigned i = 0; i != NumPrint; ++i)
224     std::cout << " " << Funcs[i]->getName();
225   if (NumPrint < Funcs.size())
226     std::cout << "... <" << Funcs.size() << " total>";
227   std::cout << std::flush;
228 }