Finally give bugpoint -timeout support!
[oota-llvm.git] / tools / bugpoint / BugDriver.cpp
1 //===- BugDriver.cpp - Top-Level BugPoint class implementation ------------===//
2 // 
3 //                     The LLVM Compiler Infrastructure
4 //
5 // This file was developed by the LLVM research group and is distributed under
6 // the University of Illinois Open Source License. See LICENSE.TXT for details.
7 // 
8 //===----------------------------------------------------------------------===//
9 //
10 // This class contains all of the shared state and information that is used by
11 // the BugPoint tool to track down errors in optimizations.  This class is the
12 // main driver class that invokes all sub-functionality.
13 //
14 //===----------------------------------------------------------------------===//
15
16 #include "BugDriver.h"
17 #include "llvm/Module.h"
18 #include "llvm/Pass.h"
19 #include "llvm/Assembly/Parser.h"
20 #include "llvm/Bytecode/Reader.h"
21 #include "llvm/Support/Linker.h"
22 #include "llvm/Support/ToolRunner.h"
23 #include "Support/CommandLine.h"
24 #include "Support/FileUtilities.h"
25 #include <iostream>
26 #include <memory>
27
28 using namespace llvm;
29
30 // Anonymous namespace to define command line options for debugging.
31 //
32 namespace {
33   // Output - The user can specify a file containing the expected output of the
34   // program.  If this filename is set, it is used as the reference diff source,
35   // otherwise the raw input run through an interpreter is used as the reference
36   // source.
37   //
38   cl::opt<std::string> 
39   OutputFile("output", cl::desc("Specify a reference program output "
40                                 "(for miscompilation detection)"));
41 }
42
43 /// setNewProgram - If we reduce or update the program somehow, call this method
44 /// to update bugdriver with it.  This deletes the old module and sets the
45 /// specified one as the current program.
46 void BugDriver::setNewProgram(Module *M) {
47   delete Program;
48   Program = M;
49 }
50
51
52 /// getPassesString - Turn a list of passes into a string which indicates the
53 /// command line options that must be passed to add the passes.
54 ///
55 std::string llvm::getPassesString(const std::vector<const PassInfo*> &Passes) {
56   std::string Result;
57   for (unsigned i = 0, e = Passes.size(); i != e; ++i) {
58     if (i) Result += " ";
59     Result += "-";
60     Result += Passes[i]->getPassArgument();
61   }
62   return Result;
63 }
64
65 BugDriver::BugDriver(const char *toolname)
66   : ToolName(toolname), ReferenceOutputFile(OutputFile),
67     Program(0), Interpreter(0), cbe(0), gcc(0) {}
68
69
70 /// ParseInputFile - Given a bytecode or assembly input filename, parse and
71 /// return it, or return null if not possible.
72 ///
73 Module *llvm::ParseInputFile(const std::string &InputFilename) {
74   Module *Result = 0;
75   try {
76     Result = ParseBytecodeFile(InputFilename);
77     if (!Result && !(Result = ParseAssemblyFile(InputFilename))){
78       std::cerr << "bugpoint: could not read input file '"
79                 << InputFilename << "'!\n";
80     }
81   } catch (const ParseException &E) {
82     std::cerr << "bugpoint: " << E.getMessage() << '\n';
83     Result = 0;
84   }
85   return Result;
86 }
87
88 // This method takes the specified list of LLVM input files, attempts to load
89 // them, either as assembly or bytecode, then link them together. It returns
90 // true on failure (if, for example, an input bytecode file could not be
91 // parsed), and false on success.
92 //
93 bool BugDriver::addSources(const std::vector<std::string> &Filenames) {
94   assert(Program == 0 && "Cannot call addSources multiple times!");
95   assert(!Filenames.empty() && "Must specify at least on input filename!");
96
97   // Load the first input file...
98   Program = ParseInputFile(Filenames[0]);
99   if (Program == 0) return true;
100   std::cout << "Read input file      : '" << Filenames[0] << "'\n";
101
102   for (unsigned i = 1, e = Filenames.size(); i != e; ++i) {
103     std::auto_ptr<Module> M(ParseInputFile(Filenames[i]));
104     if (M.get() == 0) return true;
105
106     std::cout << "Linking in input file: '" << Filenames[i] << "'\n";
107     std::string ErrorMessage;
108     if (LinkModules(Program, M.get(), &ErrorMessage)) {
109       std::cerr << ToolName << ": error linking in '" << Filenames[i] << "': "
110                 << ErrorMessage << '\n';
111       return true;
112     }
113   }
114
115   std::cout << "*** All input ok\n";
116
117   // All input files read successfully!
118   return false;
119 }
120
121
122
123 /// run - The top level method that is invoked after all of the instance
124 /// variables are set up from command line arguments.
125 ///
126 bool BugDriver::run() {
127   // The first thing that we must do is determine what the problem is. Does the
128   // optimization series crash the compiler, or does it produce illegal code?
129   // We make the top-level decision by trying to run all of the passes on the
130   // the input program, which should generate a bytecode file.  If it does
131   // generate a bytecode file, then we know the compiler didn't crash, so try
132   // to diagnose a miscompilation.
133   if (!PassesToRun.empty()) {
134     std::cout << "Running selected passes on program to test for crash: ";
135     if (runPasses(PassesToRun))
136       return debugOptimizerCrash();
137   }
138
139   // Set up the execution environment, selecting a method to run LLVM bytecode.
140   if (initializeExecutionEnvironment()) return true;
141
142   // Test to see if we have a code generator crash.
143   std::cout << "Running the code generator to test for a crash: ";
144   try {
145     compileProgram(Program);
146     std::cout << '\n';
147   } catch (ToolExecutionError &TEE) {
148     std::cout << TEE.what();
149     return debugCodeGeneratorCrash();
150   }
151
152
153   // Run the raw input to see where we are coming from.  If a reference output
154   // was specified, make sure that the raw output matches it.  If not, it's a
155   // problem in the front-end or the code generator.
156   //
157   bool CreatedOutput = false;
158   if (ReferenceOutputFile.empty()) {
159     std::cout << "Generating reference output from raw program: ";
160     try {
161       ReferenceOutputFile = executeProgramWithCBE("bugpoint.reference.out");
162       CreatedOutput = true;
163       std::cout << "Reference output is: " << ReferenceOutputFile << '\n';
164     } catch (ToolExecutionError &TEE) {
165       std::cerr << TEE.what();
166       if (Interpreter != cbe) {
167         std::cerr << "*** There is a bug running the C backend.  Either debug"
168                   << " it (use the -run-cbe bugpoint option), or fix the error"
169                   << " some other way.\n";
170         return 1;
171       }
172       return debugCodeGeneratorCrash();
173     }
174   }
175
176   // Make sure the reference output file gets deleted on exit from this
177   // function, if appropriate.
178   FileRemover RemoverInstance(ReferenceOutputFile, CreatedOutput);
179
180   // Diff the output of the raw program against the reference output.  If it
181   // matches, then we have a miscompilation bug.
182   std::cout << "*** Checking the code generator...\n";
183   try {
184     if (!diffProgram()) {
185       std::cout << "\n*** Debugging miscompilation!\n";
186       return debugMiscompilation();
187     }
188   } catch (ToolExecutionError &TEE) {
189     std::cerr << TEE.what();
190     return debugCodeGeneratorCrash();
191   }
192
193   std::cout << "\n*** Input program does not match reference diff!\n";
194   std::cout << "Debugging code generator problem!\n";
195   try {
196     return debugCodeGenerator();
197   } catch (ToolExecutionError &TEE) {
198     std::cerr << TEE.what();
199     return debugCodeGeneratorCrash();
200   }
201 }
202
203 void llvm::PrintFunctionList(const std::vector<Function*> &Funcs) {
204   unsigned NumPrint = Funcs.size();
205   if (NumPrint > 10) NumPrint = 10;
206   for (unsigned i = 0; i != NumPrint; ++i)
207     std::cout << " " << Funcs[i]->getName();
208   if (NumPrint < Funcs.size())
209     std::cout << "... <" << Funcs.size() << " total>";
210   std::cout << std::flush;
211 }