Fix r232466 by adding 'i' to the mappings for inline assembly memory constraints.
[oota-llvm.git] / include / llvm / Target / TargetLowering.h
1 //===-- llvm/Target/TargetLowering.h - Target Lowering Info -----*- C++ -*-===//
2 //
3 //                     The LLVM Compiler Infrastructure
4 //
5 // This file is distributed under the University of Illinois Open Source
6 // License. See LICENSE.TXT for details.
7 //
8 //===----------------------------------------------------------------------===//
9 ///
10 /// \file
11 /// This file describes how to lower LLVM code to machine code.  This has two
12 /// main components:
13 ///
14 ///  1. Which ValueTypes are natively supported by the target.
15 ///  2. Which operations are supported for supported ValueTypes.
16 ///  3. Cost thresholds for alternative implementations of certain operations.
17 ///
18 /// In addition it has a few other components, like information about FP
19 /// immediates.
20 ///
21 //===----------------------------------------------------------------------===//
22
23 #ifndef LLVM_TARGET_TARGETLOWERING_H
24 #define LLVM_TARGET_TARGETLOWERING_H
25
26 #include "llvm/ADT/DenseMap.h"
27 #include "llvm/CodeGen/DAGCombine.h"
28 #include "llvm/CodeGen/RuntimeLibcalls.h"
29 #include "llvm/CodeGen/SelectionDAGNodes.h"
30 #include "llvm/IR/Attributes.h"
31 #include "llvm/IR/CallSite.h"
32 #include "llvm/IR/CallingConv.h"
33 #include "llvm/IR/IRBuilder.h"
34 #include "llvm/IR/InlineAsm.h"
35 #include "llvm/IR/Instructions.h"
36 #include "llvm/MC/MCRegisterInfo.h"
37 #include "llvm/Target/TargetCallingConv.h"
38 #include "llvm/Target/TargetMachine.h"
39 #include <climits>
40 #include <map>
41 #include <vector>
42
43 namespace llvm {
44   class CallInst;
45   class CCState;
46   class FastISel;
47   class FunctionLoweringInfo;
48   class ImmutableCallSite;
49   class IntrinsicInst;
50   class MachineBasicBlock;
51   class MachineFunction;
52   class MachineInstr;
53   class MachineJumpTableInfo;
54   class MachineLoop;
55   class Mangler;
56   class MCContext;
57   class MCExpr;
58   class MCSymbol;
59   template<typename T> class SmallVectorImpl;
60   class DataLayout;
61   class TargetRegisterClass;
62   class TargetLibraryInfo;
63   class TargetLoweringObjectFile;
64   class Value;
65
66   namespace Sched {
67     enum Preference {
68       None,             // No preference
69       Source,           // Follow source order.
70       RegPressure,      // Scheduling for lowest register pressure.
71       Hybrid,           // Scheduling for both latency and register pressure.
72       ILP,              // Scheduling for ILP in low register pressure mode.
73       VLIW              // Scheduling for VLIW targets.
74     };
75   }
76
77 /// This base class for TargetLowering contains the SelectionDAG-independent
78 /// parts that can be used from the rest of CodeGen.
79 class TargetLoweringBase {
80   TargetLoweringBase(const TargetLoweringBase&) = delete;
81   void operator=(const TargetLoweringBase&) = delete;
82
83 public:
84   /// This enum indicates whether operations are valid for a target, and if not,
85   /// what action should be used to make them valid.
86   enum LegalizeAction {
87     Legal,      // The target natively supports this operation.
88     Promote,    // This operation should be executed in a larger type.
89     Expand,     // Try to expand this to other ops, otherwise use a libcall.
90     Custom      // Use the LowerOperation hook to implement custom lowering.
91   };
92
93   /// This enum indicates whether a types are legal for a target, and if not,
94   /// what action should be used to make them valid.
95   enum LegalizeTypeAction {
96     TypeLegal,           // The target natively supports this type.
97     TypePromoteInteger,  // Replace this integer with a larger one.
98     TypeExpandInteger,   // Split this integer into two of half the size.
99     TypeSoftenFloat,     // Convert this float to a same size integer type.
100     TypeExpandFloat,     // Split this float into two of half the size.
101     TypeScalarizeVector, // Replace this one-element vector with its element.
102     TypeSplitVector,     // Split this vector into two of half the size.
103     TypeWidenVector      // This vector should be widened into a larger vector.
104   };
105
106   /// LegalizeKind holds the legalization kind that needs to happen to EVT
107   /// in order to type-legalize it.
108   typedef std::pair<LegalizeTypeAction, EVT> LegalizeKind;
109
110   /// Enum that describes how the target represents true/false values.
111   enum BooleanContent {
112     UndefinedBooleanContent,    // Only bit 0 counts, the rest can hold garbage.
113     ZeroOrOneBooleanContent,        // All bits zero except for bit 0.
114     ZeroOrNegativeOneBooleanContent // All bits equal to bit 0.
115   };
116
117   /// Enum that describes what type of support for selects the target has.
118   enum SelectSupportKind {
119     ScalarValSelect,      // The target supports scalar selects (ex: cmov).
120     ScalarCondVectorVal,  // The target supports selects with a scalar condition
121                           // and vector values (ex: cmov).
122     VectorMaskSelect      // The target supports vector selects with a vector
123                           // mask (ex: x86 blends).
124   };
125
126   /// Enum that specifies what a AtomicRMWInst is expanded to, if at all. Exists
127   /// because different targets have different levels of support for these
128   /// atomic RMW instructions, and also have different options w.r.t. what they should
129   /// expand to.
130   enum class AtomicRMWExpansionKind {
131     None,      // Don't expand the instruction.
132     LLSC,      // Expand the instruction into loadlinked/storeconditional; used
133                // by ARM/AArch64. Implies `hasLoadLinkedStoreConditional`
134                // returns true.
135     CmpXChg,   // Expand the instruction into cmpxchg; used by at least X86.
136   };
137
138   static ISD::NodeType getExtendForContent(BooleanContent Content) {
139     switch (Content) {
140     case UndefinedBooleanContent:
141       // Extend by adding rubbish bits.
142       return ISD::ANY_EXTEND;
143     case ZeroOrOneBooleanContent:
144       // Extend by adding zero bits.
145       return ISD::ZERO_EXTEND;
146     case ZeroOrNegativeOneBooleanContent:
147       // Extend by copying the sign bit.
148       return ISD::SIGN_EXTEND;
149     }
150     llvm_unreachable("Invalid content kind");
151   }
152
153   /// NOTE: The TargetMachine owns TLOF.
154   explicit TargetLoweringBase(const TargetMachine &TM);
155   virtual ~TargetLoweringBase() {}
156
157 protected:
158   /// \brief Initialize all of the actions to default values.
159   void initActions();
160
161 public:
162   const TargetMachine &getTargetMachine() const { return TM; }
163   const DataLayout *getDataLayout() const { return TM.getDataLayout(); }
164
165   bool isBigEndian() const { return !IsLittleEndian; }
166   bool isLittleEndian() const { return IsLittleEndian; }
167
168   /// Return the pointer type for the given address space, defaults to
169   /// the pointer type from the data layout.
170   /// FIXME: The default needs to be removed once all the code is updated.
171   virtual MVT getPointerTy(uint32_t /*AS*/ = 0) const;
172   unsigned getPointerSizeInBits(uint32_t AS = 0) const;
173   unsigned getPointerTypeSizeInBits(Type *Ty) const;
174   virtual MVT getScalarShiftAmountTy(EVT LHSTy) const;
175
176   EVT getShiftAmountTy(EVT LHSTy) const;
177
178   /// Returns the type to be used for the index operand of:
179   /// ISD::INSERT_VECTOR_ELT, ISD::EXTRACT_VECTOR_ELT,
180   /// ISD::INSERT_SUBVECTOR, and ISD::EXTRACT_SUBVECTOR
181   virtual MVT getVectorIdxTy() const {
182     return getPointerTy();
183   }
184
185   /// Return true if the select operation is expensive for this target.
186   bool isSelectExpensive() const { return SelectIsExpensive; }
187
188   virtual bool isSelectSupported(SelectSupportKind /*kind*/) const {
189     return true;
190   }
191
192   /// Return true if multiple condition registers are available.
193   bool hasMultipleConditionRegisters() const {
194     return HasMultipleConditionRegisters;
195   }
196
197   /// Return true if the target has BitExtract instructions.
198   bool hasExtractBitsInsn() const { return HasExtractBitsInsn; }
199
200   /// Return the preferred vector type legalization action.
201   virtual TargetLoweringBase::LegalizeTypeAction
202   getPreferredVectorAction(EVT VT) const {
203     // The default action for one element vectors is to scalarize
204     if (VT.getVectorNumElements() == 1)
205       return TypeScalarizeVector;
206     // The default action for other vectors is to promote
207     return TypePromoteInteger;
208   }
209
210   // There are two general methods for expanding a BUILD_VECTOR node:
211   //  1. Use SCALAR_TO_VECTOR on the defined scalar values and then shuffle
212   //     them together.
213   //  2. Build the vector on the stack and then load it.
214   // If this function returns true, then method (1) will be used, subject to
215   // the constraint that all of the necessary shuffles are legal (as determined
216   // by isShuffleMaskLegal). If this function returns false, then method (2) is
217   // always used. The vector type, and the number of defined values, are
218   // provided.
219   virtual bool
220   shouldExpandBuildVectorWithShuffles(EVT /* VT */,
221                                       unsigned DefinedValues) const {
222     return DefinedValues < 3;
223   }
224
225   /// Return true if integer divide is usually cheaper than a sequence of
226   /// several shifts, adds, and multiplies for this target.
227   bool isIntDivCheap() const { return IntDivIsCheap; }
228
229   /// Return true if sqrt(x) is as cheap or cheaper than 1 / rsqrt(x)
230   bool isFsqrtCheap() const {
231     return FsqrtIsCheap;
232   }
233
234   /// Returns true if target has indicated at least one type should be bypassed.
235   bool isSlowDivBypassed() const { return !BypassSlowDivWidths.empty(); }
236
237   /// Returns map of slow types for division or remainder with corresponding
238   /// fast types
239   const DenseMap<unsigned int, unsigned int> &getBypassSlowDivWidths() const {
240     return BypassSlowDivWidths;
241   }
242
243   /// Return true if pow2 sdiv is cheaper than a chain of sra/srl/add/sra.
244   bool isPow2SDivCheap() const { return Pow2SDivIsCheap; }
245
246   /// Return true if Flow Control is an expensive operation that should be
247   /// avoided.
248   bool isJumpExpensive() const { return JumpIsExpensive; }
249
250   /// Return true if selects are only cheaper than branches if the branch is
251   /// unlikely to be predicted right.
252   bool isPredictableSelectExpensive() const {
253     return PredictableSelectIsExpensive;
254   }
255
256   /// isLoadBitCastBeneficial() - Return true if the following transform
257   /// is beneficial.
258   /// fold (conv (load x)) -> (load (conv*)x)
259   /// On architectures that don't natively support some vector loads efficiently,
260   /// casting the load to a smaller vector of larger types and loading
261   /// is more efficient, however, this can be undone by optimizations in
262   /// dag combiner.
263   virtual bool isLoadBitCastBeneficial(EVT /* Load */, EVT /* Bitcast */) const {
264     return true;
265   }
266
267   /// \brief Return true if it is cheap to speculate a call to intrinsic cttz.
268   virtual bool isCheapToSpeculateCttz() const {
269     return false;
270   }
271   
272   /// \brief Return true if it is cheap to speculate a call to intrinsic ctlz.
273   virtual bool isCheapToSpeculateCtlz() const {
274     return false;
275   }
276
277   /// \brief Return if the target supports combining a
278   /// chain like:
279   /// \code
280   ///   %andResult = and %val1, #imm-with-one-bit-set;
281   ///   %icmpResult = icmp %andResult, 0
282   ///   br i1 %icmpResult, label %dest1, label %dest2
283   /// \endcode
284   /// into a single machine instruction of a form like:
285   /// \code
286   ///   brOnBitSet %register, #bitNumber, dest
287   /// \endcode
288   bool isMaskAndBranchFoldingLegal() const {
289     return MaskAndBranchFoldingIsLegal;
290   }
291
292   /// \brief Return true if the target wants to use the optimization that
293   /// turns ext(promotableInst1(...(promotableInstN(load)))) into
294   /// promotedInst1(...(promotedInstN(ext(load)))).
295   bool enableExtLdPromotion() const { return EnableExtLdPromotion; }
296
297   /// Return true if the target can combine store(extractelement VectorTy,
298   /// Idx).
299   /// \p Cost[out] gives the cost of that transformation when this is true.
300   virtual bool canCombineStoreAndExtract(Type *VectorTy, Value *Idx,
301                                          unsigned &Cost) const {
302     return false;
303   }
304
305   /// Return true if target supports floating point exceptions.
306   bool hasFloatingPointExceptions() const {
307     return HasFloatingPointExceptions;
308   }
309
310   /// Return true if target always beneficiates from combining into FMA for a
311   /// given value type. This must typically return false on targets where FMA
312   /// takes more cycles to execute than FADD.
313   virtual bool enableAggressiveFMAFusion(EVT VT) const {
314     return false;
315   }
316
317   /// Return the ValueType of the result of SETCC operations.
318   virtual EVT getSetCCResultType(LLVMContext &Context, EVT VT) const;
319
320   /// Return the ValueType for comparison libcalls. Comparions libcalls include
321   /// floating point comparion calls, and Ordered/Unordered check calls on
322   /// floating point numbers.
323   virtual
324   MVT::SimpleValueType getCmpLibcallReturnType() const;
325
326   /// For targets without i1 registers, this gives the nature of the high-bits
327   /// of boolean values held in types wider than i1.
328   ///
329   /// "Boolean values" are special true/false values produced by nodes like
330   /// SETCC and consumed (as the condition) by nodes like SELECT and BRCOND.
331   /// Not to be confused with general values promoted from i1.  Some cpus
332   /// distinguish between vectors of boolean and scalars; the isVec parameter
333   /// selects between the two kinds.  For example on X86 a scalar boolean should
334   /// be zero extended from i1, while the elements of a vector of booleans
335   /// should be sign extended from i1.
336   ///
337   /// Some cpus also treat floating point types the same way as they treat
338   /// vectors instead of the way they treat scalars.
339   BooleanContent getBooleanContents(bool isVec, bool isFloat) const {
340     if (isVec)
341       return BooleanVectorContents;
342     return isFloat ? BooleanFloatContents : BooleanContents;
343   }
344
345   BooleanContent getBooleanContents(EVT Type) const {
346     return getBooleanContents(Type.isVector(), Type.isFloatingPoint());
347   }
348
349   /// Return target scheduling preference.
350   Sched::Preference getSchedulingPreference() const {
351     return SchedPreferenceInfo;
352   }
353
354   /// Some scheduler, e.g. hybrid, can switch to different scheduling heuristics
355   /// for different nodes. This function returns the preference (or none) for
356   /// the given node.
357   virtual Sched::Preference getSchedulingPreference(SDNode *) const {
358     return Sched::None;
359   }
360
361   /// Return the register class that should be used for the specified value
362   /// type.
363   virtual const TargetRegisterClass *getRegClassFor(MVT VT) const {
364     const TargetRegisterClass *RC = RegClassForVT[VT.SimpleTy];
365     assert(RC && "This value type is not natively supported!");
366     return RC;
367   }
368
369   /// Return the 'representative' register class for the specified value
370   /// type.
371   ///
372   /// The 'representative' register class is the largest legal super-reg
373   /// register class for the register class of the value type.  For example, on
374   /// i386 the rep register class for i8, i16, and i32 are GR32; while the rep
375   /// register class is GR64 on x86_64.
376   virtual const TargetRegisterClass *getRepRegClassFor(MVT VT) const {
377     const TargetRegisterClass *RC = RepRegClassForVT[VT.SimpleTy];
378     return RC;
379   }
380
381   /// Return the cost of the 'representative' register class for the specified
382   /// value type.
383   virtual uint8_t getRepRegClassCostFor(MVT VT) const {
384     return RepRegClassCostForVT[VT.SimpleTy];
385   }
386
387   /// Return true if the target has native support for the specified value type.
388   /// This means that it has a register that directly holds it without
389   /// promotions or expansions.
390   bool isTypeLegal(EVT VT) const {
391     assert(!VT.isSimple() ||
392            (unsigned)VT.getSimpleVT().SimpleTy < array_lengthof(RegClassForVT));
393     return VT.isSimple() && RegClassForVT[VT.getSimpleVT().SimpleTy] != nullptr;
394   }
395
396   class ValueTypeActionImpl {
397     /// ValueTypeActions - For each value type, keep a LegalizeTypeAction enum
398     /// that indicates how instruction selection should deal with the type.
399     uint8_t ValueTypeActions[MVT::LAST_VALUETYPE];
400
401   public:
402     ValueTypeActionImpl() {
403       std::fill(std::begin(ValueTypeActions), std::end(ValueTypeActions), 0);
404     }
405
406     LegalizeTypeAction getTypeAction(MVT VT) const {
407       return (LegalizeTypeAction)ValueTypeActions[VT.SimpleTy];
408     }
409
410     void setTypeAction(MVT VT, LegalizeTypeAction Action) {
411       unsigned I = VT.SimpleTy;
412       ValueTypeActions[I] = Action;
413     }
414   };
415
416   const ValueTypeActionImpl &getValueTypeActions() const {
417     return ValueTypeActions;
418   }
419
420   /// Return how we should legalize values of this type, either it is already
421   /// legal (return 'Legal') or we need to promote it to a larger type (return
422   /// 'Promote'), or we need to expand it into multiple registers of smaller
423   /// integer type (return 'Expand').  'Custom' is not an option.
424   LegalizeTypeAction getTypeAction(LLVMContext &Context, EVT VT) const {
425     return getTypeConversion(Context, VT).first;
426   }
427   LegalizeTypeAction getTypeAction(MVT VT) const {
428     return ValueTypeActions.getTypeAction(VT);
429   }
430
431   /// For types supported by the target, this is an identity function.  For
432   /// types that must be promoted to larger types, this returns the larger type
433   /// to promote to.  For integer types that are larger than the largest integer
434   /// register, this contains one step in the expansion to get to the smaller
435   /// register. For illegal floating point types, this returns the integer type
436   /// to transform to.
437   EVT getTypeToTransformTo(LLVMContext &Context, EVT VT) const {
438     return getTypeConversion(Context, VT).second;
439   }
440
441   /// For types supported by the target, this is an identity function.  For
442   /// types that must be expanded (i.e. integer types that are larger than the
443   /// largest integer register or illegal floating point types), this returns
444   /// the largest legal type it will be expanded to.
445   EVT getTypeToExpandTo(LLVMContext &Context, EVT VT) const {
446     assert(!VT.isVector());
447     while (true) {
448       switch (getTypeAction(Context, VT)) {
449       case TypeLegal:
450         return VT;
451       case TypeExpandInteger:
452         VT = getTypeToTransformTo(Context, VT);
453         break;
454       default:
455         llvm_unreachable("Type is not legal nor is it to be expanded!");
456       }
457     }
458   }
459
460   /// Vector types are broken down into some number of legal first class types.
461   /// For example, EVT::v8f32 maps to 2 EVT::v4f32 with Altivec or SSE1, or 8
462   /// promoted EVT::f64 values with the X86 FP stack.  Similarly, EVT::v2i64
463   /// turns into 4 EVT::i32 values with both PPC and X86.
464   ///
465   /// This method returns the number of registers needed, and the VT for each
466   /// register.  It also returns the VT and quantity of the intermediate values
467   /// before they are promoted/expanded.
468   unsigned getVectorTypeBreakdown(LLVMContext &Context, EVT VT,
469                                   EVT &IntermediateVT,
470                                   unsigned &NumIntermediates,
471                                   MVT &RegisterVT) const;
472
473   struct IntrinsicInfo {
474     unsigned     opc;         // target opcode
475     EVT          memVT;       // memory VT
476     const Value* ptrVal;      // value representing memory location
477     int          offset;      // offset off of ptrVal
478     unsigned     size;        // the size of the memory location
479                               // (taken from memVT if zero)
480     unsigned     align;       // alignment
481     bool         vol;         // is volatile?
482     bool         readMem;     // reads memory?
483     bool         writeMem;    // writes memory?
484
485     IntrinsicInfo() : opc(0), ptrVal(nullptr), offset(0), size(0), align(1),
486                       vol(false), readMem(false), writeMem(false) {}
487   };
488
489   /// Given an intrinsic, checks if on the target the intrinsic will need to map
490   /// to a MemIntrinsicNode (touches memory). If this is the case, it returns
491   /// true and store the intrinsic information into the IntrinsicInfo that was
492   /// passed to the function.
493   virtual bool getTgtMemIntrinsic(IntrinsicInfo &, const CallInst &,
494                                   unsigned /*Intrinsic*/) const {
495     return false;
496   }
497
498   /// Returns true if the target can instruction select the specified FP
499   /// immediate natively. If false, the legalizer will materialize the FP
500   /// immediate as a load from a constant pool.
501   virtual bool isFPImmLegal(const APFloat &/*Imm*/, EVT /*VT*/) const {
502     return false;
503   }
504
505   /// Targets can use this to indicate that they only support *some*
506   /// VECTOR_SHUFFLE operations, those with specific masks.  By default, if a
507   /// target supports the VECTOR_SHUFFLE node, all mask values are assumed to be
508   /// legal.
509   virtual bool isShuffleMaskLegal(const SmallVectorImpl<int> &/*Mask*/,
510                                   EVT /*VT*/) const {
511     return true;
512   }
513
514   /// Returns true if the operation can trap for the value type.
515   ///
516   /// VT must be a legal type. By default, we optimistically assume most
517   /// operations don't trap except for divide and remainder.
518   virtual bool canOpTrap(unsigned Op, EVT VT) const;
519
520   /// Similar to isShuffleMaskLegal. This is used by Targets can use this to
521   /// indicate if there is a suitable VECTOR_SHUFFLE that can be used to replace
522   /// a VAND with a constant pool entry.
523   virtual bool isVectorClearMaskLegal(const SmallVectorImpl<int> &/*Mask*/,
524                                       EVT /*VT*/) const {
525     return false;
526   }
527
528   /// Return how this operation should be treated: either it is legal, needs to
529   /// be promoted to a larger size, needs to be expanded to some other code
530   /// sequence, or the target has a custom expander for it.
531   LegalizeAction getOperationAction(unsigned Op, EVT VT) const {
532     if (VT.isExtended()) return Expand;
533     // If a target-specific SDNode requires legalization, require the target
534     // to provide custom legalization for it.
535     if (Op > array_lengthof(OpActions[0])) return Custom;
536     unsigned I = (unsigned) VT.getSimpleVT().SimpleTy;
537     return (LegalizeAction)OpActions[I][Op];
538   }
539
540   /// Return true if the specified operation is legal on this target or can be
541   /// made legal with custom lowering. This is used to help guide high-level
542   /// lowering decisions.
543   bool isOperationLegalOrCustom(unsigned Op, EVT VT) const {
544     return (VT == MVT::Other || isTypeLegal(VT)) &&
545       (getOperationAction(Op, VT) == Legal ||
546        getOperationAction(Op, VT) == Custom);
547   }
548
549   /// Return true if the specified operation is legal on this target or can be
550   /// made legal using promotion. This is used to help guide high-level lowering
551   /// decisions.
552   bool isOperationLegalOrPromote(unsigned Op, EVT VT) const {
553     return (VT == MVT::Other || isTypeLegal(VT)) &&
554       (getOperationAction(Op, VT) == Legal ||
555        getOperationAction(Op, VT) == Promote);
556   }
557
558   /// Return true if the specified operation is illegal on this target or
559   /// unlikely to be made legal with custom lowering. This is used to help guide
560   /// high-level lowering decisions.
561   bool isOperationExpand(unsigned Op, EVT VT) const {
562     return (!isTypeLegal(VT) || getOperationAction(Op, VT) == Expand);
563   }
564
565   /// Return true if the specified operation is legal on this target.
566   bool isOperationLegal(unsigned Op, EVT VT) const {
567     return (VT == MVT::Other || isTypeLegal(VT)) &&
568            getOperationAction(Op, VT) == Legal;
569   }
570
571   /// Return how this load with extension should be treated: either it is legal,
572   /// needs to be promoted to a larger size, needs to be expanded to some other
573   /// code sequence, or the target has a custom expander for it.
574   LegalizeAction getLoadExtAction(unsigned ExtType, EVT ValVT, EVT MemVT) const {
575     if (ValVT.isExtended() || MemVT.isExtended()) return Expand;
576     unsigned ValI = (unsigned) ValVT.getSimpleVT().SimpleTy;
577     unsigned MemI = (unsigned) MemVT.getSimpleVT().SimpleTy;
578     assert(ExtType < ISD::LAST_LOADEXT_TYPE && ValI < MVT::LAST_VALUETYPE &&
579            MemI < MVT::LAST_VALUETYPE && "Table isn't big enough!");
580     return (LegalizeAction)LoadExtActions[ValI][MemI][ExtType];
581   }
582
583   /// Return true if the specified load with extension is legal on this target.
584   bool isLoadExtLegal(unsigned ExtType, EVT ValVT, EVT MemVT) const {
585     return ValVT.isSimple() && MemVT.isSimple() &&
586       getLoadExtAction(ExtType, ValVT, MemVT) == Legal;
587   }
588
589   /// Return true if the specified load with extension is legal or custom
590   /// on this target.
591   bool isLoadExtLegalOrCustom(unsigned ExtType, EVT ValVT, EVT MemVT) const {
592     return ValVT.isSimple() && MemVT.isSimple() &&
593       (getLoadExtAction(ExtType, ValVT, MemVT) == Legal ||
594        getLoadExtAction(ExtType, ValVT, MemVT) == Custom);
595   }
596
597   /// Return how this store with truncation should be treated: either it is
598   /// legal, needs to be promoted to a larger size, needs to be expanded to some
599   /// other code sequence, or the target has a custom expander for it.
600   LegalizeAction getTruncStoreAction(EVT ValVT, EVT MemVT) const {
601     if (ValVT.isExtended() || MemVT.isExtended()) return Expand;
602     unsigned ValI = (unsigned) ValVT.getSimpleVT().SimpleTy;
603     unsigned MemI = (unsigned) MemVT.getSimpleVT().SimpleTy;
604     assert(ValI < MVT::LAST_VALUETYPE && MemI < MVT::LAST_VALUETYPE &&
605            "Table isn't big enough!");
606     return (LegalizeAction)TruncStoreActions[ValI][MemI];
607   }
608
609   /// Return true if the specified store with truncation is legal on this
610   /// target.
611   bool isTruncStoreLegal(EVT ValVT, EVT MemVT) const {
612     return isTypeLegal(ValVT) && MemVT.isSimple() &&
613       getTruncStoreAction(ValVT.getSimpleVT(), MemVT.getSimpleVT()) == Legal;
614   }
615
616   /// Return how the indexed load should be treated: either it is legal, needs
617   /// to be promoted to a larger size, needs to be expanded to some other code
618   /// sequence, or the target has a custom expander for it.
619   LegalizeAction
620   getIndexedLoadAction(unsigned IdxMode, MVT VT) const {
621     assert(IdxMode < ISD::LAST_INDEXED_MODE && VT.isValid() &&
622            "Table isn't big enough!");
623     unsigned Ty = (unsigned)VT.SimpleTy;
624     return (LegalizeAction)((IndexedModeActions[Ty][IdxMode] & 0xf0) >> 4);
625   }
626
627   /// Return true if the specified indexed load is legal on this target.
628   bool isIndexedLoadLegal(unsigned IdxMode, EVT VT) const {
629     return VT.isSimple() &&
630       (getIndexedLoadAction(IdxMode, VT.getSimpleVT()) == Legal ||
631        getIndexedLoadAction(IdxMode, VT.getSimpleVT()) == Custom);
632   }
633
634   /// Return how the indexed store should be treated: either it is legal, needs
635   /// to be promoted to a larger size, needs to be expanded to some other code
636   /// sequence, or the target has a custom expander for it.
637   LegalizeAction
638   getIndexedStoreAction(unsigned IdxMode, MVT VT) const {
639     assert(IdxMode < ISD::LAST_INDEXED_MODE && VT.isValid() &&
640            "Table isn't big enough!");
641     unsigned Ty = (unsigned)VT.SimpleTy;
642     return (LegalizeAction)(IndexedModeActions[Ty][IdxMode] & 0x0f);
643   }
644
645   /// Return true if the specified indexed load is legal on this target.
646   bool isIndexedStoreLegal(unsigned IdxMode, EVT VT) const {
647     return VT.isSimple() &&
648       (getIndexedStoreAction(IdxMode, VT.getSimpleVT()) == Legal ||
649        getIndexedStoreAction(IdxMode, VT.getSimpleVT()) == Custom);
650   }
651
652   /// Return how the condition code should be treated: either it is legal, needs
653   /// to be expanded to some other code sequence, or the target has a custom
654   /// expander for it.
655   LegalizeAction
656   getCondCodeAction(ISD::CondCode CC, MVT VT) const {
657     assert((unsigned)CC < array_lengthof(CondCodeActions) &&
658            ((unsigned)VT.SimpleTy >> 4) < array_lengthof(CondCodeActions[0]) &&
659            "Table isn't big enough!");
660     // See setCondCodeAction for how this is encoded.
661     uint32_t Shift = 2 * (VT.SimpleTy & 0xF);
662     uint32_t Value = CondCodeActions[CC][VT.SimpleTy >> 4];
663     LegalizeAction Action = (LegalizeAction) ((Value >> Shift) & 0x3);
664     assert(Action != Promote && "Can't promote condition code!");
665     return Action;
666   }
667
668   /// Return true if the specified condition code is legal on this target.
669   bool isCondCodeLegal(ISD::CondCode CC, MVT VT) const {
670     return
671       getCondCodeAction(CC, VT) == Legal ||
672       getCondCodeAction(CC, VT) == Custom;
673   }
674
675
676   /// If the action for this operation is to promote, this method returns the
677   /// ValueType to promote to.
678   MVT getTypeToPromoteTo(unsigned Op, MVT VT) const {
679     assert(getOperationAction(Op, VT) == Promote &&
680            "This operation isn't promoted!");
681
682     // See if this has an explicit type specified.
683     std::map<std::pair<unsigned, MVT::SimpleValueType>,
684              MVT::SimpleValueType>::const_iterator PTTI =
685       PromoteToType.find(std::make_pair(Op, VT.SimpleTy));
686     if (PTTI != PromoteToType.end()) return PTTI->second;
687
688     assert((VT.isInteger() || VT.isFloatingPoint()) &&
689            "Cannot autopromote this type, add it with AddPromotedToType.");
690
691     MVT NVT = VT;
692     do {
693       NVT = (MVT::SimpleValueType)(NVT.SimpleTy+1);
694       assert(NVT.isInteger() == VT.isInteger() && NVT != MVT::isVoid &&
695              "Didn't find type to promote to!");
696     } while (!isTypeLegal(NVT) ||
697               getOperationAction(Op, NVT) == Promote);
698     return NVT;
699   }
700
701   /// Return the EVT corresponding to this LLVM type.  This is fixed by the LLVM
702   /// operations except for the pointer size.  If AllowUnknown is true, this
703   /// will return MVT::Other for types with no EVT counterpart (e.g. structs),
704   /// otherwise it will assert.
705   EVT getValueType(Type *Ty, bool AllowUnknown = false) const {
706     // Lower scalar pointers to native pointer types.
707     if (PointerType *PTy = dyn_cast<PointerType>(Ty))
708       return getPointerTy(PTy->getAddressSpace());
709
710     if (Ty->isVectorTy()) {
711       VectorType *VTy = cast<VectorType>(Ty);
712       Type *Elm = VTy->getElementType();
713       // Lower vectors of pointers to native pointer types.
714       if (PointerType *PT = dyn_cast<PointerType>(Elm)) {
715         EVT PointerTy(getPointerTy(PT->getAddressSpace()));
716         Elm = PointerTy.getTypeForEVT(Ty->getContext());
717       }
718
719       return EVT::getVectorVT(Ty->getContext(), EVT::getEVT(Elm, false),
720                        VTy->getNumElements());
721     }
722     return EVT::getEVT(Ty, AllowUnknown);
723   }
724
725   /// Return the MVT corresponding to this LLVM type. See getValueType.
726   MVT getSimpleValueType(Type *Ty, bool AllowUnknown = false) const {
727     return getValueType(Ty, AllowUnknown).getSimpleVT();
728   }
729
730   /// Return the desired alignment for ByVal or InAlloca aggregate function
731   /// arguments in the caller parameter area.  This is the actual alignment, not
732   /// its logarithm.
733   virtual unsigned getByValTypeAlignment(Type *Ty) const;
734
735   /// Return the type of registers that this ValueType will eventually require.
736   MVT getRegisterType(MVT VT) const {
737     assert((unsigned)VT.SimpleTy < array_lengthof(RegisterTypeForVT));
738     return RegisterTypeForVT[VT.SimpleTy];
739   }
740
741   /// Return the type of registers that this ValueType will eventually require.
742   MVT getRegisterType(LLVMContext &Context, EVT VT) const {
743     if (VT.isSimple()) {
744       assert((unsigned)VT.getSimpleVT().SimpleTy <
745                 array_lengthof(RegisterTypeForVT));
746       return RegisterTypeForVT[VT.getSimpleVT().SimpleTy];
747     }
748     if (VT.isVector()) {
749       EVT VT1;
750       MVT RegisterVT;
751       unsigned NumIntermediates;
752       (void)getVectorTypeBreakdown(Context, VT, VT1,
753                                    NumIntermediates, RegisterVT);
754       return RegisterVT;
755     }
756     if (VT.isInteger()) {
757       return getRegisterType(Context, getTypeToTransformTo(Context, VT));
758     }
759     llvm_unreachable("Unsupported extended type!");
760   }
761
762   /// Return the number of registers that this ValueType will eventually
763   /// require.
764   ///
765   /// This is one for any types promoted to live in larger registers, but may be
766   /// more than one for types (like i64) that are split into pieces.  For types
767   /// like i140, which are first promoted then expanded, it is the number of
768   /// registers needed to hold all the bits of the original type.  For an i140
769   /// on a 32 bit machine this means 5 registers.
770   unsigned getNumRegisters(LLVMContext &Context, EVT VT) const {
771     if (VT.isSimple()) {
772       assert((unsigned)VT.getSimpleVT().SimpleTy <
773                 array_lengthof(NumRegistersForVT));
774       return NumRegistersForVT[VT.getSimpleVT().SimpleTy];
775     }
776     if (VT.isVector()) {
777       EVT VT1;
778       MVT VT2;
779       unsigned NumIntermediates;
780       return getVectorTypeBreakdown(Context, VT, VT1, NumIntermediates, VT2);
781     }
782     if (VT.isInteger()) {
783       unsigned BitWidth = VT.getSizeInBits();
784       unsigned RegWidth = getRegisterType(Context, VT).getSizeInBits();
785       return (BitWidth + RegWidth - 1) / RegWidth;
786     }
787     llvm_unreachable("Unsupported extended type!");
788   }
789
790   /// If true, then instruction selection should seek to shrink the FP constant
791   /// of the specified type to a smaller type in order to save space and / or
792   /// reduce runtime.
793   virtual bool ShouldShrinkFPConstant(EVT) const { return true; }
794
795   // Return true if it is profitable to reduce the given load node to a smaller
796   // type.
797   //
798   // e.g. (i16 (trunc (i32 (load x))) -> i16 load x should be performed
799   virtual bool shouldReduceLoadWidth(SDNode *Load,
800                                      ISD::LoadExtType ExtTy,
801                                      EVT NewVT) const {
802     return true;
803   }
804
805   /// When splitting a value of the specified type into parts, does the Lo
806   /// or Hi part come first?  This usually follows the endianness, except
807   /// for ppcf128, where the Hi part always comes first.
808   bool hasBigEndianPartOrdering(EVT VT) const {
809     return isBigEndian() || VT == MVT::ppcf128;
810   }
811
812   /// If true, the target has custom DAG combine transformations that it can
813   /// perform for the specified node.
814   bool hasTargetDAGCombine(ISD::NodeType NT) const {
815     assert(unsigned(NT >> 3) < array_lengthof(TargetDAGCombineArray));
816     return TargetDAGCombineArray[NT >> 3] & (1 << (NT&7));
817   }
818
819   /// \brief Get maximum # of store operations permitted for llvm.memset
820   ///
821   /// This function returns the maximum number of store operations permitted
822   /// to replace a call to llvm.memset. The value is set by the target at the
823   /// performance threshold for such a replacement. If OptSize is true,
824   /// return the limit for functions that have OptSize attribute.
825   unsigned getMaxStoresPerMemset(bool OptSize) const {
826     return OptSize ? MaxStoresPerMemsetOptSize : MaxStoresPerMemset;
827   }
828
829   /// \brief Get maximum # of store operations permitted for llvm.memcpy
830   ///
831   /// This function returns the maximum number of store operations permitted
832   /// to replace a call to llvm.memcpy. The value is set by the target at the
833   /// performance threshold for such a replacement. If OptSize is true,
834   /// return the limit for functions that have OptSize attribute.
835   unsigned getMaxStoresPerMemcpy(bool OptSize) const {
836     return OptSize ? MaxStoresPerMemcpyOptSize : MaxStoresPerMemcpy;
837   }
838
839   /// \brief Get maximum # of store operations permitted for llvm.memmove
840   ///
841   /// This function returns the maximum number of store operations permitted
842   /// to replace a call to llvm.memmove. The value is set by the target at the
843   /// performance threshold for such a replacement. If OptSize is true,
844   /// return the limit for functions that have OptSize attribute.
845   unsigned getMaxStoresPerMemmove(bool OptSize) const {
846     return OptSize ? MaxStoresPerMemmoveOptSize : MaxStoresPerMemmove;
847   }
848
849   /// \brief Determine if the target supports unaligned memory accesses.
850   ///
851   /// This function returns true if the target allows unaligned memory accesses
852   /// of the specified type in the given address space. If true, it also returns
853   /// whether the unaligned memory access is "fast" in the last argument by
854   /// reference. This is used, for example, in situations where an array
855   /// copy/move/set is converted to a sequence of store operations. Its use
856   /// helps to ensure that such replacements don't generate code that causes an
857   /// alignment error (trap) on the target machine.
858   virtual bool allowsMisalignedMemoryAccesses(EVT,
859                                               unsigned AddrSpace = 0,
860                                               unsigned Align = 1,
861                                               bool * /*Fast*/ = nullptr) const {
862     return false;
863   }
864
865   /// Returns the target specific optimal type for load and store operations as
866   /// a result of memset, memcpy, and memmove lowering.
867   ///
868   /// If DstAlign is zero that means it's safe to destination alignment can
869   /// satisfy any constraint. Similarly if SrcAlign is zero it means there isn't
870   /// a need to check it against alignment requirement, probably because the
871   /// source does not need to be loaded. If 'IsMemset' is true, that means it's
872   /// expanding a memset. If 'ZeroMemset' is true, that means it's a memset of
873   /// zero. 'MemcpyStrSrc' indicates whether the memcpy source is constant so it
874   /// does not need to be loaded.  It returns EVT::Other if the type should be
875   /// determined using generic target-independent logic.
876   virtual EVT getOptimalMemOpType(uint64_t /*Size*/,
877                                   unsigned /*DstAlign*/, unsigned /*SrcAlign*/,
878                                   bool /*IsMemset*/,
879                                   bool /*ZeroMemset*/,
880                                   bool /*MemcpyStrSrc*/,
881                                   MachineFunction &/*MF*/) const {
882     return MVT::Other;
883   }
884
885   /// Returns true if it's safe to use load / store of the specified type to
886   /// expand memcpy / memset inline.
887   ///
888   /// This is mostly true for all types except for some special cases. For
889   /// example, on X86 targets without SSE2 f64 load / store are done with fldl /
890   /// fstpl which also does type conversion. Note the specified type doesn't
891   /// have to be legal as the hook is used before type legalization.
892   virtual bool isSafeMemOpType(MVT /*VT*/) const { return true; }
893
894   /// Determine if we should use _setjmp or setjmp to implement llvm.setjmp.
895   bool usesUnderscoreSetJmp() const {
896     return UseUnderscoreSetJmp;
897   }
898
899   /// Determine if we should use _longjmp or longjmp to implement llvm.longjmp.
900   bool usesUnderscoreLongJmp() const {
901     return UseUnderscoreLongJmp;
902   }
903
904   /// Return integer threshold on number of blocks to use jump tables rather
905   /// than if sequence.
906   int getMinimumJumpTableEntries() const {
907     return MinimumJumpTableEntries;
908   }
909
910   /// If a physical register, this specifies the register that
911   /// llvm.savestack/llvm.restorestack should save and restore.
912   unsigned getStackPointerRegisterToSaveRestore() const {
913     return StackPointerRegisterToSaveRestore;
914   }
915
916   /// If a physical register, this returns the register that receives the
917   /// exception address on entry to a landing pad.
918   unsigned getExceptionPointerRegister() const {
919     return ExceptionPointerRegister;
920   }
921
922   /// If a physical register, this returns the register that receives the
923   /// exception typeid on entry to a landing pad.
924   unsigned getExceptionSelectorRegister() const {
925     return ExceptionSelectorRegister;
926   }
927
928   /// Returns the target's jmp_buf size in bytes (if never set, the default is
929   /// 200)
930   unsigned getJumpBufSize() const {
931     return JumpBufSize;
932   }
933
934   /// Returns the target's jmp_buf alignment in bytes (if never set, the default
935   /// is 0)
936   unsigned getJumpBufAlignment() const {
937     return JumpBufAlignment;
938   }
939
940   /// Return the minimum stack alignment of an argument.
941   unsigned getMinStackArgumentAlignment() const {
942     return MinStackArgumentAlignment;
943   }
944
945   /// Return the minimum function alignment.
946   unsigned getMinFunctionAlignment() const {
947     return MinFunctionAlignment;
948   }
949
950   /// Return the preferred function alignment.
951   unsigned getPrefFunctionAlignment() const {
952     return PrefFunctionAlignment;
953   }
954
955   /// Return the preferred loop alignment.
956   virtual unsigned getPrefLoopAlignment(MachineLoop *ML = nullptr) const {
957     return PrefLoopAlignment;
958   }
959
960   /// Return whether the DAG builder should automatically insert fences and
961   /// reduce ordering for atomics.
962   bool getInsertFencesForAtomic() const {
963     return InsertFencesForAtomic;
964   }
965
966   /// Return true if the target stores stack protector cookies at a fixed offset
967   /// in some non-standard address space, and populates the address space and
968   /// offset as appropriate.
969   virtual bool getStackCookieLocation(unsigned &/*AddressSpace*/,
970                                       unsigned &/*Offset*/) const {
971     return false;
972   }
973
974   /// Returns true if a cast between SrcAS and DestAS is a noop.
975   virtual bool isNoopAddrSpaceCast(unsigned SrcAS, unsigned DestAS) const {
976     return false;
977   }
978
979   //===--------------------------------------------------------------------===//
980   /// \name Helpers for TargetTransformInfo implementations
981   /// @{
982
983   /// Get the ISD node that corresponds to the Instruction class opcode.
984   int InstructionOpcodeToISD(unsigned Opcode) const;
985
986   /// Estimate the cost of type-legalization and the legalized type.
987   std::pair<unsigned, MVT> getTypeLegalizationCost(Type *Ty) const;
988
989   /// @}
990
991   //===--------------------------------------------------------------------===//
992   /// \name Helpers for atomic expansion.
993   /// @{
994
995   /// True if AtomicExpandPass should use emitLoadLinked/emitStoreConditional
996   /// and expand AtomicCmpXchgInst.
997   virtual bool hasLoadLinkedStoreConditional() const { return false; }
998
999   /// Perform a load-linked operation on Addr, returning a "Value *" with the
1000   /// corresponding pointee type. This may entail some non-trivial operations to
1001   /// truncate or reconstruct types that will be illegal in the backend. See
1002   /// ARMISelLowering for an example implementation.
1003   virtual Value *emitLoadLinked(IRBuilder<> &Builder, Value *Addr,
1004                                 AtomicOrdering Ord) const {
1005     llvm_unreachable("Load linked unimplemented on this target");
1006   }
1007
1008   /// Perform a store-conditional operation to Addr. Return the status of the
1009   /// store. This should be 0 if the store succeeded, non-zero otherwise.
1010   virtual Value *emitStoreConditional(IRBuilder<> &Builder, Value *Val,
1011                                       Value *Addr, AtomicOrdering Ord) const {
1012     llvm_unreachable("Store conditional unimplemented on this target");
1013   }
1014
1015   /// Inserts in the IR a target-specific intrinsic specifying a fence.
1016   /// It is called by AtomicExpandPass before expanding an
1017   ///   AtomicRMW/AtomicCmpXchg/AtomicStore/AtomicLoad.
1018   /// RMW and CmpXchg set both IsStore and IsLoad to true.
1019   /// This function should either return a nullptr, or a pointer to an IR-level
1020   ///   Instruction*. Even complex fence sequences can be represented by a
1021   ///   single Instruction* through an intrinsic to be lowered later.
1022   /// Backends with !getInsertFencesForAtomic() should keep a no-op here.
1023   /// Backends should override this method to produce target-specific intrinsic
1024   ///   for their fences.
1025   /// FIXME: Please note that the default implementation here in terms of
1026   ///   IR-level fences exists for historical/compatibility reasons and is
1027   ///   *unsound* ! Fences cannot, in general, be used to restore sequential
1028   ///   consistency. For example, consider the following example:
1029   /// atomic<int> x = y = 0;
1030   /// int r1, r2, r3, r4;
1031   /// Thread 0:
1032   ///   x.store(1);
1033   /// Thread 1:
1034   ///   y.store(1);
1035   /// Thread 2:
1036   ///   r1 = x.load();
1037   ///   r2 = y.load();
1038   /// Thread 3:
1039   ///   r3 = y.load();
1040   ///   r4 = x.load();
1041   ///  r1 = r3 = 1 and r2 = r4 = 0 is impossible as long as the accesses are all
1042   ///  seq_cst. But if they are lowered to monotonic accesses, no amount of
1043   ///  IR-level fences can prevent it.
1044   /// @{
1045   virtual Instruction* emitLeadingFence(IRBuilder<> &Builder, AtomicOrdering Ord,
1046           bool IsStore, bool IsLoad) const {
1047     if (!getInsertFencesForAtomic())
1048       return nullptr;
1049
1050     if (isAtLeastRelease(Ord) && IsStore)
1051       return Builder.CreateFence(Ord);
1052     else
1053       return nullptr;
1054   }
1055
1056   virtual Instruction* emitTrailingFence(IRBuilder<> &Builder, AtomicOrdering Ord,
1057           bool IsStore, bool IsLoad) const {
1058     if (!getInsertFencesForAtomic())
1059       return nullptr;
1060
1061     if (isAtLeastAcquire(Ord))
1062       return Builder.CreateFence(Ord);
1063     else
1064       return nullptr;
1065   }
1066   /// @}
1067
1068   /// Returns true if the given (atomic) store should be expanded by the
1069   /// IR-level AtomicExpand pass into an "atomic xchg" which ignores its input.
1070   virtual bool shouldExpandAtomicStoreInIR(StoreInst *SI) const {
1071     return false;
1072   }
1073
1074   /// Returns true if the given (atomic) load should be expanded by the
1075   /// IR-level AtomicExpand pass into a load-linked instruction
1076   /// (through emitLoadLinked()).
1077   virtual bool shouldExpandAtomicLoadInIR(LoadInst *LI) const { return false; }
1078
1079   /// Returns how the IR-level AtomicExpand pass should expand the given
1080   /// AtomicRMW, if at all. Default is to never expand.
1081   virtual AtomicRMWExpansionKind
1082   shouldExpandAtomicRMWInIR(AtomicRMWInst *) const {
1083     return AtomicRMWExpansionKind::None;
1084   }
1085
1086   /// On some platforms, an AtomicRMW that never actually modifies the value
1087   /// (such as fetch_add of 0) can be turned into a fence followed by an
1088   /// atomic load. This may sound useless, but it makes it possible for the
1089   /// processor to keep the cacheline shared, dramatically improving
1090   /// performance. And such idempotent RMWs are useful for implementing some
1091   /// kinds of locks, see for example (justification + benchmarks):
1092   /// http://www.hpl.hp.com/techreports/2012/HPL-2012-68.pdf
1093   /// This method tries doing that transformation, returning the atomic load if
1094   /// it succeeds, and nullptr otherwise.
1095   /// If shouldExpandAtomicLoadInIR returns true on that load, it will undergo
1096   /// another round of expansion.
1097   virtual LoadInst *lowerIdempotentRMWIntoFencedLoad(AtomicRMWInst *RMWI) const {
1098     return nullptr;
1099   }
1100
1101   /// Returns true if we should normalize
1102   /// select(N0&N1, X, Y) => select(N0, select(N1, X, Y), Y) and
1103   /// select(N0|N1, X, Y) => select(N0, select(N1, X, Y, Y)) if it is likely
1104   /// that it saves us from materializing N0 and N1 in an integer register.
1105   /// Targets that are able to perform and/or on flags should return false here.
1106   virtual bool shouldNormalizeToSelectSequence(LLVMContext &Context,
1107                                                EVT VT) const {
1108     // If a target has multiple condition registers, then it likely has logical
1109     // operations on those registers.
1110     if (hasMultipleConditionRegisters())
1111       return false;
1112     // Only do the transform if the value won't be split into multiple
1113     // registers.
1114     LegalizeTypeAction Action = getTypeAction(Context, VT);
1115     return Action != TypeExpandInteger && Action != TypeExpandFloat &&
1116       Action != TypeSplitVector;
1117   }
1118
1119   //===--------------------------------------------------------------------===//
1120   // TargetLowering Configuration Methods - These methods should be invoked by
1121   // the derived class constructor to configure this object for the target.
1122   //
1123 protected:
1124   /// Specify how the target extends the result of integer and floating point
1125   /// boolean values from i1 to a wider type.  See getBooleanContents.
1126   void setBooleanContents(BooleanContent Ty) {
1127     BooleanContents = Ty;
1128     BooleanFloatContents = Ty;
1129   }
1130
1131   /// Specify how the target extends the result of integer and floating point
1132   /// boolean values from i1 to a wider type.  See getBooleanContents.
1133   void setBooleanContents(BooleanContent IntTy, BooleanContent FloatTy) {
1134     BooleanContents = IntTy;
1135     BooleanFloatContents = FloatTy;
1136   }
1137
1138   /// Specify how the target extends the result of a vector boolean value from a
1139   /// vector of i1 to a wider type.  See getBooleanContents.
1140   void setBooleanVectorContents(BooleanContent Ty) {
1141     BooleanVectorContents = Ty;
1142   }
1143
1144   /// Specify the target scheduling preference.
1145   void setSchedulingPreference(Sched::Preference Pref) {
1146     SchedPreferenceInfo = Pref;
1147   }
1148
1149   /// Indicate whether this target prefers to use _setjmp to implement
1150   /// llvm.setjmp or the version without _.  Defaults to false.
1151   void setUseUnderscoreSetJmp(bool Val) {
1152     UseUnderscoreSetJmp = Val;
1153   }
1154
1155   /// Indicate whether this target prefers to use _longjmp to implement
1156   /// llvm.longjmp or the version without _.  Defaults to false.
1157   void setUseUnderscoreLongJmp(bool Val) {
1158     UseUnderscoreLongJmp = Val;
1159   }
1160
1161   /// Indicate the number of blocks to generate jump tables rather than if
1162   /// sequence.
1163   void setMinimumJumpTableEntries(int Val) {
1164     MinimumJumpTableEntries = Val;
1165   }
1166
1167   /// If set to a physical register, this specifies the register that
1168   /// llvm.savestack/llvm.restorestack should save and restore.
1169   void setStackPointerRegisterToSaveRestore(unsigned R) {
1170     StackPointerRegisterToSaveRestore = R;
1171   }
1172
1173   /// If set to a physical register, this sets the register that receives the
1174   /// exception address on entry to a landing pad.
1175   void setExceptionPointerRegister(unsigned R) {
1176     ExceptionPointerRegister = R;
1177   }
1178
1179   /// If set to a physical register, this sets the register that receives the
1180   /// exception typeid on entry to a landing pad.
1181   void setExceptionSelectorRegister(unsigned R) {
1182     ExceptionSelectorRegister = R;
1183   }
1184
1185   /// Tells the code generator not to expand operations into sequences that use
1186   /// the select operations if possible.
1187   void setSelectIsExpensive(bool isExpensive = true) {
1188     SelectIsExpensive = isExpensive;
1189   }
1190
1191   /// Tells the code generator that the target has multiple (allocatable)
1192   /// condition registers that can be used to store the results of comparisons
1193   /// for use by selects and conditional branches. With multiple condition
1194   /// registers, the code generator will not aggressively sink comparisons into
1195   /// the blocks of their users.
1196   void setHasMultipleConditionRegisters(bool hasManyRegs = true) {
1197     HasMultipleConditionRegisters = hasManyRegs;
1198   }
1199
1200   /// Tells the code generator that the target has BitExtract instructions.
1201   /// The code generator will aggressively sink "shift"s into the blocks of
1202   /// their users if the users will generate "and" instructions which can be
1203   /// combined with "shift" to BitExtract instructions.
1204   void setHasExtractBitsInsn(bool hasExtractInsn = true) {
1205     HasExtractBitsInsn = hasExtractInsn;
1206   }
1207
1208   /// Tells the code generator not to expand sequence of operations into a
1209   /// separate sequences that increases the amount of flow control.
1210   void setJumpIsExpensive(bool isExpensive = true) {
1211     JumpIsExpensive = isExpensive;
1212   }
1213
1214   /// Tells the code generator that integer divide is expensive, and if
1215   /// possible, should be replaced by an alternate sequence of instructions not
1216   /// containing an integer divide.
1217   void setIntDivIsCheap(bool isCheap = true) { IntDivIsCheap = isCheap; }
1218
1219   /// Tells the code generator that fsqrt is cheap, and should not be replaced
1220   /// with an alternative sequence of instructions.
1221   void setFsqrtIsCheap(bool isCheap = true) { FsqrtIsCheap = isCheap; }
1222
1223   /// Tells the code generator that this target supports floating point
1224   /// exceptions and cares about preserving floating point exception behavior.
1225   void setHasFloatingPointExceptions(bool FPExceptions = true) {
1226     HasFloatingPointExceptions = FPExceptions;
1227   }
1228
1229   /// Tells the code generator which bitwidths to bypass.
1230   void addBypassSlowDiv(unsigned int SlowBitWidth, unsigned int FastBitWidth) {
1231     BypassSlowDivWidths[SlowBitWidth] = FastBitWidth;
1232   }
1233
1234   /// Tells the code generator that it shouldn't generate sra/srl/add/sra for a
1235   /// signed divide by power of two; let the target handle it.
1236   void setPow2SDivIsCheap(bool isCheap = true) { Pow2SDivIsCheap = isCheap; }
1237
1238   /// Add the specified register class as an available regclass for the
1239   /// specified value type. This indicates the selector can handle values of
1240   /// that class natively.
1241   void addRegisterClass(MVT VT, const TargetRegisterClass *RC) {
1242     assert((unsigned)VT.SimpleTy < array_lengthof(RegClassForVT));
1243     AvailableRegClasses.push_back(std::make_pair(VT, RC));
1244     RegClassForVT[VT.SimpleTy] = RC;
1245   }
1246
1247   /// Remove all register classes.
1248   void clearRegisterClasses() {
1249     memset(RegClassForVT, 0,MVT::LAST_VALUETYPE * sizeof(TargetRegisterClass*));
1250
1251     AvailableRegClasses.clear();
1252   }
1253
1254   /// \brief Remove all operation actions.
1255   void clearOperationActions() {
1256   }
1257
1258   /// Return the largest legal super-reg register class of the register class
1259   /// for the specified type and its associated "cost".
1260   virtual std::pair<const TargetRegisterClass *, uint8_t>
1261   findRepresentativeClass(const TargetRegisterInfo *TRI, MVT VT) const;
1262
1263   /// Once all of the register classes are added, this allows us to compute
1264   /// derived properties we expose.
1265   void computeRegisterProperties(const TargetRegisterInfo *TRI);
1266
1267   /// Indicate that the specified operation does not work with the specified
1268   /// type and indicate what to do about it.
1269   void setOperationAction(unsigned Op, MVT VT,
1270                           LegalizeAction Action) {
1271     assert(Op < array_lengthof(OpActions[0]) && "Table isn't big enough!");
1272     OpActions[(unsigned)VT.SimpleTy][Op] = (uint8_t)Action;
1273   }
1274
1275   /// Indicate that the specified load with extension does not work with the
1276   /// specified type and indicate what to do about it.
1277   void setLoadExtAction(unsigned ExtType, MVT ValVT, MVT MemVT,
1278                         LegalizeAction Action) {
1279     assert(ExtType < ISD::LAST_LOADEXT_TYPE && ValVT.isValid() &&
1280            MemVT.isValid() && "Table isn't big enough!");
1281     LoadExtActions[ValVT.SimpleTy][MemVT.SimpleTy][ExtType] = (uint8_t)Action;
1282   }
1283
1284   /// Indicate that the specified truncating store does not work with the
1285   /// specified type and indicate what to do about it.
1286   void setTruncStoreAction(MVT ValVT, MVT MemVT,
1287                            LegalizeAction Action) {
1288     assert(ValVT.isValid() && MemVT.isValid() && "Table isn't big enough!");
1289     TruncStoreActions[ValVT.SimpleTy][MemVT.SimpleTy] = (uint8_t)Action;
1290   }
1291
1292   /// Indicate that the specified indexed load does or does not work with the
1293   /// specified type and indicate what to do abort it.
1294   ///
1295   /// NOTE: All indexed mode loads are initialized to Expand in
1296   /// TargetLowering.cpp
1297   void setIndexedLoadAction(unsigned IdxMode, MVT VT,
1298                             LegalizeAction Action) {
1299     assert(VT.isValid() && IdxMode < ISD::LAST_INDEXED_MODE &&
1300            (unsigned)Action < 0xf && "Table isn't big enough!");
1301     // Load action are kept in the upper half.
1302     IndexedModeActions[(unsigned)VT.SimpleTy][IdxMode] &= ~0xf0;
1303     IndexedModeActions[(unsigned)VT.SimpleTy][IdxMode] |= ((uint8_t)Action) <<4;
1304   }
1305
1306   /// Indicate that the specified indexed store does or does not work with the
1307   /// specified type and indicate what to do about it.
1308   ///
1309   /// NOTE: All indexed mode stores are initialized to Expand in
1310   /// TargetLowering.cpp
1311   void setIndexedStoreAction(unsigned IdxMode, MVT VT,
1312                              LegalizeAction Action) {
1313     assert(VT.isValid() && IdxMode < ISD::LAST_INDEXED_MODE &&
1314            (unsigned)Action < 0xf && "Table isn't big enough!");
1315     // Store action are kept in the lower half.
1316     IndexedModeActions[(unsigned)VT.SimpleTy][IdxMode] &= ~0x0f;
1317     IndexedModeActions[(unsigned)VT.SimpleTy][IdxMode] |= ((uint8_t)Action);
1318   }
1319
1320   /// Indicate that the specified condition code is or isn't supported on the
1321   /// target and indicate what to do about it.
1322   void setCondCodeAction(ISD::CondCode CC, MVT VT,
1323                          LegalizeAction Action) {
1324     assert(VT.isValid() && (unsigned)CC < array_lengthof(CondCodeActions) &&
1325            "Table isn't big enough!");
1326     /// The lower 5 bits of the SimpleTy index into Nth 2bit set from the 32-bit
1327     /// value and the upper 27 bits index into the second dimension of the array
1328     /// to select what 32-bit value to use.
1329     uint32_t Shift = 2 * (VT.SimpleTy & 0xF);
1330     CondCodeActions[CC][VT.SimpleTy >> 4] &= ~((uint32_t)0x3 << Shift);
1331     CondCodeActions[CC][VT.SimpleTy >> 4] |= (uint32_t)Action << Shift;
1332   }
1333
1334   /// If Opc/OrigVT is specified as being promoted, the promotion code defaults
1335   /// to trying a larger integer/fp until it can find one that works. If that
1336   /// default is insufficient, this method can be used by the target to override
1337   /// the default.
1338   void AddPromotedToType(unsigned Opc, MVT OrigVT, MVT DestVT) {
1339     PromoteToType[std::make_pair(Opc, OrigVT.SimpleTy)] = DestVT.SimpleTy;
1340   }
1341
1342   /// Targets should invoke this method for each target independent node that
1343   /// they want to provide a custom DAG combiner for by implementing the
1344   /// PerformDAGCombine virtual method.
1345   void setTargetDAGCombine(ISD::NodeType NT) {
1346     assert(unsigned(NT >> 3) < array_lengthof(TargetDAGCombineArray));
1347     TargetDAGCombineArray[NT >> 3] |= 1 << (NT&7);
1348   }
1349
1350   /// Set the target's required jmp_buf buffer size (in bytes); default is 200
1351   void setJumpBufSize(unsigned Size) {
1352     JumpBufSize = Size;
1353   }
1354
1355   /// Set the target's required jmp_buf buffer alignment (in bytes); default is
1356   /// 0
1357   void setJumpBufAlignment(unsigned Align) {
1358     JumpBufAlignment = Align;
1359   }
1360
1361   /// Set the target's minimum function alignment (in log2(bytes))
1362   void setMinFunctionAlignment(unsigned Align) {
1363     MinFunctionAlignment = Align;
1364   }
1365
1366   /// Set the target's preferred function alignment.  This should be set if
1367   /// there is a performance benefit to higher-than-minimum alignment (in
1368   /// log2(bytes))
1369   void setPrefFunctionAlignment(unsigned Align) {
1370     PrefFunctionAlignment = Align;
1371   }
1372
1373   /// Set the target's preferred loop alignment. Default alignment is zero, it
1374   /// means the target does not care about loop alignment.  The alignment is
1375   /// specified in log2(bytes). The target may also override
1376   /// getPrefLoopAlignment to provide per-loop values.
1377   void setPrefLoopAlignment(unsigned Align) {
1378     PrefLoopAlignment = Align;
1379   }
1380
1381   /// Set the minimum stack alignment of an argument (in log2(bytes)).
1382   void setMinStackArgumentAlignment(unsigned Align) {
1383     MinStackArgumentAlignment = Align;
1384   }
1385
1386   /// Set if the DAG builder should automatically insert fences and reduce the
1387   /// order of atomic memory operations to Monotonic.
1388   void setInsertFencesForAtomic(bool fence) {
1389     InsertFencesForAtomic = fence;
1390   }
1391
1392 public:
1393   //===--------------------------------------------------------------------===//
1394   // Addressing mode description hooks (used by LSR etc).
1395   //
1396
1397   /// CodeGenPrepare sinks address calculations into the same BB as Load/Store
1398   /// instructions reading the address. This allows as much computation as
1399   /// possible to be done in the address mode for that operand. This hook lets
1400   /// targets also pass back when this should be done on intrinsics which
1401   /// load/store.
1402   virtual bool GetAddrModeArguments(IntrinsicInst * /*I*/,
1403                                     SmallVectorImpl<Value*> &/*Ops*/,
1404                                     Type *&/*AccessTy*/) const {
1405     return false;
1406   }
1407
1408   /// This represents an addressing mode of:
1409   ///    BaseGV + BaseOffs + BaseReg + Scale*ScaleReg
1410   /// If BaseGV is null,  there is no BaseGV.
1411   /// If BaseOffs is zero, there is no base offset.
1412   /// If HasBaseReg is false, there is no base register.
1413   /// If Scale is zero, there is no ScaleReg.  Scale of 1 indicates a reg with
1414   /// no scale.
1415   struct AddrMode {
1416     GlobalValue *BaseGV;
1417     int64_t      BaseOffs;
1418     bool         HasBaseReg;
1419     int64_t      Scale;
1420     AddrMode() : BaseGV(nullptr), BaseOffs(0), HasBaseReg(false), Scale(0) {}
1421   };
1422
1423   /// Return true if the addressing mode represented by AM is legal for this
1424   /// target, for a load/store of the specified type.
1425   ///
1426   /// The type may be VoidTy, in which case only return true if the addressing
1427   /// mode is legal for a load/store of any legal type.  TODO: Handle
1428   /// pre/postinc as well.
1429   virtual bool isLegalAddressingMode(const AddrMode &AM, Type *Ty) const;
1430
1431   /// \brief Return the cost of the scaling factor used in the addressing mode
1432   /// represented by AM for this target, for a load/store of the specified type.
1433   ///
1434   /// If the AM is supported, the return value must be >= 0.
1435   /// If the AM is not supported, it returns a negative value.
1436   /// TODO: Handle pre/postinc as well.
1437   virtual int getScalingFactorCost(const AddrMode &AM, Type *Ty) const {
1438     // Default: assume that any scaling factor used in a legal AM is free.
1439     if (isLegalAddressingMode(AM, Ty)) return 0;
1440     return -1;
1441   }
1442
1443   /// Return true if the specified immediate is legal icmp immediate, that is
1444   /// the target has icmp instructions which can compare a register against the
1445   /// immediate without having to materialize the immediate into a register.
1446   virtual bool isLegalICmpImmediate(int64_t) const {
1447     return true;
1448   }
1449
1450   /// Return true if the specified immediate is legal add immediate, that is the
1451   /// target has add instructions which can add a register with the immediate
1452   /// without having to materialize the immediate into a register.
1453   virtual bool isLegalAddImmediate(int64_t) const {
1454     return true;
1455   }
1456
1457   /// Return true if it's significantly cheaper to shift a vector by a uniform
1458   /// scalar than by an amount which will vary across each lane. On x86, for
1459   /// example, there is a "psllw" instruction for the former case, but no simple
1460   /// instruction for a general "a << b" operation on vectors.
1461   virtual bool isVectorShiftByScalarCheap(Type *Ty) const {
1462     return false;
1463   }
1464
1465   /// Return true if it's free to truncate a value of type Ty1 to type
1466   /// Ty2. e.g. On x86 it's free to truncate a i32 value in register EAX to i16
1467   /// by referencing its sub-register AX.
1468   virtual bool isTruncateFree(Type * /*Ty1*/, Type * /*Ty2*/) const {
1469     return false;
1470   }
1471
1472   /// Return true if a truncation from Ty1 to Ty2 is permitted when deciding
1473   /// whether a call is in tail position. Typically this means that both results
1474   /// would be assigned to the same register or stack slot, but it could mean
1475   /// the target performs adequate checks of its own before proceeding with the
1476   /// tail call.
1477   virtual bool allowTruncateForTailCall(Type * /*Ty1*/, Type * /*Ty2*/) const {
1478     return false;
1479   }
1480
1481   virtual bool isTruncateFree(EVT /*VT1*/, EVT /*VT2*/) const {
1482     return false;
1483   }
1484
1485   virtual bool isProfitableToHoist(Instruction *I) const { return true; }
1486
1487   /// Return true if the extension represented by \p I is free.
1488   /// Unlikely the is[Z|FP]ExtFree family which is based on types,
1489   /// this method can use the context provided by \p I to decide
1490   /// whether or not \p I is free.
1491   /// This method extends the behavior of the is[Z|FP]ExtFree family.
1492   /// In other words, if is[Z|FP]Free returns true, then this method
1493   /// returns true as well. The converse is not true.
1494   /// The target can perform the adequate checks by overriding isExtFreeImpl.
1495   /// \pre \p I must be a sign, zero, or fp extension.
1496   bool isExtFree(const Instruction *I) const {
1497     switch (I->getOpcode()) {
1498     case Instruction::FPExt:
1499       if (isFPExtFree(EVT::getEVT(I->getType())))
1500         return true;
1501       break;
1502     case Instruction::ZExt:
1503       if (isZExtFree(I->getOperand(0)->getType(), I->getType()))
1504         return true;
1505       break;
1506     case Instruction::SExt:
1507       break;
1508     default:
1509       llvm_unreachable("Instruction is not an extension");
1510     }
1511     return isExtFreeImpl(I);
1512   }
1513
1514   /// Return true if any actual instruction that defines a value of type Ty1
1515   /// implicitly zero-extends the value to Ty2 in the result register.
1516   ///
1517   /// This does not necessarily include registers defined in unknown ways, such
1518   /// as incoming arguments, or copies from unknown virtual registers. Also, if
1519   /// isTruncateFree(Ty2, Ty1) is true, this does not necessarily apply to
1520   /// truncate instructions. e.g. on x86-64, all instructions that define 32-bit
1521   /// values implicit zero-extend the result out to 64 bits.
1522   virtual bool isZExtFree(Type * /*Ty1*/, Type * /*Ty2*/) const {
1523     return false;
1524   }
1525
1526   virtual bool isZExtFree(EVT /*VT1*/, EVT /*VT2*/) const {
1527     return false;
1528   }
1529
1530   /// Return true if the target supplies and combines to a paired load
1531   /// two loaded values of type LoadedType next to each other in memory.
1532   /// RequiredAlignment gives the minimal alignment constraints that must be met
1533   /// to be able to select this paired load.
1534   ///
1535   /// This information is *not* used to generate actual paired loads, but it is
1536   /// used to generate a sequence of loads that is easier to combine into a
1537   /// paired load.
1538   /// For instance, something like this:
1539   /// a = load i64* addr
1540   /// b = trunc i64 a to i32
1541   /// c = lshr i64 a, 32
1542   /// d = trunc i64 c to i32
1543   /// will be optimized into:
1544   /// b = load i32* addr1
1545   /// d = load i32* addr2
1546   /// Where addr1 = addr2 +/- sizeof(i32).
1547   ///
1548   /// In other words, unless the target performs a post-isel load combining,
1549   /// this information should not be provided because it will generate more
1550   /// loads.
1551   virtual bool hasPairedLoad(Type * /*LoadedType*/,
1552                              unsigned & /*RequiredAligment*/) const {
1553     return false;
1554   }
1555
1556   virtual bool hasPairedLoad(EVT /*LoadedType*/,
1557                              unsigned & /*RequiredAligment*/) const {
1558     return false;
1559   }
1560
1561   /// Return true if zero-extending the specific node Val to type VT2 is free
1562   /// (either because it's implicitly zero-extended such as ARM ldrb / ldrh or
1563   /// because it's folded such as X86 zero-extending loads).
1564   virtual bool isZExtFree(SDValue Val, EVT VT2) const {
1565     return isZExtFree(Val.getValueType(), VT2);
1566   }
1567
1568   /// Return true if an fpext operation is free (for instance, because
1569   /// single-precision floating-point numbers are implicitly extended to
1570   /// double-precision).
1571   virtual bool isFPExtFree(EVT VT) const {
1572     assert(VT.isFloatingPoint());
1573     return false;
1574   }
1575
1576   /// Return true if folding a vector load into ExtVal (a sign, zero, or any
1577   /// extend node) is profitable.
1578   virtual bool isVectorLoadExtDesirable(SDValue ExtVal) const { return false; }
1579
1580   /// Return true if an fneg operation is free to the point where it is never
1581   /// worthwhile to replace it with a bitwise operation.
1582   virtual bool isFNegFree(EVT VT) const {
1583     assert(VT.isFloatingPoint());
1584     return false;
1585   }
1586
1587   /// Return true if an fabs operation is free to the point where it is never
1588   /// worthwhile to replace it with a bitwise operation.
1589   virtual bool isFAbsFree(EVT VT) const {
1590     assert(VT.isFloatingPoint());
1591     return false;
1592   }
1593
1594   /// Return true if an FMA operation is faster than a pair of fmul and fadd
1595   /// instructions. fmuladd intrinsics will be expanded to FMAs when this method
1596   /// returns true, otherwise fmuladd is expanded to fmul + fadd.
1597   ///
1598   /// NOTE: This may be called before legalization on types for which FMAs are
1599   /// not legal, but should return true if those types will eventually legalize
1600   /// to types that support FMAs. After legalization, it will only be called on
1601   /// types that support FMAs (via Legal or Custom actions)
1602   virtual bool isFMAFasterThanFMulAndFAdd(EVT) const {
1603     return false;
1604   }
1605
1606   /// Return true if it's profitable to narrow operations of type VT1 to
1607   /// VT2. e.g. on x86, it's profitable to narrow from i32 to i8 but not from
1608   /// i32 to i16.
1609   virtual bool isNarrowingProfitable(EVT /*VT1*/, EVT /*VT2*/) const {
1610     return false;
1611   }
1612
1613   /// \brief Return true if it is beneficial to convert a load of a constant to
1614   /// just the constant itself.
1615   /// On some targets it might be more efficient to use a combination of
1616   /// arithmetic instructions to materialize the constant instead of loading it
1617   /// from a constant pool.
1618   virtual bool shouldConvertConstantLoadToIntImm(const APInt &Imm,
1619                                                  Type *Ty) const {
1620     return false;
1621   }
1622
1623   /// Return true if EXTRACT_SUBVECTOR is cheap for this result type
1624   /// with this index. This is needed because EXTRACT_SUBVECTOR usually
1625   /// has custom lowering that depends on the index of the first element,
1626   /// and only the target knows which lowering is cheap.
1627   virtual bool isExtractSubvectorCheap(EVT ResVT, unsigned Index) const {
1628     return false;
1629   }
1630
1631   //===--------------------------------------------------------------------===//
1632   // Runtime Library hooks
1633   //
1634
1635   /// Rename the default libcall routine name for the specified libcall.
1636   void setLibcallName(RTLIB::Libcall Call, const char *Name) {
1637     LibcallRoutineNames[Call] = Name;
1638   }
1639
1640   /// Get the libcall routine name for the specified libcall.
1641   const char *getLibcallName(RTLIB::Libcall Call) const {
1642     return LibcallRoutineNames[Call];
1643   }
1644
1645   /// Override the default CondCode to be used to test the result of the
1646   /// comparison libcall against zero.
1647   void setCmpLibcallCC(RTLIB::Libcall Call, ISD::CondCode CC) {
1648     CmpLibcallCCs[Call] = CC;
1649   }
1650
1651   /// Get the CondCode that's to be used to test the result of the comparison
1652   /// libcall against zero.
1653   ISD::CondCode getCmpLibcallCC(RTLIB::Libcall Call) const {
1654     return CmpLibcallCCs[Call];
1655   }
1656
1657   /// Set the CallingConv that should be used for the specified libcall.
1658   void setLibcallCallingConv(RTLIB::Libcall Call, CallingConv::ID CC) {
1659     LibcallCallingConvs[Call] = CC;
1660   }
1661
1662   /// Get the CallingConv that should be used for the specified libcall.
1663   CallingConv::ID getLibcallCallingConv(RTLIB::Libcall Call) const {
1664     return LibcallCallingConvs[Call];
1665   }
1666
1667 private:
1668   const TargetMachine &TM;
1669
1670   /// True if this is a little endian target.
1671   bool IsLittleEndian;
1672
1673   /// Tells the code generator not to expand operations into sequences that use
1674   /// the select operations if possible.
1675   bool SelectIsExpensive;
1676
1677   /// Tells the code generator that the target has multiple (allocatable)
1678   /// condition registers that can be used to store the results of comparisons
1679   /// for use by selects and conditional branches. With multiple condition
1680   /// registers, the code generator will not aggressively sink comparisons into
1681   /// the blocks of their users.
1682   bool HasMultipleConditionRegisters;
1683
1684   /// Tells the code generator that the target has BitExtract instructions.
1685   /// The code generator will aggressively sink "shift"s into the blocks of
1686   /// their users if the users will generate "and" instructions which can be
1687   /// combined with "shift" to BitExtract instructions.
1688   bool HasExtractBitsInsn;
1689
1690   /// Tells the code generator not to expand integer divides by constants into a
1691   /// sequence of muls, adds, and shifts.  This is a hack until a real cost
1692   /// model is in place.  If we ever optimize for size, this will be set to true
1693   /// unconditionally.
1694   bool IntDivIsCheap;
1695
1696   // Don't expand fsqrt with an approximation based on the inverse sqrt.
1697   bool FsqrtIsCheap;
1698
1699   /// Tells the code generator to bypass slow divide or remainder
1700   /// instructions. For example, BypassSlowDivWidths[32,8] tells the code
1701   /// generator to bypass 32-bit integer div/rem with an 8-bit unsigned integer
1702   /// div/rem when the operands are positive and less than 256.
1703   DenseMap <unsigned int, unsigned int> BypassSlowDivWidths;
1704
1705   /// Tells the code generator that it shouldn't generate sra/srl/add/sra for a
1706   /// signed divide by power of two; let the target handle it.
1707   bool Pow2SDivIsCheap;
1708
1709   /// Tells the code generator that it shouldn't generate extra flow control
1710   /// instructions and should attempt to combine flow control instructions via
1711   /// predication.
1712   bool JumpIsExpensive;
1713
1714   /// Whether the target supports or cares about preserving floating point
1715   /// exception behavior.
1716   bool HasFloatingPointExceptions;
1717
1718   /// This target prefers to use _setjmp to implement llvm.setjmp.
1719   ///
1720   /// Defaults to false.
1721   bool UseUnderscoreSetJmp;
1722
1723   /// This target prefers to use _longjmp to implement llvm.longjmp.
1724   ///
1725   /// Defaults to false.
1726   bool UseUnderscoreLongJmp;
1727
1728   /// Number of blocks threshold to use jump tables.
1729   int MinimumJumpTableEntries;
1730
1731   /// Information about the contents of the high-bits in boolean values held in
1732   /// a type wider than i1. See getBooleanContents.
1733   BooleanContent BooleanContents;
1734
1735   /// Information about the contents of the high-bits in boolean values held in
1736   /// a type wider than i1. See getBooleanContents.
1737   BooleanContent BooleanFloatContents;
1738
1739   /// Information about the contents of the high-bits in boolean vector values
1740   /// when the element type is wider than i1. See getBooleanContents.
1741   BooleanContent BooleanVectorContents;
1742
1743   /// The target scheduling preference: shortest possible total cycles or lowest
1744   /// register usage.
1745   Sched::Preference SchedPreferenceInfo;
1746
1747   /// The size, in bytes, of the target's jmp_buf buffers
1748   unsigned JumpBufSize;
1749
1750   /// The alignment, in bytes, of the target's jmp_buf buffers
1751   unsigned JumpBufAlignment;
1752
1753   /// The minimum alignment that any argument on the stack needs to have.
1754   unsigned MinStackArgumentAlignment;
1755
1756   /// The minimum function alignment (used when optimizing for size, and to
1757   /// prevent explicitly provided alignment from leading to incorrect code).
1758   unsigned MinFunctionAlignment;
1759
1760   /// The preferred function alignment (used when alignment unspecified and
1761   /// optimizing for speed).
1762   unsigned PrefFunctionAlignment;
1763
1764   /// The preferred loop alignment.
1765   unsigned PrefLoopAlignment;
1766
1767   /// Whether the DAG builder should automatically insert fences and reduce
1768   /// ordering for atomics.  (This will be set for for most architectures with
1769   /// weak memory ordering.)
1770   bool InsertFencesForAtomic;
1771
1772   /// If set to a physical register, this specifies the register that
1773   /// llvm.savestack/llvm.restorestack should save and restore.
1774   unsigned StackPointerRegisterToSaveRestore;
1775
1776   /// If set to a physical register, this specifies the register that receives
1777   /// the exception address on entry to a landing pad.
1778   unsigned ExceptionPointerRegister;
1779
1780   /// If set to a physical register, this specifies the register that receives
1781   /// the exception typeid on entry to a landing pad.
1782   unsigned ExceptionSelectorRegister;
1783
1784   /// This indicates the default register class to use for each ValueType the
1785   /// target supports natively.
1786   const TargetRegisterClass *RegClassForVT[MVT::LAST_VALUETYPE];
1787   unsigned char NumRegistersForVT[MVT::LAST_VALUETYPE];
1788   MVT RegisterTypeForVT[MVT::LAST_VALUETYPE];
1789
1790   /// This indicates the "representative" register class to use for each
1791   /// ValueType the target supports natively. This information is used by the
1792   /// scheduler to track register pressure. By default, the representative
1793   /// register class is the largest legal super-reg register class of the
1794   /// register class of the specified type. e.g. On x86, i8, i16, and i32's
1795   /// representative class would be GR32.
1796   const TargetRegisterClass *RepRegClassForVT[MVT::LAST_VALUETYPE];
1797
1798   /// This indicates the "cost" of the "representative" register class for each
1799   /// ValueType. The cost is used by the scheduler to approximate register
1800   /// pressure.
1801   uint8_t RepRegClassCostForVT[MVT::LAST_VALUETYPE];
1802
1803   /// For any value types we are promoting or expanding, this contains the value
1804   /// type that we are changing to.  For Expanded types, this contains one step
1805   /// of the expand (e.g. i64 -> i32), even if there are multiple steps required
1806   /// (e.g. i64 -> i16).  For types natively supported by the system, this holds
1807   /// the same type (e.g. i32 -> i32).
1808   MVT TransformToType[MVT::LAST_VALUETYPE];
1809
1810   /// For each operation and each value type, keep a LegalizeAction that
1811   /// indicates how instruction selection should deal with the operation.  Most
1812   /// operations are Legal (aka, supported natively by the target), but
1813   /// operations that are not should be described.  Note that operations on
1814   /// non-legal value types are not described here.
1815   uint8_t OpActions[MVT::LAST_VALUETYPE][ISD::BUILTIN_OP_END];
1816
1817   /// For each load extension type and each value type, keep a LegalizeAction
1818   /// that indicates how instruction selection should deal with a load of a
1819   /// specific value type and extension type.
1820   uint8_t LoadExtActions[MVT::LAST_VALUETYPE][MVT::LAST_VALUETYPE]
1821                         [ISD::LAST_LOADEXT_TYPE];
1822
1823   /// For each value type pair keep a LegalizeAction that indicates whether a
1824   /// truncating store of a specific value type and truncating type is legal.
1825   uint8_t TruncStoreActions[MVT::LAST_VALUETYPE][MVT::LAST_VALUETYPE];
1826
1827   /// For each indexed mode and each value type, keep a pair of LegalizeAction
1828   /// that indicates how instruction selection should deal with the load /
1829   /// store.
1830   ///
1831   /// The first dimension is the value_type for the reference. The second
1832   /// dimension represents the various modes for load store.
1833   uint8_t IndexedModeActions[MVT::LAST_VALUETYPE][ISD::LAST_INDEXED_MODE];
1834
1835   /// For each condition code (ISD::CondCode) keep a LegalizeAction that
1836   /// indicates how instruction selection should deal with the condition code.
1837   ///
1838   /// Because each CC action takes up 2 bits, we need to have the array size be
1839   /// large enough to fit all of the value types. This can be done by rounding
1840   /// up the MVT::LAST_VALUETYPE value to the next multiple of 16.
1841   uint32_t CondCodeActions[ISD::SETCC_INVALID][(MVT::LAST_VALUETYPE + 15) / 16];
1842
1843   ValueTypeActionImpl ValueTypeActions;
1844
1845 private:
1846   LegalizeKind getTypeConversion(LLVMContext &Context, EVT VT) const;
1847
1848 private:
1849   std::vector<std::pair<MVT, const TargetRegisterClass*> > AvailableRegClasses;
1850
1851   /// Targets can specify ISD nodes that they would like PerformDAGCombine
1852   /// callbacks for by calling setTargetDAGCombine(), which sets a bit in this
1853   /// array.
1854   unsigned char
1855   TargetDAGCombineArray[(ISD::BUILTIN_OP_END+CHAR_BIT-1)/CHAR_BIT];
1856
1857   /// For operations that must be promoted to a specific type, this holds the
1858   /// destination type.  This map should be sparse, so don't hold it as an
1859   /// array.
1860   ///
1861   /// Targets add entries to this map with AddPromotedToType(..), clients access
1862   /// this with getTypeToPromoteTo(..).
1863   std::map<std::pair<unsigned, MVT::SimpleValueType>, MVT::SimpleValueType>
1864     PromoteToType;
1865
1866   /// Stores the name each libcall.
1867   const char *LibcallRoutineNames[RTLIB::UNKNOWN_LIBCALL];
1868
1869   /// The ISD::CondCode that should be used to test the result of each of the
1870   /// comparison libcall against zero.
1871   ISD::CondCode CmpLibcallCCs[RTLIB::UNKNOWN_LIBCALL];
1872
1873   /// Stores the CallingConv that should be used for each libcall.
1874   CallingConv::ID LibcallCallingConvs[RTLIB::UNKNOWN_LIBCALL];
1875
1876 protected:
1877   /// Return true if the extension represented by \p I is free.
1878   /// \pre \p I is a sign, zero, or fp extension and
1879   ///      is[Z|FP]ExtFree of the related types is not true.
1880   virtual bool isExtFreeImpl(const Instruction *I) const { return false; }
1881
1882   /// \brief Specify maximum number of store instructions per memset call.
1883   ///
1884   /// When lowering \@llvm.memset this field specifies the maximum number of
1885   /// store operations that may be substituted for the call to memset. Targets
1886   /// must set this value based on the cost threshold for that target. Targets
1887   /// should assume that the memset will be done using as many of the largest
1888   /// store operations first, followed by smaller ones, if necessary, per
1889   /// alignment restrictions. For example, storing 9 bytes on a 32-bit machine
1890   /// with 16-bit alignment would result in four 2-byte stores and one 1-byte
1891   /// store.  This only applies to setting a constant array of a constant size.
1892   unsigned MaxStoresPerMemset;
1893
1894   /// Maximum number of stores operations that may be substituted for the call
1895   /// to memset, used for functions with OptSize attribute.
1896   unsigned MaxStoresPerMemsetOptSize;
1897
1898   /// \brief Specify maximum bytes of store instructions per memcpy call.
1899   ///
1900   /// When lowering \@llvm.memcpy this field specifies the maximum number of
1901   /// store operations that may be substituted for a call to memcpy. Targets
1902   /// must set this value based on the cost threshold for that target. Targets
1903   /// should assume that the memcpy will be done using as many of the largest
1904   /// store operations first, followed by smaller ones, if necessary, per
1905   /// alignment restrictions. For example, storing 7 bytes on a 32-bit machine
1906   /// with 32-bit alignment would result in one 4-byte store, a one 2-byte store
1907   /// and one 1-byte store. This only applies to copying a constant array of
1908   /// constant size.
1909   unsigned MaxStoresPerMemcpy;
1910
1911   /// Maximum number of store operations that may be substituted for a call to
1912   /// memcpy, used for functions with OptSize attribute.
1913   unsigned MaxStoresPerMemcpyOptSize;
1914
1915   /// \brief Specify maximum bytes of store instructions per memmove call.
1916   ///
1917   /// When lowering \@llvm.memmove this field specifies the maximum number of
1918   /// store instructions that may be substituted for a call to memmove. Targets
1919   /// must set this value based on the cost threshold for that target. Targets
1920   /// should assume that the memmove will be done using as many of the largest
1921   /// store operations first, followed by smaller ones, if necessary, per
1922   /// alignment restrictions. For example, moving 9 bytes on a 32-bit machine
1923   /// with 8-bit alignment would result in nine 1-byte stores.  This only
1924   /// applies to copying a constant array of constant size.
1925   unsigned MaxStoresPerMemmove;
1926
1927   /// Maximum number of store instructions that may be substituted for a call to
1928   /// memmove, used for functions with OpSize attribute.
1929   unsigned MaxStoresPerMemmoveOptSize;
1930
1931   /// Tells the code generator that select is more expensive than a branch if
1932   /// the branch is usually predicted right.
1933   bool PredictableSelectIsExpensive;
1934
1935   /// MaskAndBranchFoldingIsLegal - Indicates if the target supports folding
1936   /// a mask of a single bit, a compare, and a branch into a single instruction.
1937   bool MaskAndBranchFoldingIsLegal;
1938
1939   /// \see enableExtLdPromotion.
1940   bool EnableExtLdPromotion;
1941
1942 protected:
1943   /// Return true if the value types that can be represented by the specified
1944   /// register class are all legal.
1945   bool isLegalRC(const TargetRegisterClass *RC) const;
1946
1947   /// Replace/modify any TargetFrameIndex operands with a targte-dependent
1948   /// sequence of memory operands that is recognized by PrologEpilogInserter.
1949   MachineBasicBlock *emitPatchPoint(MachineInstr *MI, MachineBasicBlock *MBB) const;
1950 };
1951
1952 /// This class defines information used to lower LLVM code to legal SelectionDAG
1953 /// operators that the target instruction selector can accept natively.
1954 ///
1955 /// This class also defines callbacks that targets must implement to lower
1956 /// target-specific constructs to SelectionDAG operators.
1957 class TargetLowering : public TargetLoweringBase {
1958   TargetLowering(const TargetLowering&) = delete;
1959   void operator=(const TargetLowering&) = delete;
1960
1961 public:
1962   /// NOTE: The TargetMachine owns TLOF.
1963   explicit TargetLowering(const TargetMachine &TM);
1964
1965   /// Returns true by value, base pointer and offset pointer and addressing mode
1966   /// by reference if the node's address can be legally represented as
1967   /// pre-indexed load / store address.
1968   virtual bool getPreIndexedAddressParts(SDNode * /*N*/, SDValue &/*Base*/,
1969                                          SDValue &/*Offset*/,
1970                                          ISD::MemIndexedMode &/*AM*/,
1971                                          SelectionDAG &/*DAG*/) const {
1972     return false;
1973   }
1974
1975   /// Returns true by value, base pointer and offset pointer and addressing mode
1976   /// by reference if this node can be combined with a load / store to form a
1977   /// post-indexed load / store.
1978   virtual bool getPostIndexedAddressParts(SDNode * /*N*/, SDNode * /*Op*/,
1979                                           SDValue &/*Base*/,
1980                                           SDValue &/*Offset*/,
1981                                           ISD::MemIndexedMode &/*AM*/,
1982                                           SelectionDAG &/*DAG*/) const {
1983     return false;
1984   }
1985
1986   /// Return the entry encoding for a jump table in the current function.  The
1987   /// returned value is a member of the MachineJumpTableInfo::JTEntryKind enum.
1988   virtual unsigned getJumpTableEncoding() const;
1989
1990   virtual const MCExpr *
1991   LowerCustomJumpTableEntry(const MachineJumpTableInfo * /*MJTI*/,
1992                             const MachineBasicBlock * /*MBB*/, unsigned /*uid*/,
1993                             MCContext &/*Ctx*/) const {
1994     llvm_unreachable("Need to implement this hook if target has custom JTIs");
1995   }
1996
1997   /// Returns relocation base for the given PIC jumptable.
1998   virtual SDValue getPICJumpTableRelocBase(SDValue Table,
1999                                            SelectionDAG &DAG) const;
2000
2001   /// This returns the relocation base for the given PIC jumptable, the same as
2002   /// getPICJumpTableRelocBase, but as an MCExpr.
2003   virtual const MCExpr *
2004   getPICJumpTableRelocBaseExpr(const MachineFunction *MF,
2005                                unsigned JTI, MCContext &Ctx) const;
2006
2007   /// Return true if folding a constant offset with the given GlobalAddress is
2008   /// legal.  It is frequently not legal in PIC relocation models.
2009   virtual bool isOffsetFoldingLegal(const GlobalAddressSDNode *GA) const;
2010
2011   bool isInTailCallPosition(SelectionDAG &DAG, SDNode *Node,
2012                             SDValue &Chain) const;
2013
2014   void softenSetCCOperands(SelectionDAG &DAG, EVT VT,
2015                            SDValue &NewLHS, SDValue &NewRHS,
2016                            ISD::CondCode &CCCode, SDLoc DL) const;
2017
2018   /// Returns a pair of (return value, chain).
2019   std::pair<SDValue, SDValue> makeLibCall(SelectionDAG &DAG, RTLIB::Libcall LC,
2020                                           EVT RetVT, const SDValue *Ops,
2021                                           unsigned NumOps, bool isSigned,
2022                                           SDLoc dl, bool doesNotReturn = false,
2023                                           bool isReturnValueUsed = true) const;
2024
2025   //===--------------------------------------------------------------------===//
2026   // TargetLowering Optimization Methods
2027   //
2028
2029   /// A convenience struct that encapsulates a DAG, and two SDValues for
2030   /// returning information from TargetLowering to its clients that want to
2031   /// combine.
2032   struct TargetLoweringOpt {
2033     SelectionDAG &DAG;
2034     bool LegalTys;
2035     bool LegalOps;
2036     SDValue Old;
2037     SDValue New;
2038
2039     explicit TargetLoweringOpt(SelectionDAG &InDAG,
2040                                bool LT, bool LO) :
2041       DAG(InDAG), LegalTys(LT), LegalOps(LO) {}
2042
2043     bool LegalTypes() const { return LegalTys; }
2044     bool LegalOperations() const { return LegalOps; }
2045
2046     bool CombineTo(SDValue O, SDValue N) {
2047       Old = O;
2048       New = N;
2049       return true;
2050     }
2051
2052     /// Check to see if the specified operand of the specified instruction is a
2053     /// constant integer.  If so, check to see if there are any bits set in the
2054     /// constant that are not demanded.  If so, shrink the constant and return
2055     /// true.
2056     bool ShrinkDemandedConstant(SDValue Op, const APInt &Demanded);
2057
2058     /// Convert x+y to (VT)((SmallVT)x+(SmallVT)y) if the casts are free.  This
2059     /// uses isZExtFree and ZERO_EXTEND for the widening cast, but it could be
2060     /// generalized for targets with other types of implicit widening casts.
2061     bool ShrinkDemandedOp(SDValue Op, unsigned BitWidth, const APInt &Demanded,
2062                           SDLoc dl);
2063   };
2064
2065   /// Look at Op.  At this point, we know that only the DemandedMask bits of the
2066   /// result of Op are ever used downstream.  If we can use this information to
2067   /// simplify Op, create a new simplified DAG node and return true, returning
2068   /// the original and new nodes in Old and New.  Otherwise, analyze the
2069   /// expression and return a mask of KnownOne and KnownZero bits for the
2070   /// expression (used to simplify the caller).  The KnownZero/One bits may only
2071   /// be accurate for those bits in the DemandedMask.
2072   bool SimplifyDemandedBits(SDValue Op, const APInt &DemandedMask,
2073                             APInt &KnownZero, APInt &KnownOne,
2074                             TargetLoweringOpt &TLO, unsigned Depth = 0) const;
2075
2076   /// Determine which of the bits specified in Mask are known to be either zero
2077   /// or one and return them in the KnownZero/KnownOne bitsets.
2078   virtual void computeKnownBitsForTargetNode(const SDValue Op,
2079                                              APInt &KnownZero,
2080                                              APInt &KnownOne,
2081                                              const SelectionDAG &DAG,
2082                                              unsigned Depth = 0) const;
2083
2084   /// This method can be implemented by targets that want to expose additional
2085   /// information about sign bits to the DAG Combiner.
2086   virtual unsigned ComputeNumSignBitsForTargetNode(SDValue Op,
2087                                                    const SelectionDAG &DAG,
2088                                                    unsigned Depth = 0) const;
2089
2090   struct DAGCombinerInfo {
2091     void *DC;  // The DAG Combiner object.
2092     CombineLevel Level;
2093     bool CalledByLegalizer;
2094   public:
2095     SelectionDAG &DAG;
2096
2097     DAGCombinerInfo(SelectionDAG &dag, CombineLevel level,  bool cl, void *dc)
2098       : DC(dc), Level(level), CalledByLegalizer(cl), DAG(dag) {}
2099
2100     bool isBeforeLegalize() const { return Level == BeforeLegalizeTypes; }
2101     bool isBeforeLegalizeOps() const { return Level < AfterLegalizeVectorOps; }
2102     bool isAfterLegalizeVectorOps() const {
2103       return Level == AfterLegalizeDAG;
2104     }
2105     CombineLevel getDAGCombineLevel() { return Level; }
2106     bool isCalledByLegalizer() const { return CalledByLegalizer; }
2107
2108     void AddToWorklist(SDNode *N);
2109     void RemoveFromWorklist(SDNode *N);
2110     SDValue CombineTo(SDNode *N, ArrayRef<SDValue> To, bool AddTo = true);
2111     SDValue CombineTo(SDNode *N, SDValue Res, bool AddTo = true);
2112     SDValue CombineTo(SDNode *N, SDValue Res0, SDValue Res1, bool AddTo = true);
2113
2114     void CommitTargetLoweringOpt(const TargetLoweringOpt &TLO);
2115   };
2116
2117   /// Return if the N is a constant or constant vector equal to the true value
2118   /// from getBooleanContents().
2119   bool isConstTrueVal(const SDNode *N) const;
2120
2121   /// Return if the N is a constant or constant vector equal to the false value
2122   /// from getBooleanContents().
2123   bool isConstFalseVal(const SDNode *N) const;
2124
2125   /// Try to simplify a setcc built with the specified operands and cc. If it is
2126   /// unable to simplify it, return a null SDValue.
2127   SDValue SimplifySetCC(EVT VT, SDValue N0, SDValue N1,
2128                           ISD::CondCode Cond, bool foldBooleans,
2129                           DAGCombinerInfo &DCI, SDLoc dl) const;
2130
2131   /// Returns true (and the GlobalValue and the offset) if the node is a
2132   /// GlobalAddress + offset.
2133   virtual bool
2134   isGAPlusOffset(SDNode *N, const GlobalValue* &GA, int64_t &Offset) const;
2135
2136   /// This method will be invoked for all target nodes and for any
2137   /// target-independent nodes that the target has registered with invoke it
2138   /// for.
2139   ///
2140   /// The semantics are as follows:
2141   /// Return Value:
2142   ///   SDValue.Val == 0   - No change was made
2143   ///   SDValue.Val == N   - N was replaced, is dead, and is already handled.
2144   ///   otherwise          - N should be replaced by the returned Operand.
2145   ///
2146   /// In addition, methods provided by DAGCombinerInfo may be used to perform
2147   /// more complex transformations.
2148   ///
2149   virtual SDValue PerformDAGCombine(SDNode *N, DAGCombinerInfo &DCI) const;
2150
2151   /// Return true if it is profitable to move a following shift through this
2152   //  node, adjusting any immediate operands as necessary to preserve semantics.
2153   //  This transformation may not be desirable if it disrupts a particularly
2154   //  auspicious target-specific tree (e.g. bitfield extraction in AArch64).
2155   //  By default, it returns true.
2156   virtual bool isDesirableToCommuteWithShift(const SDNode *N /*Op*/) const {
2157     return true;
2158   }
2159
2160   /// Return true if the target has native support for the specified value type
2161   /// and it is 'desirable' to use the type for the given node type. e.g. On x86
2162   /// i16 is legal, but undesirable since i16 instruction encodings are longer
2163   /// and some i16 instructions are slow.
2164   virtual bool isTypeDesirableForOp(unsigned /*Opc*/, EVT VT) const {
2165     // By default, assume all legal types are desirable.
2166     return isTypeLegal(VT);
2167   }
2168
2169   /// Return true if it is profitable for dag combiner to transform a floating
2170   /// point op of specified opcode to a equivalent op of an integer
2171   /// type. e.g. f32 load -> i32 load can be profitable on ARM.
2172   virtual bool isDesirableToTransformToIntegerOp(unsigned /*Opc*/,
2173                                                  EVT /*VT*/) const {
2174     return false;
2175   }
2176
2177   /// This method query the target whether it is beneficial for dag combiner to
2178   /// promote the specified node. If true, it should return the desired
2179   /// promotion type by reference.
2180   virtual bool IsDesirableToPromoteOp(SDValue /*Op*/, EVT &/*PVT*/) const {
2181     return false;
2182   }
2183
2184   //===--------------------------------------------------------------------===//
2185   // Lowering methods - These methods must be implemented by targets so that
2186   // the SelectionDAGBuilder code knows how to lower these.
2187   //
2188
2189   /// This hook must be implemented to lower the incoming (formal) arguments,
2190   /// described by the Ins array, into the specified DAG. The implementation
2191   /// should fill in the InVals array with legal-type argument values, and
2192   /// return the resulting token chain value.
2193   ///
2194   virtual SDValue
2195     LowerFormalArguments(SDValue /*Chain*/, CallingConv::ID /*CallConv*/,
2196                          bool /*isVarArg*/,
2197                          const SmallVectorImpl<ISD::InputArg> &/*Ins*/,
2198                          SDLoc /*dl*/, SelectionDAG &/*DAG*/,
2199                          SmallVectorImpl<SDValue> &/*InVals*/) const {
2200     llvm_unreachable("Not Implemented");
2201   }
2202
2203   struct ArgListEntry {
2204     SDValue Node;
2205     Type* Ty;
2206     bool isSExt     : 1;
2207     bool isZExt     : 1;
2208     bool isInReg    : 1;
2209     bool isSRet     : 1;
2210     bool isNest     : 1;
2211     bool isByVal    : 1;
2212     bool isInAlloca : 1;
2213     bool isReturned : 1;
2214     uint16_t Alignment;
2215
2216     ArgListEntry() : isSExt(false), isZExt(false), isInReg(false),
2217       isSRet(false), isNest(false), isByVal(false), isInAlloca(false),
2218       isReturned(false), Alignment(0) { }
2219
2220     void setAttributes(ImmutableCallSite *CS, unsigned AttrIdx);
2221   };
2222   typedef std::vector<ArgListEntry> ArgListTy;
2223
2224   /// This structure contains all information that is necessary for lowering
2225   /// calls. It is passed to TLI::LowerCallTo when the SelectionDAG builder
2226   /// needs to lower a call, and targets will see this struct in their LowerCall
2227   /// implementation.
2228   struct CallLoweringInfo {
2229     SDValue Chain;
2230     Type *RetTy;
2231     bool RetSExt           : 1;
2232     bool RetZExt           : 1;
2233     bool IsVarArg          : 1;
2234     bool IsInReg           : 1;
2235     bool DoesNotReturn     : 1;
2236     bool IsReturnValueUsed : 1;
2237
2238     // IsTailCall should be modified by implementations of
2239     // TargetLowering::LowerCall that perform tail call conversions.
2240     bool IsTailCall;
2241
2242     unsigned NumFixedArgs;
2243     CallingConv::ID CallConv;
2244     SDValue Callee;
2245     ArgListTy Args;
2246     SelectionDAG &DAG;
2247     SDLoc DL;
2248     ImmutableCallSite *CS;
2249     bool IsPatchPoint;
2250     SmallVector<ISD::OutputArg, 32> Outs;
2251     SmallVector<SDValue, 32> OutVals;
2252     SmallVector<ISD::InputArg, 32> Ins;
2253
2254     CallLoweringInfo(SelectionDAG &DAG)
2255       : RetTy(nullptr), RetSExt(false), RetZExt(false), IsVarArg(false),
2256         IsInReg(false), DoesNotReturn(false), IsReturnValueUsed(true),
2257         IsTailCall(false), NumFixedArgs(-1), CallConv(CallingConv::C),
2258         DAG(DAG), CS(nullptr), IsPatchPoint(false) {}
2259
2260     CallLoweringInfo &setDebugLoc(SDLoc dl) {
2261       DL = dl;
2262       return *this;
2263     }
2264
2265     CallLoweringInfo &setChain(SDValue InChain) {
2266       Chain = InChain;
2267       return *this;
2268     }
2269
2270     CallLoweringInfo &setCallee(CallingConv::ID CC, Type *ResultType,
2271                                 SDValue Target, ArgListTy &&ArgsList,
2272                                 unsigned FixedArgs = -1) {
2273       RetTy = ResultType;
2274       Callee = Target;
2275       CallConv = CC;
2276       NumFixedArgs =
2277         (FixedArgs == static_cast<unsigned>(-1) ? Args.size() : FixedArgs);
2278       Args = std::move(ArgsList);
2279       return *this;
2280     }
2281
2282     CallLoweringInfo &setCallee(Type *ResultType, FunctionType *FTy,
2283                                 SDValue Target, ArgListTy &&ArgsList,
2284                                 ImmutableCallSite &Call) {
2285       RetTy = ResultType;
2286
2287       IsInReg = Call.paramHasAttr(0, Attribute::InReg);
2288       DoesNotReturn = Call.doesNotReturn();
2289       IsVarArg = FTy->isVarArg();
2290       IsReturnValueUsed = !Call.getInstruction()->use_empty();
2291       RetSExt = Call.paramHasAttr(0, Attribute::SExt);
2292       RetZExt = Call.paramHasAttr(0, Attribute::ZExt);
2293
2294       Callee = Target;
2295
2296       CallConv = Call.getCallingConv();
2297       NumFixedArgs = FTy->getNumParams();
2298       Args = std::move(ArgsList);
2299
2300       CS = &Call;
2301
2302       return *this;
2303     }
2304
2305     CallLoweringInfo &setInRegister(bool Value = true) {
2306       IsInReg = Value;
2307       return *this;
2308     }
2309
2310     CallLoweringInfo &setNoReturn(bool Value = true) {
2311       DoesNotReturn = Value;
2312       return *this;
2313     }
2314
2315     CallLoweringInfo &setVarArg(bool Value = true) {
2316       IsVarArg = Value;
2317       return *this;
2318     }
2319
2320     CallLoweringInfo &setTailCall(bool Value = true) {
2321       IsTailCall = Value;
2322       return *this;
2323     }
2324
2325     CallLoweringInfo &setDiscardResult(bool Value = true) {
2326       IsReturnValueUsed = !Value;
2327       return *this;
2328     }
2329
2330     CallLoweringInfo &setSExtResult(bool Value = true) {
2331       RetSExt = Value;
2332       return *this;
2333     }
2334
2335     CallLoweringInfo &setZExtResult(bool Value = true) {
2336       RetZExt = Value;
2337       return *this;
2338     }
2339
2340     CallLoweringInfo &setIsPatchPoint(bool Value = true) {
2341       IsPatchPoint = Value;
2342       return *this;
2343     }
2344
2345     ArgListTy &getArgs() {
2346       return Args;
2347     }
2348   };
2349
2350   /// This function lowers an abstract call to a function into an actual call.
2351   /// This returns a pair of operands.  The first element is the return value
2352   /// for the function (if RetTy is not VoidTy).  The second element is the
2353   /// outgoing token chain. It calls LowerCall to do the actual lowering.
2354   std::pair<SDValue, SDValue> LowerCallTo(CallLoweringInfo &CLI) const;
2355
2356   /// This hook must be implemented to lower calls into the the specified
2357   /// DAG. The outgoing arguments to the call are described by the Outs array,
2358   /// and the values to be returned by the call are described by the Ins
2359   /// array. The implementation should fill in the InVals array with legal-type
2360   /// return values from the call, and return the resulting token chain value.
2361   virtual SDValue
2362     LowerCall(CallLoweringInfo &/*CLI*/,
2363               SmallVectorImpl<SDValue> &/*InVals*/) const {
2364     llvm_unreachable("Not Implemented");
2365   }
2366
2367   /// Target-specific cleanup for formal ByVal parameters.
2368   virtual void HandleByVal(CCState *, unsigned &, unsigned) const {}
2369
2370   /// This hook should be implemented to check whether the return values
2371   /// described by the Outs array can fit into the return registers.  If false
2372   /// is returned, an sret-demotion is performed.
2373   virtual bool CanLowerReturn(CallingConv::ID /*CallConv*/,
2374                               MachineFunction &/*MF*/, bool /*isVarArg*/,
2375                const SmallVectorImpl<ISD::OutputArg> &/*Outs*/,
2376                LLVMContext &/*Context*/) const
2377   {
2378     // Return true by default to get preexisting behavior.
2379     return true;
2380   }
2381
2382   /// This hook must be implemented to lower outgoing return values, described
2383   /// by the Outs array, into the specified DAG. The implementation should
2384   /// return the resulting token chain value.
2385   virtual SDValue
2386     LowerReturn(SDValue /*Chain*/, CallingConv::ID /*CallConv*/,
2387                 bool /*isVarArg*/,
2388                 const SmallVectorImpl<ISD::OutputArg> &/*Outs*/,
2389                 const SmallVectorImpl<SDValue> &/*OutVals*/,
2390                 SDLoc /*dl*/, SelectionDAG &/*DAG*/) const {
2391     llvm_unreachable("Not Implemented");
2392   }
2393
2394   /// Return true if result of the specified node is used by a return node
2395   /// only. It also compute and return the input chain for the tail call.
2396   ///
2397   /// This is used to determine whether it is possible to codegen a libcall as
2398   /// tail call at legalization time.
2399   virtual bool isUsedByReturnOnly(SDNode *, SDValue &/*Chain*/) const {
2400     return false;
2401   }
2402
2403   /// Return true if the target may be able emit the call instruction as a tail
2404   /// call. This is used by optimization passes to determine if it's profitable
2405   /// to duplicate return instructions to enable tailcall optimization.
2406   virtual bool mayBeEmittedAsTailCall(CallInst *) const {
2407     return false;
2408   }
2409
2410   /// Return the builtin name for the __builtin___clear_cache intrinsic
2411   /// Default is to invoke the clear cache library call
2412   virtual const char * getClearCacheBuiltinName() const {
2413     return "__clear_cache";
2414   }
2415
2416   /// Return the register ID of the name passed in. Used by named register
2417   /// global variables extension. There is no target-independent behaviour
2418   /// so the default action is to bail.
2419   virtual unsigned getRegisterByName(const char* RegName, EVT VT) const {
2420     report_fatal_error("Named registers not implemented for this target");
2421   }
2422
2423   /// Return the type that should be used to zero or sign extend a
2424   /// zeroext/signext integer argument or return value.  FIXME: Most C calling
2425   /// convention requires the return type to be promoted, but this is not true
2426   /// all the time, e.g. i1 on x86-64. It is also not necessary for non-C
2427   /// calling conventions. The frontend should handle this and include all of
2428   /// the necessary information.
2429   virtual EVT getTypeForExtArgOrReturn(LLVMContext &Context, EVT VT,
2430                                        ISD::NodeType /*ExtendKind*/) const {
2431     EVT MinVT = getRegisterType(Context, MVT::i32);
2432     return VT.bitsLT(MinVT) ? MinVT : VT;
2433   }
2434
2435   /// For some targets, an LLVM struct type must be broken down into multiple
2436   /// simple types, but the calling convention specifies that the entire struct
2437   /// must be passed in a block of consecutive registers.
2438   virtual bool
2439   functionArgumentNeedsConsecutiveRegisters(Type *Ty, CallingConv::ID CallConv,
2440                                             bool isVarArg) const {
2441     return false;
2442   }
2443
2444   /// Returns a 0 terminated array of registers that can be safely used as
2445   /// scratch registers.
2446   virtual const MCPhysReg *getScratchRegisters(CallingConv::ID CC) const {
2447     return nullptr;
2448   }
2449
2450   /// This callback is used to prepare for a volatile or atomic load.
2451   /// It takes a chain node as input and returns the chain for the load itself.
2452   ///
2453   /// Having a callback like this is necessary for targets like SystemZ,
2454   /// which allows a CPU to reuse the result of a previous load indefinitely,
2455   /// even if a cache-coherent store is performed by another CPU.  The default
2456   /// implementation does nothing.
2457   virtual SDValue prepareVolatileOrAtomicLoad(SDValue Chain, SDLoc DL,
2458                                               SelectionDAG &DAG) const {
2459     return Chain;
2460   }
2461
2462   /// This callback is invoked by the type legalizer to legalize nodes with an
2463   /// illegal operand type but legal result types.  It replaces the
2464   /// LowerOperation callback in the type Legalizer.  The reason we can not do
2465   /// away with LowerOperation entirely is that LegalizeDAG isn't yet ready to
2466   /// use this callback.
2467   ///
2468   /// TODO: Consider merging with ReplaceNodeResults.
2469   ///
2470   /// The target places new result values for the node in Results (their number
2471   /// and types must exactly match those of the original return values of
2472   /// the node), or leaves Results empty, which indicates that the node is not
2473   /// to be custom lowered after all.
2474   /// The default implementation calls LowerOperation.
2475   virtual void LowerOperationWrapper(SDNode *N,
2476                                      SmallVectorImpl<SDValue> &Results,
2477                                      SelectionDAG &DAG) const;
2478
2479   /// This callback is invoked for operations that are unsupported by the
2480   /// target, which are registered to use 'custom' lowering, and whose defined
2481   /// values are all legal.  If the target has no operations that require custom
2482   /// lowering, it need not implement this.  The default implementation of this
2483   /// aborts.
2484   virtual SDValue LowerOperation(SDValue Op, SelectionDAG &DAG) const;
2485
2486   /// This callback is invoked when a node result type is illegal for the
2487   /// target, and the operation was registered to use 'custom' lowering for that
2488   /// result type.  The target places new result values for the node in Results
2489   /// (their number and types must exactly match those of the original return
2490   /// values of the node), or leaves Results empty, which indicates that the
2491   /// node is not to be custom lowered after all.
2492   ///
2493   /// If the target has no operations that require custom lowering, it need not
2494   /// implement this.  The default implementation aborts.
2495   virtual void ReplaceNodeResults(SDNode * /*N*/,
2496                                   SmallVectorImpl<SDValue> &/*Results*/,
2497                                   SelectionDAG &/*DAG*/) const {
2498     llvm_unreachable("ReplaceNodeResults not implemented for this target!");
2499   }
2500
2501   /// This method returns the name of a target specific DAG node.
2502   virtual const char *getTargetNodeName(unsigned Opcode) const;
2503
2504   /// This method returns a target specific FastISel object, or null if the
2505   /// target does not support "fast" ISel.
2506   virtual FastISel *createFastISel(FunctionLoweringInfo &,
2507                                    const TargetLibraryInfo *) const {
2508     return nullptr;
2509   }
2510
2511
2512   bool verifyReturnAddressArgumentIsConstant(SDValue Op,
2513                                              SelectionDAG &DAG) const;
2514
2515   //===--------------------------------------------------------------------===//
2516   // Inline Asm Support hooks
2517   //
2518
2519   /// This hook allows the target to expand an inline asm call to be explicit
2520   /// llvm code if it wants to.  This is useful for turning simple inline asms
2521   /// into LLVM intrinsics, which gives the compiler more information about the
2522   /// behavior of the code.
2523   virtual bool ExpandInlineAsm(CallInst *) const {
2524     return false;
2525   }
2526
2527   enum ConstraintType {
2528     C_Register,            // Constraint represents specific register(s).
2529     C_RegisterClass,       // Constraint represents any of register(s) in class.
2530     C_Memory,              // Memory constraint.
2531     C_Other,               // Something else.
2532     C_Unknown              // Unsupported constraint.
2533   };
2534
2535   enum ConstraintWeight {
2536     // Generic weights.
2537     CW_Invalid  = -1,     // No match.
2538     CW_Okay     = 0,      // Acceptable.
2539     CW_Good     = 1,      // Good weight.
2540     CW_Better   = 2,      // Better weight.
2541     CW_Best     = 3,      // Best weight.
2542
2543     // Well-known weights.
2544     CW_SpecificReg  = CW_Okay,    // Specific register operands.
2545     CW_Register     = CW_Good,    // Register operands.
2546     CW_Memory       = CW_Better,  // Memory operands.
2547     CW_Constant     = CW_Best,    // Constant operand.
2548     CW_Default      = CW_Okay     // Default or don't know type.
2549   };
2550
2551   /// This contains information for each constraint that we are lowering.
2552   struct AsmOperandInfo : public InlineAsm::ConstraintInfo {
2553     /// This contains the actual string for the code, like "m".  TargetLowering
2554     /// picks the 'best' code from ConstraintInfo::Codes that most closely
2555     /// matches the operand.
2556     std::string ConstraintCode;
2557
2558     /// Information about the constraint code, e.g. Register, RegisterClass,
2559     /// Memory, Other, Unknown.
2560     TargetLowering::ConstraintType ConstraintType;
2561
2562     /// If this is the result output operand or a clobber, this is null,
2563     /// otherwise it is the incoming operand to the CallInst.  This gets
2564     /// modified as the asm is processed.
2565     Value *CallOperandVal;
2566
2567     /// The ValueType for the operand value.
2568     MVT ConstraintVT;
2569
2570     /// Return true of this is an input operand that is a matching constraint
2571     /// like "4".
2572     bool isMatchingInputConstraint() const;
2573
2574     /// If this is an input matching constraint, this method returns the output
2575     /// operand it matches.
2576     unsigned getMatchedOperand() const;
2577
2578     /// Copy constructor for copying from a ConstraintInfo.
2579     AsmOperandInfo(InlineAsm::ConstraintInfo Info)
2580         : InlineAsm::ConstraintInfo(std::move(Info)),
2581           ConstraintType(TargetLowering::C_Unknown), CallOperandVal(nullptr),
2582           ConstraintVT(MVT::Other) {}
2583   };
2584
2585   typedef std::vector<AsmOperandInfo> AsmOperandInfoVector;
2586
2587   /// Split up the constraint string from the inline assembly value into the
2588   /// specific constraints and their prefixes, and also tie in the associated
2589   /// operand values.  If this returns an empty vector, and if the constraint
2590   /// string itself isn't empty, there was an error parsing.
2591   virtual AsmOperandInfoVector ParseConstraints(const TargetRegisterInfo *TRI,
2592                                                 ImmutableCallSite CS) const;
2593
2594   /// Examine constraint type and operand type and determine a weight value.
2595   /// The operand object must already have been set up with the operand type.
2596   virtual ConstraintWeight getMultipleConstraintMatchWeight(
2597       AsmOperandInfo &info, int maIndex) const;
2598
2599   /// Examine constraint string and operand type and determine a weight value.
2600   /// The operand object must already have been set up with the operand type.
2601   virtual ConstraintWeight getSingleConstraintMatchWeight(
2602       AsmOperandInfo &info, const char *constraint) const;
2603
2604   /// Determines the constraint code and constraint type to use for the specific
2605   /// AsmOperandInfo, setting OpInfo.ConstraintCode and OpInfo.ConstraintType.
2606   /// If the actual operand being passed in is available, it can be passed in as
2607   /// Op, otherwise an empty SDValue can be passed.
2608   virtual void ComputeConstraintToUse(AsmOperandInfo &OpInfo,
2609                                       SDValue Op,
2610                                       SelectionDAG *DAG = nullptr) const;
2611
2612   /// Given a constraint, return the type of constraint it is for this target.
2613   virtual ConstraintType getConstraintType(const std::string &Constraint) const;
2614
2615   /// Given a physical register constraint (e.g.  {edx}), return the register
2616   /// number and the register class for the register.
2617   ///
2618   /// Given a register class constraint, like 'r', if this corresponds directly
2619   /// to an LLVM register class, return a register of 0 and the register class
2620   /// pointer.
2621   ///
2622   /// This should only be used for C_Register constraints.  On error, this
2623   /// returns a register number of 0 and a null register class pointer.
2624   virtual std::pair<unsigned, const TargetRegisterClass *>
2625   getRegForInlineAsmConstraint(const TargetRegisterInfo *TRI,
2626                                const std::string &Constraint, MVT VT) const;
2627
2628   virtual unsigned
2629   getInlineAsmMemConstraint(const std::string &ConstraintCode) const {
2630     if (ConstraintCode == "i")
2631       return InlineAsm::Constraint_i;
2632     else if (ConstraintCode == "m")
2633       return InlineAsm::Constraint_m;
2634     return InlineAsm::Constraint_Unknown;
2635   }
2636
2637   /// Try to replace an X constraint, which matches anything, with another that
2638   /// has more specific requirements based on the type of the corresponding
2639   /// operand.  This returns null if there is no replacement to make.
2640   virtual const char *LowerXConstraint(EVT ConstraintVT) const;
2641
2642   /// Lower the specified operand into the Ops vector.  If it is invalid, don't
2643   /// add anything to Ops.
2644   virtual void LowerAsmOperandForConstraint(SDValue Op, std::string &Constraint,
2645                                             std::vector<SDValue> &Ops,
2646                                             SelectionDAG &DAG) const;
2647
2648   //===--------------------------------------------------------------------===//
2649   // Div utility functions
2650   //
2651   SDValue BuildExactSDIV(SDValue Op1, SDValue Op2, SDLoc dl,
2652                          SelectionDAG &DAG) const;
2653   SDValue BuildSDIV(SDNode *N, const APInt &Divisor, SelectionDAG &DAG,
2654                     bool IsAfterLegalization,
2655                     std::vector<SDNode *> *Created) const;
2656   SDValue BuildUDIV(SDNode *N, const APInt &Divisor, SelectionDAG &DAG,
2657                     bool IsAfterLegalization,
2658                     std::vector<SDNode *> *Created) const;
2659   virtual SDValue BuildSDIVPow2(SDNode *N, const APInt &Divisor,
2660                                 SelectionDAG &DAG,
2661                                 std::vector<SDNode *> *Created) const {
2662     return SDValue();
2663   }
2664
2665   /// Indicate whether this target prefers to combine the given number of FDIVs
2666   /// with the same divisor.
2667   virtual bool combineRepeatedFPDivisors(unsigned NumUsers) const {
2668     return false;
2669   }
2670
2671   /// Hooks for building estimates in place of slower divisions and square
2672   /// roots.
2673   
2674   /// Return a reciprocal square root estimate value for the input operand.
2675   /// The RefinementSteps output is the number of Newton-Raphson refinement
2676   /// iterations required to generate a sufficient (though not necessarily
2677   /// IEEE-754 compliant) estimate for the value type.
2678   /// The boolean UseOneConstNR output is used to select a Newton-Raphson
2679   /// algorithm implementation that uses one constant or two constants.
2680   /// A target may choose to implement its own refinement within this function.
2681   /// If that's true, then return '0' as the number of RefinementSteps to avoid
2682   /// any further refinement of the estimate.
2683   /// An empty SDValue return means no estimate sequence can be created.
2684   virtual SDValue getRsqrtEstimate(SDValue Operand,
2685                               DAGCombinerInfo &DCI,
2686                               unsigned &RefinementSteps,
2687                               bool &UseOneConstNR) const {
2688     return SDValue();
2689   }
2690
2691   /// Return a reciprocal estimate value for the input operand.
2692   /// The RefinementSteps output is the number of Newton-Raphson refinement
2693   /// iterations required to generate a sufficient (though not necessarily
2694   /// IEEE-754 compliant) estimate for the value type.
2695   /// A target may choose to implement its own refinement within this function.
2696   /// If that's true, then return '0' as the number of RefinementSteps to avoid
2697   /// any further refinement of the estimate.
2698   /// An empty SDValue return means no estimate sequence can be created.
2699   virtual SDValue getRecipEstimate(SDValue Operand,
2700                                    DAGCombinerInfo &DCI,
2701                                    unsigned &RefinementSteps) const {
2702     return SDValue();
2703   }
2704
2705   //===--------------------------------------------------------------------===//
2706   // Legalization utility functions
2707   //
2708
2709   /// Expand a MUL into two nodes.  One that computes the high bits of
2710   /// the result and one that computes the low bits.
2711   /// \param HiLoVT The value type to use for the Lo and Hi nodes.
2712   /// \param LL Low bits of the LHS of the MUL.  You can use this parameter
2713   ///        if you want to control how low bits are extracted from the LHS.
2714   /// \param LH High bits of the LHS of the MUL.  See LL for meaning.
2715   /// \param RL Low bits of the RHS of the MUL.  See LL for meaning
2716   /// \param RH High bits of the RHS of the MUL.  See LL for meaning.
2717   /// \returns true if the node has been expanded. false if it has not
2718   bool expandMUL(SDNode *N, SDValue &Lo, SDValue &Hi, EVT HiLoVT,
2719                  SelectionDAG &DAG, SDValue LL = SDValue(),
2720                  SDValue LH = SDValue(), SDValue RL = SDValue(),
2721                  SDValue RH = SDValue()) const;
2722
2723   /// Expand float(f32) to SINT(i64) conversion
2724   /// \param N Node to expand
2725   /// \param Result output after conversion
2726   /// \returns True, if the expansion was successful, false otherwise
2727   bool expandFP_TO_SINT(SDNode *N, SDValue &Result, SelectionDAG &DAG) const;
2728
2729   //===--------------------------------------------------------------------===//
2730   // Instruction Emitting Hooks
2731   //
2732
2733   /// This method should be implemented by targets that mark instructions with
2734   /// the 'usesCustomInserter' flag.  These instructions are special in various
2735   /// ways, which require special support to insert.  The specified MachineInstr
2736   /// is created but not inserted into any basic blocks, and this method is
2737   /// called to expand it into a sequence of instructions, potentially also
2738   /// creating new basic blocks and control flow.
2739   /// As long as the returned basic block is different (i.e., we created a new
2740   /// one), the custom inserter is free to modify the rest of \p MBB.
2741   virtual MachineBasicBlock *
2742     EmitInstrWithCustomInserter(MachineInstr *MI, MachineBasicBlock *MBB) const;
2743
2744   /// This method should be implemented by targets that mark instructions with
2745   /// the 'hasPostISelHook' flag. These instructions must be adjusted after
2746   /// instruction selection by target hooks.  e.g. To fill in optional defs for
2747   /// ARM 's' setting instructions.
2748   virtual void
2749   AdjustInstrPostInstrSelection(MachineInstr *MI, SDNode *Node) const;
2750
2751   /// If this function returns true, SelectionDAGBuilder emits a
2752   /// LOAD_STACK_GUARD node when it is lowering Intrinsic::stackprotector.
2753   virtual bool useLoadStackGuardNode() const {
2754     return false;
2755   }
2756 };
2757
2758 /// Given an LLVM IR type and return type attributes, compute the return value
2759 /// EVTs and flags, and optionally also the offsets, if the return value is
2760 /// being lowered to memory.
2761 void GetReturnInfo(Type* ReturnType, AttributeSet attr,
2762                    SmallVectorImpl<ISD::OutputArg> &Outs,
2763                    const TargetLowering &TLI);
2764
2765 } // end llvm namespace
2766
2767 #endif