lib/Target/R600/AMDGPUISelLowering.h

   1 //===-- AMDGPUISelLowering.h - AMDGPU Lowering Interface --------*- C++ -*-===//
   2 //
   3 //                     The LLVM Compiler Infrastructure
   4 //
   5 // This file is distributed under the University of Illinois Open Source
   6 // License. See LICENSE.TXT for details.
   7 //
   8 //===----------------------------------------------------------------------===//
   9 //
  10 /// \file
  11 /// \brief Interface definition of the TargetLowering class that is common
  12 /// to all AMD GPUs.
  13 //
  14 //===----------------------------------------------------------------------===//
  15
  16 #ifndef AMDGPUISELLOWERING_H
  17 #define AMDGPUISELLOWERING_H
  18
  19 #include "llvm/Target/TargetLowering.h"
  20
  21 namespace llvm {
  22
  23 class AMDGPUMachineFunction;
  24 class AMDGPUSubtarget;
  25 class MachineRegisterInfo;
  26
  27 class AMDGPUTargetLowering : public TargetLowering {
  28 protected:
  29   const AMDGPUSubtarget *Subtarget;
  30
  31 private:
  32   SDValue LowerConstantInitializer(const Constant* Init, const GlobalValue *GV,
  33                                    const SDValue &InitPtr,
  34                                    SDValue Chain,
  35                                    SelectionDAG &DAG) const;
  36   SDValue LowerFrameIndex(SDValue Op, SelectionDAG &DAG) const;
  37   SDValue LowerEXTRACT_SUBVECTOR(SDValue Op, SelectionDAG &DAG) const;
  38   SDValue LowerCONCAT_VECTORS(SDValue Op, SelectionDAG &DAG) const;
  39   SDValue LowerINTRINSIC_WO_CHAIN(SDValue Op, SelectionDAG &DAG) const;
  40   /// \brief Lower vector stores by merging the vector elements into an integer
  41   /// of the same bitwidth.
  42   SDValue MergeVectorStore(const SDValue &Op, SelectionDAG &DAG) const;
  43   /// \brief Split a vector store into multiple scalar stores.
  44   /// \returns The resulting chain.
  45   SDValue LowerUDIVREM(SDValue Op, SelectionDAG &DAG) const;
  46   SDValue LowerUINT_TO_FP(SDValue Op, SelectionDAG &DAG) const;
  47
  48 protected:
  49
  50   /// \brief Helper function that adds Reg to the LiveIn list of the DAG's
  51   /// MachineFunction.
  52   ///
  53   /// \returns a RegisterSDNode representing Reg.
  54   virtual SDValue CreateLiveInRegister(SelectionDAG &DAG,
  55                                        const TargetRegisterClass *RC,
  56                                        unsigned Reg, EVT VT) const;
  57   SDValue LowerGlobalAddress(AMDGPUMachineFunction *MFI, SDValue Op,
  58                              SelectionDAG &DAG) const;
  59   /// \brief Split a vector load into multiple scalar loads.
  60   SDValue SplitVectorLoad(const SDValue &Op, SelectionDAG &DAG) const;
  61   SDValue SplitVectorStore(SDValue Op, SelectionDAG &DAG) const;
  62   SDValue LowerLOAD(SDValue Op, SelectionDAG &DAG) const;
  63   SDValue LowerSTORE(SDValue Op, SelectionDAG &DAG) const;
  64   bool isHWTrueValue(SDValue Op) const;
  65   bool isHWFalseValue(SDValue Op) const;
  66
  67   /// The SelectionDAGBuilder will automatically promote function arguments
  68   /// with illegal types.  However, this does not work for the AMDGPU targets
  69   /// since the function arguments are stored in memory as these illegal types.
  70   /// In order to handle this properly we need to get the origianl types sizes
  71   /// from the LLVM IR Function and fixup the ISD:InputArg values before
  72   /// passing them to AnalyzeFormalArguments()
  73   void getOriginalFunctionArgs(SelectionDAG &DAG,
  74                                const Function *F,
  75                                const SmallVectorImpl<ISD::InputArg> &Ins,
  76                                SmallVectorImpl<ISD::InputArg> &OrigIns) const;
  77   void AnalyzeFormalArguments(CCState &State,
  78                               const SmallVectorImpl<ISD::InputArg> &Ins) const;
  79
  80 public:
  81   AMDGPUTargetLowering(TargetMachine &TM);
  82
  83   virtual bool isFAbsFree(EVT VT) const override;
  84   virtual bool isFNegFree(EVT VT) const override;
  85   virtual bool isTruncateFree(EVT Src, EVT Dest) const override;
  86   virtual bool isTruncateFree(Type *Src, Type *Dest) const override;
  87
  88   virtual bool isZExtFree(Type *Src, Type *Dest) const override;
  89   virtual bool isZExtFree(EVT Src, EVT Dest) const override;
  90
  91   virtual bool isNarrowingProfitable(EVT VT1, EVT VT2) const override;
  92
  93   virtual MVT getVectorIdxTy() const override;
  94   virtual bool isLoadBitCastBeneficial(EVT, EVT) const override;
  95   virtual SDValue LowerReturn(SDValue Chain, CallingConv::ID CallConv,
  96                               bool isVarArg,
  97                               const SmallVectorImpl<ISD::OutputArg> &Outs,
  98                               const SmallVectorImpl<SDValue> &OutVals,
  99                               SDLoc DL, SelectionDAG &DAG) const;
 100   virtual SDValue LowerCall(CallLoweringInfo &CLI,
 101                             SmallVectorImpl<SDValue> &InVals) const {
 102     CLI.Callee.dump();
 103     llvm_unreachable("Undefined function");
 104   }
 105
 106   virtual SDValue LowerOperation(SDValue Op, SelectionDAG &DAG) const;
 107   virtual void ReplaceNodeResults(SDNode * N,
 108                                   SmallVectorImpl<SDValue> &Results,
 109                                   SelectionDAG &DAG) const override;
 110
 111   SDValue LowerIntrinsicIABS(SDValue Op, SelectionDAG &DAG) const;
 112   SDValue LowerIntrinsicLRP(SDValue Op, SelectionDAG &DAG) const;
 113   SDValue LowerMinMax(SDValue Op, SelectionDAG &DAG) const;
 114   virtual const char* getTargetNodeName(unsigned Opcode) const;
 115
 116   virtual SDNode *PostISelFolding(MachineSDNode *N, SelectionDAG &DAG) const {
 117     return N;
 118   }
 119
 120   /// \brief Determine which of the bits specified in \p Mask are known to be
 121   /// either zero or one and return them in the \p KnownZero and \p KnownOne
 122   /// bitsets.
 123   virtual void computeMaskedBitsForTargetNode(const SDValue Op,
 124                                               APInt &KnownZero,
 125                                               APInt &KnownOne,
 126                                               const SelectionDAG &DAG,
 127                                               unsigned Depth = 0) const override;
 128
 129 // Functions defined in AMDILISelLowering.cpp
 130 public:
 131   virtual bool getTgtMemIntrinsic(IntrinsicInfo &Info,
 132                                   const CallInst &I, unsigned Intrinsic) const;
 133
 134   /// We want to mark f32/f64 floating point values as legal.
 135   bool isFPImmLegal(const APFloat &Imm, EVT VT) const;
 136
 137   /// We don't want to shrink f64/f32 constants.
 138   bool ShouldShrinkFPConstant(EVT VT) const;
 139
 140   SDValue PerformDAGCombine(SDNode *N, DAGCombinerInfo &DCI) const;
 141
 142 private:
 143   void InitAMDILLowering();
 144   SDValue LowerSREM(SDValue Op, SelectionDAG &DAG) const;
 145   SDValue LowerSREM8(SDValue Op, SelectionDAG &DAG) const;
 146   SDValue LowerSREM16(SDValue Op, SelectionDAG &DAG) const;
 147   SDValue LowerSREM32(SDValue Op, SelectionDAG &DAG) const;
 148   SDValue LowerSREM64(SDValue Op, SelectionDAG &DAG) const;
 149   SDValue LowerSDIV(SDValue Op, SelectionDAG &DAG) const;
 150   SDValue LowerSDIV24(SDValue Op, SelectionDAG &DAG) const;
 151   SDValue LowerSDIV32(SDValue Op, SelectionDAG &DAG) const;
 152   SDValue LowerSDIV64(SDValue Op, SelectionDAG &DAG) const;
 153
 154   SDValue ExpandSIGN_EXTEND_INREG(SDValue Op,
 155                                   unsigned BitsDiff,
 156                                   SelectionDAG &DAG) const;
 157   SDValue LowerSIGN_EXTEND_INREG(SDValue Op, SelectionDAG &DAG) const;
 158   EVT genIntType(uint32_t size = 32, uint32_t numEle = 1) const;
 159   SDValue LowerBRCOND(SDValue Op, SelectionDAG &DAG) const;
 160   SDValue LowerFP_ROUND(SDValue Op, SelectionDAG &DAG) const;
 161 };
 162
 163 namespace AMDGPUISD {
 164
 165 enum {
 166   // AMDIL ISD Opcodes
 167   FIRST_NUMBER = ISD::BUILTIN_OP_END,
 168   CALL,        // Function call based on a single integer
 169   UMUL,        // 32bit unsigned multiplication
 170   DIV_INF,      // Divide with infinity returned on zero divisor
 171   RET_FLAG,
 172   BRANCH_COND,
 173   // End AMDIL ISD Opcodes
 174   DWORDADDR,
 175   FRACT,
 176   COS_HW,
 177   SIN_HW,
 178   FMAX,
 179   SMAX,
 180   UMAX,
 181   FMIN,
 182   SMIN,
 183   UMIN,
 184   URECIP,
 185   DOT4,
 186   BFE_U32, // Extract range of bits with zero extension to 32-bits.
 187   BFE_I32, // Extract range of bits with sign extension to 32-bits.
 188   BFI, // (src0 & src1) | (~src0 & src2)
 189   BFM, // Insert a range of bits into a 32-bit word.
 190   MUL_U24,
 191   MUL_I24,
 192   TEXTURE_FETCH,
 193   EXPORT,
 194   CONST_ADDRESS,
 195   REGISTER_LOAD,
 196   REGISTER_STORE,
 197   LOAD_INPUT,
 198   SAMPLE,
 199   SAMPLEB,
 200   SAMPLED,
 201   SAMPLEL,
 202   FIRST_MEM_OPCODE_NUMBER = ISD::FIRST_TARGET_MEMORY_OPCODE,
 203   STORE_MSKOR,
 204   LOAD_CONSTANT,
 205   TBUFFER_STORE_FORMAT,
 206   LAST_AMDGPU_ISD_NUMBER
 207 };
 208
 209
 210 } // End namespace AMDGPUISD
 211
 212 } // End namespace llvm
 213
 214 #endif // AMDGPUISELLOWERING_H