lib/Target/X86/X86InstrInfo.h

   1 //===- X86InstrInfo.h - X86 Instruction Information ------------*- C++ -*- ===//
   2 //
   3 //                     The LLVM Compiler Infrastructure
   4 //
   5 // This file is distributed under the University of Illinois Open Source
   6 // License. See LICENSE.TXT for details.
   7 //
   8 //===----------------------------------------------------------------------===//
   9 //
  10 // This file contains the X86 implementation of the TargetInstrInfo class.
  11 //
  12 //===----------------------------------------------------------------------===//
  13
  14 #ifndef X86INSTRUCTIONINFO_H
  15 #define X86INSTRUCTIONINFO_H
  16
  17 #include "llvm/Target/TargetInstrInfo.h"
  18 #include "X86.h"
  19 #include "X86RegisterInfo.h"
  20 #include "llvm/ADT/DenseMap.h"
  21
  22 namespace llvm {
  23   class X86RegisterInfo;
  24   class X86TargetMachine;
  25
  26 namespace X86 {
  27   // Enums for memory operand decoding.  Each memory operand is represented with
  28   // a 5 operand sequence in the form:
  29   //   [BaseReg, ScaleAmt, IndexReg, Disp, Segment]
  30   // These enums help decode this.
  31   enum {
  32     AddrBaseReg = 0,
  33     AddrScaleAmt = 1,
  34     AddrIndexReg = 2,
  35     AddrDisp = 3,
  36
  37     /// AddrSegmentReg - The operand # of the segment in the memory operand.
  38     AddrSegmentReg = 4,
  39
  40     /// AddrNumOperands - Total number of operands in a memory reference.
  41     AddrNumOperands = 5
  42   };
  43
  44
  45   // X86 specific condition code. These correspond to X86_*_COND in
  46   // X86InstrInfo.td. They must be kept in synch.
  47   enum CondCode {
  48     COND_A  = 0,
  49     COND_AE = 1,
  50     COND_B  = 2,
  51     COND_BE = 3,
  52     COND_E  = 4,
  53     COND_G  = 5,
  54     COND_GE = 6,
  55     COND_L  = 7,
  56     COND_LE = 8,
  57     COND_NE = 9,
  58     COND_NO = 10,
  59     COND_NP = 11,
  60     COND_NS = 12,
  61     COND_O  = 13,
  62     COND_P  = 14,
  63     COND_S  = 15,
  64
  65     // Artificial condition codes. These are used by AnalyzeBranch
  66     // to indicate a block terminated with two conditional branches to
  67     // the same location. This occurs in code using FCMP_OEQ or FCMP_UNE,
  68     // which can't be represented on x86 with a single condition. These
  69     // are never used in MachineInstrs.
  70     COND_NE_OR_P,
  71     COND_NP_OR_E,
  72
  73     COND_INVALID
  74   };
  75
  76   // Turn condition code into conditional branch opcode.
  77   unsigned GetCondBranchFromCond(CondCode CC);
  78
  79   /// GetOppositeBranchCondition - Return the inverse of the specified cond,
  80   /// e.g. turning COND_E to COND_NE.
  81   CondCode GetOppositeBranchCondition(X86::CondCode CC);
  82
  83 }
  84
  85 /// X86II - This namespace holds all of the target specific flags that
  86 /// instruction info tracks.
  87 ///
  88 namespace X86II {
  89   /// Target Operand Flag enum.
  90   enum TOF {
  91     //===------------------------------------------------------------------===//
  92     // X86 Specific MachineOperand flags.
  93
  94     MO_NO_FLAG,
  95
  96     /// MO_GOT_ABSOLUTE_ADDRESS - On a symbol operand, this represents a
  97     /// relocation of:
  98     ///    SYMBOL_LABEL + [. - PICBASELABEL]
  99     MO_GOT_ABSOLUTE_ADDRESS,
 100
 101     /// MO_PIC_BASE_OFFSET - On a symbol operand this indicates that the
 102     /// immediate should get the value of the symbol minus the PIC base label:
 103     ///    SYMBOL_LABEL - PICBASELABEL
 104     MO_PIC_BASE_OFFSET,
 105
 106     /// MO_GOT - On a symbol operand this indicates that the immediate is the
 107     /// offset to the GOT entry for the symbol name from the base of the GOT.
 108     ///
 109     /// See the X86-64 ELF ABI supplement for more details.
 110     ///    SYMBOL_LABEL @GOT
 111     MO_GOT,
 112
 113     /// MO_GOTOFF - On a symbol operand this indicates that the immediate is
 114     /// the offset to the location of the symbol name from the base of the GOT.
 115     ///
 116     /// See the X86-64 ELF ABI supplement for more details.
 117     ///    SYMBOL_LABEL @GOTOFF
 118     MO_GOTOFF,
 119
 120     /// MO_GOTPCREL - On a symbol operand this indicates that the immediate is
 121     /// offset to the GOT entry for the symbol name from the current code
 122     /// location.
 123     ///
 124     /// See the X86-64 ELF ABI supplement for more details.
 125     ///    SYMBOL_LABEL @GOTPCREL
 126     MO_GOTPCREL,
 127
 128     /// MO_PLT - On a symbol operand this indicates that the immediate is
 129     /// offset to the PLT entry of symbol name from the current code location.
 130     ///
 131     /// See the X86-64 ELF ABI supplement for more details.
 132     ///    SYMBOL_LABEL @PLT
 133     MO_PLT,
 134
 135     /// MO_TLSGD - On a symbol operand this indicates that the immediate is
 136     /// some TLS offset.
 137     ///
 138     /// See 'ELF Handling for Thread-Local Storage' for more details.
 139     ///    SYMBOL_LABEL @TLSGD
 140     MO_TLSGD,
 141
 142     /// MO_GOTTPOFF - On a symbol operand this indicates that the immediate is
 143     /// some TLS offset.
 144     ///
 145     /// See 'ELF Handling for Thread-Local Storage' for more details.
 146     ///    SYMBOL_LABEL @GOTTPOFF
 147     MO_GOTTPOFF,
 148
 149     /// MO_INDNTPOFF - On a symbol operand this indicates that the immediate is
 150     /// some TLS offset.
 151     ///
 152     /// See 'ELF Handling for Thread-Local Storage' for more details.
 153     ///    SYMBOL_LABEL @INDNTPOFF
 154     MO_INDNTPOFF,
 155
 156     /// MO_TPOFF - On a symbol operand this indicates that the immediate is
 157     /// some TLS offset.
 158     ///
 159     /// See 'ELF Handling for Thread-Local Storage' for more details.
 160     ///    SYMBOL_LABEL @TPOFF
 161     MO_TPOFF,
 162
 163     /// MO_NTPOFF - On a symbol operand this indicates that the immediate is
 164     /// some TLS offset.
 165     ///
 166     /// See 'ELF Handling for Thread-Local Storage' for more details.
 167     ///    SYMBOL_LABEL @NTPOFF
 168     MO_NTPOFF,
 169
 170     /// MO_DLLIMPORT - On a symbol operand "FOO", this indicates that the
 171     /// reference is actually to the "__imp_FOO" symbol.  This is used for
 172     /// dllimport linkage on windows.
 173     MO_DLLIMPORT,
 174
 175     /// MO_DARWIN_STUB - On a symbol operand "FOO", this indicates that the
 176     /// reference is actually to the "FOO$stub" symbol.  This is used for calls
 177     /// and jumps to external functions on Tiger and before.
 178     MO_DARWIN_STUB,
 179
 180     /// MO_DARWIN_NONLAZY - On a symbol operand "FOO", this indicates that the
 181     /// reference is actually to the "FOO$non_lazy_ptr" symbol, which is a
 182     /// non-PIC-base-relative reference to a non-hidden dyld lazy pointer stub.
 183     MO_DARWIN_NONLAZY,
 184
 185     /// MO_DARWIN_NONLAZY_PIC_BASE - On a symbol operand "FOO", this indicates
 186     /// that the reference is actually to "FOO$non_lazy_ptr - PICBASE", which is
 187     /// a PIC-base-relative reference to a non-hidden dyld lazy pointer stub.
 188     MO_DARWIN_NONLAZY_PIC_BASE,
 189
 190     /// MO_DARWIN_HIDDEN_NONLAZY_PIC_BASE - On a symbol operand "FOO", this
 191     /// indicates that the reference is actually to "FOO$non_lazy_ptr -PICBASE",
 192     /// which is a PIC-base-relative reference to a hidden dyld lazy pointer
 193     /// stub.
 194     MO_DARWIN_HIDDEN_NONLAZY_PIC_BASE,
 195
 196     /// MO_TLVP - On a symbol operand this indicates that the immediate is
 197     /// some TLS offset.
 198     ///
 199     /// This is the TLS offset for the Darwin TLS mechanism.
 200     MO_TLVP,
 201
 202     /// MO_TLVP_PIC_BASE - On a symbol operand this indicates that the immediate
 203     /// is some TLS offset from the picbase.
 204     ///
 205     /// This is the 32-bit TLS offset for Darwin TLS in PIC mode.
 206     MO_TLVP_PIC_BASE
 207   };
 208 }
 209
 210 /// isGlobalStubReference - Return true if the specified TargetFlag operand is
 211 /// a reference to a stub for a global, not the global itself.
 212 inline static bool isGlobalStubReference(unsigned char TargetFlag) {
 213   switch (TargetFlag) {
 214   case X86II::MO_DLLIMPORT: // dllimport stub.
 215   case X86II::MO_GOTPCREL:  // rip-relative GOT reference.
 216   case X86II::MO_GOT:       // normal GOT reference.
 217   case X86II::MO_DARWIN_NONLAZY_PIC_BASE:        // Normal $non_lazy_ptr ref.
 218   case X86II::MO_DARWIN_NONLAZY:                 // Normal $non_lazy_ptr ref.
 219   case X86II::MO_DARWIN_HIDDEN_NONLAZY_PIC_BASE: // Hidden $non_lazy_ptr ref.
 220     return true;
 221   default:
 222     return false;
 223   }
 224 }
 225
 226 /// isGlobalRelativeToPICBase - Return true if the specified global value
 227 /// reference is relative to a 32-bit PIC base (X86ISD::GlobalBaseReg).  If this
 228 /// is true, the addressing mode has the PIC base register added in (e.g. EBX).
 229 inline static bool isGlobalRelativeToPICBase(unsigned char TargetFlag) {
 230   switch (TargetFlag) {
 231   case X86II::MO_GOTOFF:                         // isPICStyleGOT: local global.
 232   case X86II::MO_GOT:                            // isPICStyleGOT: other global.
 233   case X86II::MO_PIC_BASE_OFFSET:                // Darwin local global.
 234   case X86II::MO_DARWIN_NONLAZY_PIC_BASE:        // Darwin/32 external global.
 235   case X86II::MO_DARWIN_HIDDEN_NONLAZY_PIC_BASE: // Darwin/32 hidden global.
 236   case X86II::MO_TLVP:                           // ??? Pretty sure..
 237     return true;
 238   default:
 239     return false;
 240   }
 241 }
 242
 243 /// X86II - This namespace holds all of the target specific flags that
 244 /// instruction info tracks.
 245 ///
 246 namespace X86II {
 247   enum {
 248     //===------------------------------------------------------------------===//
 249     // Instruction encodings.  These are the standard/most common forms for X86
 250     // instructions.
 251     //
 252
 253     // PseudoFrm - This represents an instruction that is a pseudo instruction
 254     // or one that has not been implemented yet.  It is illegal to code generate
 255     // it, but tolerated for intermediate implementation stages.
 256     Pseudo         = 0,
 257
 258     /// Raw - This form is for instructions that don't have any operands, so
 259     /// they are just a fixed opcode value, like 'leave'.
 260     RawFrm         = 1,
 261
 262     /// AddRegFrm - This form is used for instructions like 'push r32' that have
 263     /// their one register operand added to their opcode.
 264     AddRegFrm      = 2,
 265
 266     /// MRMDestReg - This form is used for instructions that use the Mod/RM byte
 267     /// to specify a destination, which in this case is a register.
 268     ///
 269     MRMDestReg     = 3,
 270
 271     /// MRMDestMem - This form is used for instructions that use the Mod/RM byte
 272     /// to specify a destination, which in this case is memory.
 273     ///
 274     MRMDestMem     = 4,
 275
 276     /// MRMSrcReg - This form is used for instructions that use the Mod/RM byte
 277     /// to specify a source, which in this case is a register.
 278     ///
 279     MRMSrcReg      = 5,
 280
 281     /// MRMSrcMem - This form is used for instructions that use the Mod/RM byte
 282     /// to specify a source, which in this case is memory.
 283     ///
 284     MRMSrcMem      = 6,
 285
 286     /// MRM[0-7][rm] - These forms are used to represent instructions that use
 287     /// a Mod/RM byte, and use the middle field to hold extended opcode
 288     /// information.  In the intel manual these are represented as /0, /1, ...
 289     ///
 290
 291     // First, instructions that operate on a register r/m operand...
 292     MRM0r = 16,  MRM1r = 17,  MRM2r = 18,  MRM3r = 19, // Format /0 /1 /2 /3
 293     MRM4r = 20,  MRM5r = 21,  MRM6r = 22,  MRM7r = 23, // Format /4 /5 /6 /7
 294
 295     // Next, instructions that operate on a memory r/m operand...
 296     MRM0m = 24,  MRM1m = 25,  MRM2m = 26,  MRM3m = 27, // Format /0 /1 /2 /3
 297     MRM4m = 28,  MRM5m = 29,  MRM6m = 30,  MRM7m = 31, // Format /4 /5 /6 /7
 298
 299     // MRMInitReg - This form is used for instructions whose source and
 300     // destinations are the same register.
 301     MRMInitReg = 32,
 302
 303     //// MRM_C1 - A mod/rm byte of exactly 0xC1.
 304     MRM_C1 = 33,
 305     MRM_C2 = 34,
 306     MRM_C3 = 35,
 307     MRM_C4 = 36,
 308     MRM_C8 = 37,
 309     MRM_C9 = 38,
 310     MRM_E8 = 39,
 311     MRM_F0 = 40,
 312     MRM_F8 = 41,
 313     MRM_F9 = 42,
 314
 315     /// RawFrmImm8 - This is used for the ENTER instruction, which has two
 316     /// immediates, the first of which is a 16-bit immediate (specified by
 317     /// the imm encoding) and the second is a 8-bit fixed value.
 318     RawFrmImm8 = 43,
 319
 320     /// RawFrmImm16 - This is used for CALL FAR instructions, which have two
 321     /// immediates, the first of which is a 16 or 32-bit immediate (specified by
 322     /// the imm encoding) and the second is a 16-bit fixed value.  In the AMD
 323     /// manual, this operand is described as pntr16:32 and pntr16:16
 324     RawFrmImm16 = 44,
 325
 326     FormMask       = 63,
 327
 328     //===------------------------------------------------------------------===//
 329     // Actual flags...
 330
 331     // OpSize - Set if this instruction requires an operand size prefix (0x66),
 332     // which most often indicates that the instruction operates on 16 bit data
 333     // instead of 32 bit data.
 334     OpSize      = 1 << 6,
 335
 336     // AsSize - Set if this instruction requires an operand size prefix (0x67),
 337     // which most often indicates that the instruction address 16 bit address
 338     // instead of 32 bit address (or 32 bit address in 64 bit mode).
 339     AdSize      = 1 << 7,
 340
 341     //===------------------------------------------------------------------===//
 342     // Op0Mask - There are several prefix bytes that are used to form two byte
 343     // opcodes.  These are currently 0x0F, 0xF3, and 0xD8-0xDF.  This mask is
 344     // used to obtain the setting of this field.  If no bits in this field is
 345     // set, there is no prefix byte for obtaining a multibyte opcode.
 346     //
 347     Op0Shift    = 8,
 348     Op0Mask     = 0xF << Op0Shift,
 349
 350     // TB - TwoByte - Set if this instruction has a two byte opcode, which
 351     // starts with a 0x0F byte before the real opcode.
 352     TB          = 1 << Op0Shift,
 353
 354     // REP - The 0xF3 prefix byte indicating repetition of the following
 355     // instruction.
 356     REP         = 2 << Op0Shift,
 357
 358     // D8-DF - These escape opcodes are used by the floating point unit.  These
 359     // values must remain sequential.
 360     D8 = 3 << Op0Shift,   D9 = 4 << Op0Shift,
 361     DA = 5 << Op0Shift,   DB = 6 << Op0Shift,
 362     DC = 7 << Op0Shift,   DD = 8 << Op0Shift,
 363     DE = 9 << Op0Shift,   DF = 10 << Op0Shift,
 364
 365     // XS, XD - These prefix codes are for single and double precision scalar
 366     // floating point operations performed in the SSE registers.
 367     XD = 11 << Op0Shift,  XS = 12 << Op0Shift,
 368
 369     // T8, TA - Prefix after the 0x0F prefix.
 370     T8 = 13 << Op0Shift,  TA = 14 << Op0Shift,
 371
 372     // TF - Prefix before and after 0x0F
 373     TF = 15 << Op0Shift,
 374
 375     //===------------------------------------------------------------------===//
 376     // REX_W - REX prefixes are instruction prefixes used in 64-bit mode.
 377     // They are used to specify GPRs and SSE registers, 64-bit operand size,
 378     // etc. We only cares about REX.W and REX.R bits and only the former is
 379     // statically determined.
 380     //
 381     REXShift    = 12,
 382     REX_W       = 1 << REXShift,
 383
 384     //===------------------------------------------------------------------===//
 385     // This three-bit field describes the size of an immediate operand.  Zero is
 386     // unused so that we can tell if we forgot to set a value.
 387     ImmShift = 13,
 388     ImmMask    = 7 << ImmShift,
 389     Imm8       = 1 << ImmShift,
 390     Imm8PCRel  = 2 << ImmShift,
 391     Imm16      = 3 << ImmShift,
 392     Imm16PCRel = 4 << ImmShift,
 393     Imm32      = 5 << ImmShift,
 394     Imm32PCRel = 6 << ImmShift,
 395     Imm64      = 7 << ImmShift,
 396
 397     //===------------------------------------------------------------------===//
 398     // FP Instruction Classification...  Zero is non-fp instruction.
 399
 400     // FPTypeMask - Mask for all of the FP types...
 401     FPTypeShift = 16,
 402     FPTypeMask  = 7 << FPTypeShift,
 403
 404     // NotFP - The default, set for instructions that do not use FP registers.
 405     NotFP      = 0 << FPTypeShift,
 406
 407     // ZeroArgFP - 0 arg FP instruction which implicitly pushes ST(0), f.e. fld0
 408     ZeroArgFP  = 1 << FPTypeShift,
 409
 410     // OneArgFP - 1 arg FP instructions which implicitly read ST(0), such as fst
 411     OneArgFP   = 2 << FPTypeShift,
 412
 413     // OneArgFPRW - 1 arg FP instruction which implicitly read ST(0) and write a
 414     // result back to ST(0).  For example, fcos, fsqrt, etc.
 415     //
 416     OneArgFPRW = 3 << FPTypeShift,
 417
 418     // TwoArgFP - 2 arg FP instructions which implicitly read ST(0), and an
 419     // explicit argument, storing the result to either ST(0) or the implicit
 420     // argument.  For example: fadd, fsub, fmul, etc...
 421     TwoArgFP   = 4 << FPTypeShift,
 422
 423     // CompareFP - 2 arg FP instructions which implicitly read ST(0) and an
 424     // explicit argument, but have no destination.  Example: fucom, fucomi, ...
 425     CompareFP  = 5 << FPTypeShift,
 426
 427     // CondMovFP - "2 operand" floating point conditional move instructions.
 428     CondMovFP  = 6 << FPTypeShift,
 429
 430     // SpecialFP - Special instruction forms.  Dispatch by opcode explicitly.
 431     SpecialFP  = 7 << FPTypeShift,
 432
 433     // Lock prefix
 434     LOCKShift = 19,
 435     LOCK = 1 << LOCKShift,
 436
 437     // Segment override prefixes. Currently we just need ability to address
 438     // stuff in gs and fs segments.
 439     SegOvrShift = 20,
 440     SegOvrMask  = 3 << SegOvrShift,
 441     FS          = 1 << SegOvrShift,
 442     GS          = 2 << SegOvrShift,
 443
 444     // Execution domain for SSE instructions in bits 22, 23.
 445     // 0 in bits 22-23 means normal, non-SSE instruction.
 446     SSEDomainShift = 22,
 447
 448     OpcodeShift   = 24,
 449     OpcodeMask    = 0xFF << OpcodeShift,
 450
 451     //===------------------------------------------------------------------===//
 452     // VEX - The opcode prefix used by AVX instructions
 453     VEX         = 1U << 0,
 454
 455     // VEX_W - Has a opcode specific functionality, but is used in the same
 456     // way as REX_W is for regular SSE instructions.
 457     VEX_W       = 1U << 1,
 458
 459     // VEX_4V - Used to specify an additional AVX/SSE register. Several 2
 460     // address instructions in SSE are represented as 3 address ones in AVX
 461     // and the additional register is encoded in VEX_VVVV prefix.
 462     VEX_4V      = 1U << 2,
 463
 464     // VEX_I8IMM - Specifies that the last register used in a AVX instruction,
 465     // must be encoded in the i8 immediate field. This usually happens in
 466     // instructions with 4 operands.
 467     VEX_I8IMM   = 1U << 3,
 468
 469     // VEX_L - Stands for a bit in the VEX opcode prefix meaning the current
 470     // instruction uses 256-bit wide registers. This is usually auto detected if
 471     // a VR256 register is used, but some AVX instructions also have this field
 472     // marked when using a f256 memory references.
 473     VEX_L       = 1U << 4
 474   };
 475
 476   // getBaseOpcodeFor - This function returns the "base" X86 opcode for the
 477   // specified machine instruction.
 478   //
 479   static inline unsigned char getBaseOpcodeFor(uint64_t TSFlags) {
 480     return TSFlags >> X86II::OpcodeShift;
 481   }
 482
 483   static inline bool hasImm(uint64_t TSFlags) {
 484     return (TSFlags & X86II::ImmMask) != 0;
 485   }
 486
 487   /// getSizeOfImm - Decode the "size of immediate" field from the TSFlags field
 488   /// of the specified instruction.
 489   static inline unsigned getSizeOfImm(uint64_t TSFlags) {
 490     switch (TSFlags & X86II::ImmMask) {
 491     default: assert(0 && "Unknown immediate size");
 492     case X86II::Imm8:
 493     case X86II::Imm8PCRel:  return 1;
 494     case X86II::Imm16:
 495     case X86II::Imm16PCRel: return 2;
 496     case X86II::Imm32:
 497     case X86II::Imm32PCRel: return 4;
 498     case X86II::Imm64:      return 8;
 499     }
 500   }
 501
 502   /// isImmPCRel - Return true if the immediate of the specified instruction's
 503   /// TSFlags indicates that it is pc relative.
 504   static inline unsigned isImmPCRel(uint64_t TSFlags) {
 505     switch (TSFlags & X86II::ImmMask) {
 506     default: assert(0 && "Unknown immediate size");
 507     case X86II::Imm8PCRel:
 508     case X86II::Imm16PCRel:
 509     case X86II::Imm32PCRel:
 510       return true;
 511     case X86II::Imm8:
 512     case X86II::Imm16:
 513     case X86II::Imm32:
 514     case X86II::Imm64:
 515       return false;
 516     }
 517   }
 518
 519   /// getMemoryOperandNo - The function returns the MCInst operand # for the
 520   /// first field of the memory operand.  If the instruction doesn't have a
 521   /// memory operand, this returns -1.
 522   ///
 523   /// Note that this ignores tied operands.  If there is a tied register which
 524   /// is duplicated in the MCInst (e.g. "EAX = addl EAX, [mem]") it is only
 525   /// counted as one operand.
 526   ///
 527   static inline int getMemoryOperandNo(uint64_t TSFlags) {
 528     switch (TSFlags & X86II::FormMask) {
 529     case X86II::MRMInitReg:  assert(0 && "FIXME: Remove this form");
 530     default: assert(0 && "Unknown FormMask value in getMemoryOperandNo!");
 531     case X86II::Pseudo:
 532     case X86II::RawFrm:
 533     case X86II::AddRegFrm:
 534     case X86II::MRMDestReg:
 535     case X86II::MRMSrcReg:
 536     case X86II::RawFrmImm8:
 537     case X86II::RawFrmImm16:
 538        return -1;
 539     case X86II::MRMDestMem:
 540       return 0;
 541     case X86II::MRMSrcMem: {
 542       bool HasVEX_4V = (TSFlags >> 32) & X86II::VEX_4V;
 543       unsigned FirstMemOp = 1;
 544       if (HasVEX_4V)
 545         ++FirstMemOp;// Skip the register source (which is encoded in VEX_VVVV).
 546
 547       // FIXME: Maybe lea should have its own form?  This is a horrible hack.
 548       //if (Opcode == X86::LEA64r || Opcode == X86::LEA64_32r ||
 549       //    Opcode == X86::LEA16r || Opcode == X86::LEA32r)
 550       return FirstMemOp;
 551     }
 552     case X86II::MRM0r: case X86II::MRM1r:
 553     case X86II::MRM2r: case X86II::MRM3r:
 554     case X86II::MRM4r: case X86II::MRM5r:
 555     case X86II::MRM6r: case X86II::MRM7r:
 556       return -1;
 557     case X86II::MRM0m: case X86II::MRM1m:
 558     case X86II::MRM2m: case X86II::MRM3m:
 559     case X86II::MRM4m: case X86II::MRM5m:
 560     case X86II::MRM6m: case X86II::MRM7m:
 561       return 0;
 562     case X86II::MRM_C1:
 563     case X86II::MRM_C2:
 564     case X86II::MRM_C3:
 565     case X86II::MRM_C4:
 566     case X86II::MRM_C8:
 567     case X86II::MRM_C9:
 568     case X86II::MRM_E8:
 569     case X86II::MRM_F0:
 570     case X86II::MRM_F8:
 571     case X86II::MRM_F9:
 572       return -1;
 573     }
 574   }
 575 }
 576
 577 inline static bool isScale(const MachineOperand &MO) {
 578   return MO.isImm() &&
 579     (MO.getImm() == 1 || MO.getImm() == 2 ||
 580      MO.getImm() == 4 || MO.getImm() == 8);
 581 }
 582
 583 inline static bool isLeaMem(const MachineInstr *MI, unsigned Op) {
 584   if (MI->getOperand(Op).isFI()) return true;
 585   return Op+4 <= MI->getNumOperands() &&
 586     MI->getOperand(Op  ).isReg() && isScale(MI->getOperand(Op+1)) &&
 587     MI->getOperand(Op+2).isReg() &&
 588     (MI->getOperand(Op+3).isImm() ||
 589      MI->getOperand(Op+3).isGlobal() ||
 590      MI->getOperand(Op+3).isCPI() ||
 591      MI->getOperand(Op+3).isJTI());
 592 }
 593
 594 inline static bool isMem(const MachineInstr *MI, unsigned Op) {
 595   if (MI->getOperand(Op).isFI()) return true;
 596   return Op+5 <= MI->getNumOperands() &&
 597     MI->getOperand(Op+4).isReg() &&
 598     isLeaMem(MI, Op);
 599 }
 600
 601 class X86InstrInfo : public TargetInstrInfoImpl {
 602   X86TargetMachine &TM;
 603   const X86RegisterInfo RI;
 604
 605   /// RegOp2MemOpTable2Addr, RegOp2MemOpTable0, RegOp2MemOpTable1,
 606   /// RegOp2MemOpTable2 - Load / store folding opcode maps.
 607   ///
 608   DenseMap<unsigned*, std::pair<unsigned,unsigned> > RegOp2MemOpTable2Addr;
 609   DenseMap<unsigned*, std::pair<unsigned,unsigned> > RegOp2MemOpTable0;
 610   DenseMap<unsigned*, std::pair<unsigned,unsigned> > RegOp2MemOpTable1;
 611   DenseMap<unsigned*, std::pair<unsigned,unsigned> > RegOp2MemOpTable2;
 612
 613   /// MemOp2RegOpTable - Load / store unfolding opcode map.
 614   ///
 615   DenseMap<unsigned*, std::pair<unsigned, unsigned> > MemOp2RegOpTable;
 616
 617 public:
 618   explicit X86InstrInfo(X86TargetMachine &tm);
 619
 620   /// getRegisterInfo - TargetInstrInfo is a superset of MRegister info.  As
 621   /// such, whenever a client has an instance of instruction info, it should
 622   /// always be able to get register info as well (through this method).
 623   ///
 624   virtual const X86RegisterInfo &getRegisterInfo() const { return RI; }
 625
 626   /// isCoalescableExtInstr - Return true if the instruction is a "coalescable"
 627   /// extension instruction. That is, it's like a copy where it's legal for the
 628   /// source to overlap the destination. e.g. X86::MOVSX64rr32. If this returns
 629   /// true, then it's expected the pre-extension value is available as a subreg
 630   /// of the result register. This also returns the sub-register index in
 631   /// SubIdx.
 632   virtual bool isCoalescableExtInstr(const MachineInstr &MI,
 633                                      unsigned &SrcReg, unsigned &DstReg,
 634                                      unsigned &SubIdx) const;
 635
 636   unsigned isLoadFromStackSlot(const MachineInstr *MI, int &FrameIndex) const;
 637   /// isLoadFromStackSlotPostFE - Check for post-frame ptr elimination
 638   /// stack locations as well.  This uses a heuristic so it isn't
 639   /// reliable for correctness.
 640   unsigned isLoadFromStackSlotPostFE(const MachineInstr *MI,
 641                                      int &FrameIndex) const;
 642
 643   /// hasLoadFromStackSlot - If the specified machine instruction has
 644   /// a load from a stack slot, return true along with the FrameIndex
 645   /// of the loaded stack slot and the machine mem operand containing
 646   /// the reference.  If not, return false.  Unlike
 647   /// isLoadFromStackSlot, this returns true for any instructions that
 648   /// loads from the stack.  This is a hint only and may not catch all
 649   /// cases.
 650   bool hasLoadFromStackSlot(const MachineInstr *MI,
 651                             const MachineMemOperand *&MMO,
 652                             int &FrameIndex) const;
 653
 654   unsigned isStoreToStackSlot(const MachineInstr *MI, int &FrameIndex) const;
 655   /// isStoreToStackSlotPostFE - Check for post-frame ptr elimination
 656   /// stack locations as well.  This uses a heuristic so it isn't
 657   /// reliable for correctness.
 658   unsigned isStoreToStackSlotPostFE(const MachineInstr *MI,
 659                                     int &FrameIndex) const;
 660
 661   /// hasStoreToStackSlot - If the specified machine instruction has a
 662   /// store to a stack slot, return true along with the FrameIndex of
 663   /// the loaded stack slot and the machine mem operand containing the
 664   /// reference.  If not, return false.  Unlike isStoreToStackSlot,
 665   /// this returns true for any instructions that loads from the
 666   /// stack.  This is a hint only and may not catch all cases.
 667   bool hasStoreToStackSlot(const MachineInstr *MI,
 668                            const MachineMemOperand *&MMO,
 669                            int &FrameIndex) const;
 670
 671   bool isReallyTriviallyReMaterializable(const MachineInstr *MI,
 672                                          AliasAnalysis *AA) const;
 673   void reMaterialize(MachineBasicBlock &MBB, MachineBasicBlock::iterator MI,
 674                      unsigned DestReg, unsigned SubIdx,
 675                      const MachineInstr *Orig,
 676                      const TargetRegisterInfo &TRI) const;
 677
 678   /// convertToThreeAddress - This method must be implemented by targets that
 679   /// set the M_CONVERTIBLE_TO_3_ADDR flag.  When this flag is set, the target
 680   /// may be able to convert a two-address instruction into a true
 681   /// three-address instruction on demand.  This allows the X86 target (for
 682   /// example) to convert ADD and SHL instructions into LEA instructions if they
 683   /// would require register copies due to two-addressness.
 684   ///
 685   /// This method returns a null pointer if the transformation cannot be
 686   /// performed, otherwise it returns the new instruction.
 687   ///
 688   virtual MachineInstr *convertToThreeAddress(MachineFunction::iterator &MFI,
 689                                               MachineBasicBlock::iterator &MBBI,
 690                                               LiveVariables *LV) const;
 691
 692   /// commuteInstruction - We have a few instructions that must be hacked on to
 693   /// commute them.
 694   ///
 695   virtual MachineInstr *commuteInstruction(MachineInstr *MI, bool NewMI) const;
 696
 697   // Branch analysis.
 698   virtual bool isUnpredicatedTerminator(const MachineInstr* MI) const;
 699   virtual bool AnalyzeBranch(MachineBasicBlock &MBB, MachineBasicBlock *&TBB,
 700                              MachineBasicBlock *&FBB,
 701                              SmallVectorImpl<MachineOperand> &Cond,
 702                              bool AllowModify) const;
 703   virtual unsigned RemoveBranch(MachineBasicBlock &MBB) const;
 704   virtual unsigned InsertBranch(MachineBasicBlock &MBB, MachineBasicBlock *TBB,
 705                                 MachineBasicBlock *FBB,
 706                                 const SmallVectorImpl<MachineOperand> &Cond,
 707                                 DebugLoc DL) const;
 708   virtual void copyPhysReg(MachineBasicBlock &MBB,
 709                            MachineBasicBlock::iterator MI, DebugLoc DL,
 710                            unsigned DestReg, unsigned SrcReg,
 711                            bool KillSrc) const;
 712   virtual void storeRegToStackSlot(MachineBasicBlock &MBB,
 713                                    MachineBasicBlock::iterator MI,
 714                                    unsigned SrcReg, bool isKill, int FrameIndex,
 715                                    const TargetRegisterClass *RC,
 716                                    const TargetRegisterInfo *TRI) const;
 717
 718   virtual void storeRegToAddr(MachineFunction &MF, unsigned SrcReg, bool isKill,
 719                               SmallVectorImpl<MachineOperand> &Addr,
 720                               const TargetRegisterClass *RC,
 721                               MachineInstr::mmo_iterator MMOBegin,
 722                               MachineInstr::mmo_iterator MMOEnd,
 723                               SmallVectorImpl<MachineInstr*> &NewMIs) const;
 724
 725   virtual void loadRegFromStackSlot(MachineBasicBlock &MBB,
 726                                     MachineBasicBlock::iterator MI,
 727                                     unsigned DestReg, int FrameIndex,
 728                                     const TargetRegisterClass *RC,
 729                                     const TargetRegisterInfo *TRI) const;
 730
 731   virtual void loadRegFromAddr(MachineFunction &MF, unsigned DestReg,
 732                                SmallVectorImpl<MachineOperand> &Addr,
 733                                const TargetRegisterClass *RC,
 734                                MachineInstr::mmo_iterator MMOBegin,
 735                                MachineInstr::mmo_iterator MMOEnd,
 736                                SmallVectorImpl<MachineInstr*> &NewMIs) const;
 737
 738   virtual bool spillCalleeSavedRegisters(MachineBasicBlock &MBB,
 739                                          MachineBasicBlock::iterator MI,
 740                                         const std::vector<CalleeSavedInfo> &CSI,
 741                                          const TargetRegisterInfo *TRI) const;
 742
 743   virtual bool restoreCalleeSavedRegisters(MachineBasicBlock &MBB,
 744                                            MachineBasicBlock::iterator MI,
 745                                         const std::vector<CalleeSavedInfo> &CSI,
 746                                            const TargetRegisterInfo *TRI) const;
 747
 748   virtual
 749   MachineInstr *emitFrameIndexDebugValue(MachineFunction &MF,
 750                                          int FrameIx, uint64_t Offset,
 751                                          const MDNode *MDPtr,
 752                                          DebugLoc DL) const;
 753
 754   /// foldMemoryOperand - If this target supports it, fold a load or store of
 755   /// the specified stack slot into the specified machine instruction for the
 756   /// specified operand(s).  If this is possible, the target should perform the
 757   /// folding and return true, otherwise it should return false.  If it folds
 758   /// the instruction, it is likely that the MachineInstruction the iterator
 759   /// references has been changed.
 760   virtual MachineInstr* foldMemoryOperandImpl(MachineFunction &MF,
 761                                               MachineInstr* MI,
 762                                            const SmallVectorImpl<unsigned> &Ops,
 763                                               int FrameIndex) const;
 764
 765   /// foldMemoryOperand - Same as the previous version except it allows folding
 766   /// of any load and store from / to any address, not just from a specific
 767   /// stack slot.
 768   virtual MachineInstr* foldMemoryOperandImpl(MachineFunction &MF,
 769                                               MachineInstr* MI,
 770                                            const SmallVectorImpl<unsigned> &Ops,
 771                                               MachineInstr* LoadMI) const;
 772
 773   /// canFoldMemoryOperand - Returns true if the specified load / store is
 774   /// folding is possible.
 775   virtual bool canFoldMemoryOperand(const MachineInstr*,
 776                                     const SmallVectorImpl<unsigned> &) const;
 777
 778   /// unfoldMemoryOperand - Separate a single instruction which folded a load or
 779   /// a store or a load and a store into two or more instruction. If this is
 780   /// possible, returns true as well as the new instructions by reference.
 781   virtual bool unfoldMemoryOperand(MachineFunction &MF, MachineInstr *MI,
 782                            unsigned Reg, bool UnfoldLoad, bool UnfoldStore,
 783                            SmallVectorImpl<MachineInstr*> &NewMIs) const;
 784
 785   virtual bool unfoldMemoryOperand(SelectionDAG &DAG, SDNode *N,
 786                            SmallVectorImpl<SDNode*> &NewNodes) const;
 787
 788   /// getOpcodeAfterMemoryUnfold - Returns the opcode of the would be new
 789   /// instruction after load / store are unfolded from an instruction of the
 790   /// specified opcode. It returns zero if the specified unfolding is not
 791   /// possible. If LoadRegIndex is non-null, it is filled in with the operand
 792   /// index of the operand which will hold the register holding the loaded
 793   /// value.
 794   virtual unsigned getOpcodeAfterMemoryUnfold(unsigned Opc,
 795                                       bool UnfoldLoad, bool UnfoldStore,
 796                                       unsigned *LoadRegIndex = 0) const;
 797
 798   /// areLoadsFromSameBasePtr - This is used by the pre-regalloc scheduler
 799   /// to determine if two loads are loading from the same base address. It
 800   /// should only return true if the base pointers are the same and the
 801   /// only differences between the two addresses are the offset. It also returns
 802   /// the offsets by reference.
 803   virtual bool areLoadsFromSameBasePtr(SDNode *Load1, SDNode *Load2,
 804                                        int64_t &Offset1, int64_t &Offset2) const;
 805
 806   /// shouldScheduleLoadsNear - This is a used by the pre-regalloc scheduler to
 807   /// determine (in conjuction with areLoadsFromSameBasePtr) if two loads should
 808   /// be scheduled togther. On some targets if two loads are loading from
 809   /// addresses in the same cache line, it's better if they are scheduled
 810   /// together. This function takes two integers that represent the load offsets
 811   /// from the common base address. It returns true if it decides it's desirable
 812   /// to schedule the two loads together. "NumLoads" is the number of loads that
 813   /// have already been scheduled after Load1.
 814   virtual bool shouldScheduleLoadsNear(SDNode *Load1, SDNode *Load2,
 815                                        int64_t Offset1, int64_t Offset2,
 816                                        unsigned NumLoads) const;
 817
 818   virtual void getNoopForMachoTarget(MCInst &NopInst) const;
 819
 820   virtual
 821   bool ReverseBranchCondition(SmallVectorImpl<MachineOperand> &Cond) const;
 822
 823   /// isSafeToMoveRegClassDefs - Return true if it's safe to move a machine
 824   /// instruction that defines the specified register class.
 825   bool isSafeToMoveRegClassDefs(const TargetRegisterClass *RC) const;
 826
 827   static bool isX86_64NonExtLowByteReg(unsigned reg) {
 828     return (reg == X86::SPL || reg == X86::BPL ||
 829           reg == X86::SIL || reg == X86::DIL);
 830   }
 831
 832   static bool isX86_64ExtendedReg(const MachineOperand &MO) {
 833     if (!MO.isReg()) return false;
 834     return isX86_64ExtendedReg(MO.getReg());
 835   }
 836
 837   /// isX86_64ExtendedReg - Is the MachineOperand a x86-64 extended (r8 or
 838   /// higher) register?  e.g. r8, xmm8, xmm13, etc.
 839   static bool isX86_64ExtendedReg(unsigned RegNo);
 840
 841   /// getGlobalBaseReg - Return a virtual register initialized with the
 842   /// the global base register value. Output instructions required to
 843   /// initialize the register in the function entry block, if necessary.
 844   ///
 845   unsigned getGlobalBaseReg(MachineFunction *MF) const;
 846
 847   /// GetSSEDomain - Return the SSE execution domain of MI as the first element,
 848   /// and a bitmask of possible arguments to SetSSEDomain ase the second.
 849   std::pair<uint16_t, uint16_t> GetSSEDomain(const MachineInstr *MI) const;
 850
 851   /// SetSSEDomain - Set the SSEDomain of MI.
 852   void SetSSEDomain(MachineInstr *MI, unsigned Domain) const;
 853
 854   MachineInstr* foldMemoryOperandImpl(MachineFunction &MF,
 855                                       MachineInstr* MI,
 856                                       unsigned OpNum,
 857                                       const SmallVectorImpl<MachineOperand> &MOs,
 858                                       unsigned Size, unsigned Alignment) const;
 859
 860 private:
 861   MachineInstr * convertToThreeAddressWithLEA(unsigned MIOpc,
 862                                               MachineFunction::iterator &MFI,
 863                                               MachineBasicBlock::iterator &MBBI,
 864                                               LiveVariables *LV) const;
 865
 866   /// isFrameOperand - Return true and the FrameIndex if the specified
 867   /// operand and follow operands form a reference to the stack frame.
 868   bool isFrameOperand(const MachineInstr *MI, unsigned int Op,
 869                       int &FrameIndex) const;
 870 };
 871
 872 } // End llvm namespace
 873
 874 #endif