lib/Target/Mips/MipsISelLowering.cpp

   1 //===-- MipsISelLowering.cpp - Mips DAG Lowering Implementation -----------===//
   2 //
   3 //                     The LLVM Compiler Infrastructure
   4 //
   5 // This file is distributed under the University of Illinois Open Source
   6 // License. See LICENSE.TXT for details.
   7 //
   8 //===----------------------------------------------------------------------===//
   9 //
  10 // This file defines the interfaces that Mips uses to lower LLVM code into a
  11 // selection DAG.
  12 //
  13 //===----------------------------------------------------------------------===//
  14
  15 #define DEBUG_TYPE "mips-lower"
  16 #include "MipsISelLowering.h"
  17 #include "MipsMachineFunction.h"
  18 #include "MipsTargetMachine.h"
  19 #include "MipsTargetObjectFile.h"
  20 #include "MipsSubtarget.h"
  21 #include "llvm/DerivedTypes.h"
  22 #include "llvm/Function.h"
  23 #include "llvm/GlobalVariable.h"
  24 #include "llvm/Intrinsics.h"
  25 #include "llvm/CallingConv.h"
  26 #include "llvm/CodeGen/CallingConvLower.h"
  27 #include "llvm/CodeGen/MachineFrameInfo.h"
  28 #include "llvm/CodeGen/MachineFunction.h"
  29 #include "llvm/CodeGen/MachineInstrBuilder.h"
  30 #include "llvm/CodeGen/MachineRegisterInfo.h"
  31 #include "llvm/CodeGen/SelectionDAGISel.h"
  32 #include "llvm/CodeGen/ValueTypes.h"
  33 #include "llvm/Support/Debug.h"
  34 #include "llvm/Support/ErrorHandling.h"
  35 using namespace llvm;
  36
  37 const char *MipsTargetLowering::getTargetNodeName(unsigned Opcode) const {
  38   switch (Opcode) {
  39     case MipsISD::JmpLink    : return "MipsISD::JmpLink";
  40     case MipsISD::Hi         : return "MipsISD::Hi";
  41     case MipsISD::Lo         : return "MipsISD::Lo";
  42     case MipsISD::GPRel      : return "MipsISD::GPRel";
  43     case MipsISD::Ret        : return "MipsISD::Ret";
  44     case MipsISD::CMov       : return "MipsISD::CMov";
  45     case MipsISD::SelectCC   : return "MipsISD::SelectCC";
  46     case MipsISD::FPSelectCC : return "MipsISD::FPSelectCC";
  47     case MipsISD::FPBrcond   : return "MipsISD::FPBrcond";
  48     case MipsISD::FPCmp      : return "MipsISD::FPCmp";
  49     case MipsISD::FPRound    : return "MipsISD::FPRound";
  50     default                  : return NULL;
  51   }
  52 }
  53
  54 MipsTargetLowering::
  55 MipsTargetLowering(MipsTargetMachine &TM)
  56   : TargetLowering(TM, new MipsTargetObjectFile()) {
  57   Subtarget = &TM.getSubtarget<MipsSubtarget>();
  58
  59   // Mips does not have i1 type, so use i32 for
  60   // setcc operations results (slt, sgt, ...).
  61   setBooleanContents(ZeroOrOneBooleanContent);
  62
  63   // Set up the register classes
  64   addRegisterClass(MVT::i32, Mips::CPURegsRegisterClass);
  65   addRegisterClass(MVT::f32, Mips::FGR32RegisterClass);
  66
  67   // When dealing with single precision only, use libcalls
  68   if (!Subtarget->isSingleFloat())
  69     if (!Subtarget->isFP64bit())
  70       addRegisterClass(MVT::f64, Mips::AFGR64RegisterClass);
  71
  72   // Load extented operations for i1 types must be promoted
  73   setLoadExtAction(ISD::EXTLOAD,  MVT::i1,  Promote);
  74   setLoadExtAction(ISD::ZEXTLOAD, MVT::i1,  Promote);
  75   setLoadExtAction(ISD::SEXTLOAD, MVT::i1,  Promote);
  76
  77   // MIPS doesn't have extending float->double load/store
  78   setLoadExtAction(ISD::EXTLOAD, MVT::f32, Expand);
  79   setTruncStoreAction(MVT::f64, MVT::f32, Expand);
  80
  81   // Used by legalize types to correctly generate the setcc result.
  82   // Without this, every float setcc comes with a AND/OR with the result,
  83   // we don't want this, since the fpcmp result goes to a flag register,
  84   // which is used implicitly by brcond and select operations.
  85   AddPromotedToType(ISD::SETCC, MVT::i1, MVT::i32);
  86
  87   // Mips Custom Operations
  88   setOperationAction(ISD::GlobalAddress,      MVT::i32,   Custom);
  89   setOperationAction(ISD::GlobalTLSAddress,   MVT::i32,   Custom);
  90   setOperationAction(ISD::JumpTable,          MVT::i32,   Custom);
  91   setOperationAction(ISD::ConstantPool,       MVT::i32,   Custom);
  92   setOperationAction(ISD::SELECT,             MVT::f32,   Custom);
  93   setOperationAction(ISD::SELECT,             MVT::f64,   Custom);
  94   setOperationAction(ISD::SELECT,             MVT::i32,   Custom);
  95   setOperationAction(ISD::SETCC,              MVT::f32,   Custom);
  96   setOperationAction(ISD::SETCC,              MVT::f64,   Custom);
  97   setOperationAction(ISD::BRCOND,             MVT::Other, Custom);
  98   setOperationAction(ISD::DYNAMIC_STACKALLOC, MVT::i32,   Custom);
  99   setOperationAction(ISD::FP_TO_SINT,         MVT::i32,   Custom);
 100   setOperationAction(ISD::VASTART,            MVT::Other, Custom);
 101
 102
 103   // We custom lower AND/OR to handle the case where the DAG contain 'ands/ors'
 104   // with operands comming from setcc fp comparions. This is necessary since
 105   // the result from these setcc are in a flag registers (FCR31).
 106   setOperationAction(ISD::AND,              MVT::i32,   Custom);
 107   setOperationAction(ISD::OR,               MVT::i32,   Custom);
 108
 109   // Operations not directly supported by Mips.
 110   setOperationAction(ISD::BR_JT,             MVT::Other, Expand);
 111   setOperationAction(ISD::BR_CC,             MVT::Other, Expand);
 112   setOperationAction(ISD::SELECT_CC,         MVT::Other, Expand);
 113   setOperationAction(ISD::UINT_TO_FP,        MVT::i32,   Expand);
 114   setOperationAction(ISD::FP_TO_UINT,        MVT::i32,   Expand);
 115   setOperationAction(ISD::SIGN_EXTEND_INREG, MVT::i1,    Expand);
 116   setOperationAction(ISD::CTPOP,             MVT::i32,   Expand);
 117   setOperationAction(ISD::CTTZ,              MVT::i32,   Expand);
 118   setOperationAction(ISD::ROTL,              MVT::i32,   Expand);
 119   setOperationAction(ISD::ROTR,              MVT::i32,   Expand);
 120   setOperationAction(ISD::SHL_PARTS,         MVT::i32,   Expand);
 121   setOperationAction(ISD::SRA_PARTS,         MVT::i32,   Expand);
 122   setOperationAction(ISD::SRL_PARTS,         MVT::i32,   Expand);
 123   setOperationAction(ISD::FCOPYSIGN,         MVT::f32,   Expand);
 124   setOperationAction(ISD::FCOPYSIGN,         MVT::f64,   Expand);
 125   setOperationAction(ISD::FSIN,              MVT::f32,   Expand);
 126   setOperationAction(ISD::FCOS,              MVT::f32,   Expand);
 127   setOperationAction(ISD::FPOWI,             MVT::f32,   Expand);
 128   setOperationAction(ISD::FPOW,              MVT::f32,   Expand);
 129   setOperationAction(ISD::FLOG,              MVT::f32,   Expand);
 130   setOperationAction(ISD::FLOG2,             MVT::f32,   Expand);
 131   setOperationAction(ISD::FLOG10,            MVT::f32,   Expand);
 132   setOperationAction(ISD::FEXP,              MVT::f32,   Expand);
 133
 134   setOperationAction(ISD::EH_LABEL,          MVT::Other, Expand);
 135
 136   // Use the default for now
 137   setOperationAction(ISD::STACKSAVE,         MVT::Other, Expand);
 138   setOperationAction(ISD::STACKRESTORE,      MVT::Other, Expand);
 139   setOperationAction(ISD::MEMBARRIER,        MVT::Other, Expand);
 140
 141   if (Subtarget->isSingleFloat())
 142     setOperationAction(ISD::SELECT_CC, MVT::f64, Expand);
 143
 144   if (!Subtarget->hasSEInReg()) {
 145     setOperationAction(ISD::SIGN_EXTEND_INREG, MVT::i8,  Expand);
 146     setOperationAction(ISD::SIGN_EXTEND_INREG, MVT::i16, Expand);
 147   }
 148
 149   if (!Subtarget->hasBitCount())
 150     setOperationAction(ISD::CTLZ, MVT::i32, Expand);
 151
 152   if (!Subtarget->hasSwap())
 153     setOperationAction(ISD::BSWAP, MVT::i32, Expand);
 154
 155   setStackPointerRegisterToSaveRestore(Mips::SP);
 156   computeRegisterProperties();
 157 }
 158
 159 MVT::SimpleValueType MipsTargetLowering::getSetCCResultType(EVT VT) const {
 160   return MVT::i32;
 161 }
 162
 163 /// getFunctionAlignment - Return the Log2 alignment of this function.
 164 unsigned MipsTargetLowering::getFunctionAlignment(const Function *) const {
 165   return 2;
 166 }
 167
 168 SDValue MipsTargetLowering::
 169 LowerOperation(SDValue Op, SelectionDAG &DAG)
 170 {
 171   switch (Op.getOpcode())
 172   {
 173     case ISD::AND:                return LowerANDOR(Op, DAG);
 174     case ISD::BRCOND:             return LowerBRCOND(Op, DAG);
 175     case ISD::ConstantPool:       return LowerConstantPool(Op, DAG);
 176     case ISD::DYNAMIC_STACKALLOC: return LowerDYNAMIC_STACKALLOC(Op, DAG);
 177     case ISD::FP_TO_SINT:         return LowerFP_TO_SINT(Op, DAG);
 178     case ISD::GlobalAddress:      return LowerGlobalAddress(Op, DAG);
 179     case ISD::GlobalTLSAddress:   return LowerGlobalTLSAddress(Op, DAG);
 180     case ISD::JumpTable:          return LowerJumpTable(Op, DAG);
 181     case ISD::OR:                 return LowerANDOR(Op, DAG);
 182     case ISD::SELECT:             return LowerSELECT(Op, DAG);
 183     case ISD::SETCC:              return LowerSETCC(Op, DAG);
 184     case ISD::VASTART:            return LowerVASTART(Op, DAG);
 185   }
 186   return SDValue();
 187 }
 188
 189 //===----------------------------------------------------------------------===//
 190 //  Lower helper functions
 191 //===----------------------------------------------------------------------===//
 192
 193 // AddLiveIn - This helper function adds the specified physical register to the
 194 // MachineFunction as a live in value.  It also creates a corresponding
 195 // virtual register for it.
 196 static unsigned
 197 AddLiveIn(MachineFunction &MF, unsigned PReg, TargetRegisterClass *RC)
 198 {
 199   assert(RC->contains(PReg) && "Not the correct regclass!");
 200   unsigned VReg = MF.getRegInfo().createVirtualRegister(RC);
 201   MF.getRegInfo().addLiveIn(PReg, VReg);
 202   return VReg;
 203 }
 204
 205 // Get fp branch code (not opcode) from condition code.
 206 static Mips::FPBranchCode GetFPBranchCodeFromCond(Mips::CondCode CC) {
 207   if (CC >= Mips::FCOND_F && CC <= Mips::FCOND_NGT)
 208     return Mips::BRANCH_T;
 209
 210   if (CC >= Mips::FCOND_T && CC <= Mips::FCOND_GT)
 211     return Mips::BRANCH_F;
 212
 213   return Mips::BRANCH_INVALID;
 214 }
 215
 216 static unsigned FPBranchCodeToOpc(Mips::FPBranchCode BC) {
 217   switch(BC) {
 218     default:
 219       llvm_unreachable("Unknown branch code");
 220     case Mips::BRANCH_T  : return Mips::BC1T;
 221     case Mips::BRANCH_F  : return Mips::BC1F;
 222     case Mips::BRANCH_TL : return Mips::BC1TL;
 223     case Mips::BRANCH_FL : return Mips::BC1FL;
 224   }
 225 }
 226
 227 static Mips::CondCode FPCondCCodeToFCC(ISD::CondCode CC) {
 228   switch (CC) {
 229   default: llvm_unreachable("Unknown fp condition code!");
 230   case ISD::SETEQ:
 231   case ISD::SETOEQ: return Mips::FCOND_EQ;
 232   case ISD::SETUNE: return Mips::FCOND_OGL;
 233   case ISD::SETLT:
 234   case ISD::SETOLT: return Mips::FCOND_OLT;
 235   case ISD::SETGT:
 236   case ISD::SETOGT: return Mips::FCOND_OGT;
 237   case ISD::SETLE:
 238   case ISD::SETOLE: return Mips::FCOND_OLE;
 239   case ISD::SETGE:
 240   case ISD::SETOGE: return Mips::FCOND_OGE;
 241   case ISD::SETULT: return Mips::FCOND_ULT;
 242   case ISD::SETULE: return Mips::FCOND_ULE;
 243   case ISD::SETUGT: return Mips::FCOND_UGT;
 244   case ISD::SETUGE: return Mips::FCOND_UGE;
 245   case ISD::SETUO:  return Mips::FCOND_UN;
 246   case ISD::SETO:   return Mips::FCOND_OR;
 247   case ISD::SETNE:
 248   case ISD::SETONE: return Mips::FCOND_NEQ;
 249   case ISD::SETUEQ: return Mips::FCOND_UEQ;
 250   }
 251 }
 252
 253 MachineBasicBlock *
 254 MipsTargetLowering::EmitInstrWithCustomInserter(MachineInstr *MI,
 255                                                 MachineBasicBlock *BB,
 256                    DenseMap<MachineBasicBlock*, MachineBasicBlock*> *EM) const {
 257   const TargetInstrInfo *TII = getTargetMachine().getInstrInfo();
 258   bool isFPCmp = false;
 259   DebugLoc dl = MI->getDebugLoc();
 260
 261   switch (MI->getOpcode()) {
 262   default: assert(false && "Unexpected instr type to insert");
 263   case Mips::Select_FCC:
 264   case Mips::Select_FCC_S32:
 265   case Mips::Select_FCC_D32:
 266     isFPCmp = true; // FALL THROUGH
 267   case Mips::Select_CC:
 268   case Mips::Select_CC_S32:
 269   case Mips::Select_CC_D32: {
 270     // To "insert" a SELECT_CC instruction, we actually have to insert the
 271     // diamond control-flow pattern.  The incoming instruction knows the
 272     // destination vreg to set, the condition code register to branch on, the
 273     // true/false values to select between, and a branch opcode to use.
 274     const BasicBlock *LLVM_BB = BB->getBasicBlock();
 275     MachineFunction::iterator It = BB;
 276     ++It;
 277
 278     //  thisMBB:
 279     //  ...
 280     //   TrueVal = ...
 281     //   setcc r1, r2, r3
 282     //   bNE   r1, r0, copy1MBB
 283     //   fallthrough --> copy0MBB
 284     MachineBasicBlock *thisMBB  = BB;
 285     MachineFunction *F = BB->getParent();
 286     MachineBasicBlock *copy0MBB = F->CreateMachineBasicBlock(LLVM_BB);
 287     MachineBasicBlock *sinkMBB  = F->CreateMachineBasicBlock(LLVM_BB);
 288
 289     // Emit the right instruction according to the type of the operands compared
 290     if (isFPCmp) {
 291       // Find the condiction code present in the setcc operation.
 292       Mips::CondCode CC = (Mips::CondCode)MI->getOperand(4).getImm();
 293       // Get the branch opcode from the branch code.
 294       unsigned Opc = FPBranchCodeToOpc(GetFPBranchCodeFromCond(CC));
 295       BuildMI(BB, dl, TII->get(Opc)).addMBB(sinkMBB);
 296     } else
 297       BuildMI(BB, dl, TII->get(Mips::BNE)).addReg(MI->getOperand(1).getReg())
 298         .addReg(Mips::ZERO).addMBB(sinkMBB);
 299
 300     F->insert(It, copy0MBB);
 301     F->insert(It, sinkMBB);
 302     // Update machine-CFG edges by first adding all successors of the current
 303     // block to the new block which will contain the Phi node for the select.
 304     // Also inform sdisel of the edge changes.
 305     for(MachineBasicBlock::succ_iterator i = BB->succ_begin(),
 306           e = BB->succ_end(); i != e; ++i) {
 307       EM->insert(std::make_pair(*i, sinkMBB));
 308       sinkMBB->addSuccessor(*i);
 309     }
 310     // Next, remove all successors of the current block, and add the true
 311     // and fallthrough blocks as its successors.
 312     while(!BB->succ_empty())
 313       BB->removeSuccessor(BB->succ_begin());
 314     BB->addSuccessor(copy0MBB);
 315     BB->addSuccessor(sinkMBB);
 316
 317     //  copy0MBB:
 318     //   %FalseValue = ...
 319     //   # fallthrough to sinkMBB
 320     BB = copy0MBB;
 321
 322     // Update machine-CFG edges
 323     BB->addSuccessor(sinkMBB);
 324
 325     //  sinkMBB:
 326     //   %Result = phi [ %FalseValue, copy0MBB ], [ %TrueValue, thisMBB ]
 327     //  ...
 328     BB = sinkMBB;
 329     BuildMI(BB, dl, TII->get(Mips::PHI), MI->getOperand(0).getReg())
 330       .addReg(MI->getOperand(2).getReg()).addMBB(copy0MBB)
 331       .addReg(MI->getOperand(3).getReg()).addMBB(thisMBB);
 332
 333     F->DeleteMachineInstr(MI);   // The pseudo instruction is gone now.
 334     return BB;
 335   }
 336   }
 337 }
 338
 339 //===----------------------------------------------------------------------===//
 340 //  Misc Lower Operation implementation
 341 //===----------------------------------------------------------------------===//
 342
 343 SDValue MipsTargetLowering::
 344 LowerFP_TO_SINT(SDValue Op, SelectionDAG &DAG)
 345 {
 346   if (!Subtarget->isMips1())
 347     return Op;
 348
 349   MachineFunction &MF = DAG.getMachineFunction();
 350   unsigned CCReg = AddLiveIn(MF, Mips::FCR31, Mips::CCRRegisterClass);
 351
 352   SDValue Chain = DAG.getEntryNode();
 353   DebugLoc dl = Op.getDebugLoc();
 354   SDValue Src = Op.getOperand(0);
 355
 356   // Set the condition register
 357   SDValue CondReg = DAG.getCopyFromReg(Chain, dl, CCReg, MVT::i32);
 358   CondReg = DAG.getCopyToReg(Chain, dl, Mips::AT, CondReg);
 359   CondReg = DAG.getCopyFromReg(CondReg, dl, Mips::AT, MVT::i32);
 360
 361   SDValue Cst = DAG.getConstant(3, MVT::i32);
 362   SDValue Or = DAG.getNode(ISD::OR, dl, MVT::i32, CondReg, Cst);
 363   Cst = DAG.getConstant(2, MVT::i32);
 364   SDValue Xor = DAG.getNode(ISD::XOR, dl, MVT::i32, Or, Cst);
 365
 366   SDValue InFlag(0, 0);
 367   CondReg = DAG.getCopyToReg(Chain, dl, Mips::FCR31, Xor, InFlag);
 368
 369   // Emit the round instruction and bit convert to integer
 370   SDValue Trunc = DAG.getNode(MipsISD::FPRound, dl, MVT::f32,
 371                               Src, CondReg.getValue(1));
 372   SDValue BitCvt = DAG.getNode(ISD::BIT_CONVERT, dl, MVT::i32, Trunc);
 373   return BitCvt;
 374 }
 375
 376 SDValue MipsTargetLowering::
 377 LowerDYNAMIC_STACKALLOC(SDValue Op, SelectionDAG &DAG)
 378 {
 379   SDValue Chain = Op.getOperand(0);
 380   SDValue Size = Op.getOperand(1);
 381   DebugLoc dl = Op.getDebugLoc();
 382
 383   // Get a reference from Mips stack pointer
 384   SDValue StackPointer = DAG.getCopyFromReg(Chain, dl, Mips::SP, MVT::i32);
 385
 386   // Subtract the dynamic size from the actual stack size to
 387   // obtain the new stack size.
 388   SDValue Sub = DAG.getNode(ISD::SUB, dl, MVT::i32, StackPointer, Size);
 389
 390   // The Sub result contains the new stack start address, so it
 391   // must be placed in the stack pointer register.
 392   Chain = DAG.getCopyToReg(StackPointer.getValue(1), dl, Mips::SP, Sub);
 393
 394   // This node always has two return values: a new stack pointer
 395   // value and a chain
 396   SDValue Ops[2] = { Sub, Chain };
 397   return DAG.getMergeValues(Ops, 2, dl);
 398 }
 399
 400 SDValue MipsTargetLowering::
 401 LowerANDOR(SDValue Op, SelectionDAG &DAG)
 402 {
 403   SDValue LHS   = Op.getOperand(0);
 404   SDValue RHS   = Op.getOperand(1);
 405   DebugLoc dl   = Op.getDebugLoc();
 406
 407   if (LHS.getOpcode() != MipsISD::FPCmp || RHS.getOpcode() != MipsISD::FPCmp)
 408     return Op;
 409
 410   SDValue True  = DAG.getConstant(1, MVT::i32);
 411   SDValue False = DAG.getConstant(0, MVT::i32);
 412
 413   SDValue LSEL = DAG.getNode(MipsISD::FPSelectCC, dl, True.getValueType(),
 414                              LHS, True, False, LHS.getOperand(2));
 415   SDValue RSEL = DAG.getNode(MipsISD::FPSelectCC, dl, True.getValueType(),
 416                              RHS, True, False, RHS.getOperand(2));
 417
 418   return DAG.getNode(Op.getOpcode(), dl, MVT::i32, LSEL, RSEL);
 419 }
 420
 421 SDValue MipsTargetLowering::
 422 LowerBRCOND(SDValue Op, SelectionDAG &DAG)
 423 {
 424   // The first operand is the chain, the second is the condition, the third is
 425   // the block to branch to if the condition is true.
 426   SDValue Chain = Op.getOperand(0);
 427   SDValue Dest = Op.getOperand(2);
 428   DebugLoc dl = Op.getDebugLoc();
 429
 430   if (Op.getOperand(1).getOpcode() != MipsISD::FPCmp)
 431     return Op;
 432
 433   SDValue CondRes = Op.getOperand(1);
 434   SDValue CCNode  = CondRes.getOperand(2);
 435   Mips::CondCode CC =
 436     (Mips::CondCode)cast<ConstantSDNode>(CCNode)->getZExtValue();
 437   SDValue BrCode = DAG.getConstant(GetFPBranchCodeFromCond(CC), MVT::i32);
 438
 439   return DAG.getNode(MipsISD::FPBrcond, dl, Op.getValueType(), Chain, BrCode,
 440              Dest, CondRes);
 441 }
 442
 443 SDValue MipsTargetLowering::
 444 LowerSETCC(SDValue Op, SelectionDAG &DAG)
 445 {
 446   // The operands to this are the left and right operands to compare (ops #0,
 447   // and #1) and the condition code to compare them with (op #2) as a
 448   // CondCodeSDNode.
 449   SDValue LHS = Op.getOperand(0);
 450   SDValue RHS = Op.getOperand(1);
 451   DebugLoc dl = Op.getDebugLoc();
 452
 453   ISD::CondCode CC = cast<CondCodeSDNode>(Op.getOperand(2))->get();
 454
 455   return DAG.getNode(MipsISD::FPCmp, dl, Op.getValueType(), LHS, RHS,
 456                  DAG.getConstant(FPCondCCodeToFCC(CC), MVT::i32));
 457 }
 458
 459 SDValue MipsTargetLowering::
 460 LowerSELECT(SDValue Op, SelectionDAG &DAG)
 461 {
 462   SDValue Cond  = Op.getOperand(0);
 463   SDValue True  = Op.getOperand(1);
 464   SDValue False = Op.getOperand(2);
 465   DebugLoc dl = Op.getDebugLoc();
 466
 467   // if the incomming condition comes from a integer compare, the select
 468   // operation must be SelectCC or a conditional move if the subtarget
 469   // supports it.
 470   if (Cond.getOpcode() != MipsISD::FPCmp) {
 471     if (Subtarget->hasCondMov() && !True.getValueType().isFloatingPoint())
 472       return Op;
 473     return DAG.getNode(MipsISD::SelectCC, dl, True.getValueType(),
 474                        Cond, True, False);
 475   }
 476
 477   // if the incomming condition comes from fpcmp, the select
 478   // operation must use FPSelectCC.
 479   SDValue CCNode = Cond.getOperand(2);
 480   return DAG.getNode(MipsISD::FPSelectCC, dl, True.getValueType(),
 481                      Cond, True, False, CCNode);
 482 }
 483
 484 SDValue MipsTargetLowering::LowerGlobalAddress(SDValue Op, SelectionDAG &DAG) {
 485   // FIXME there isn't actually debug info here
 486   DebugLoc dl = Op.getDebugLoc();
 487   GlobalValue *GV = cast<GlobalAddressSDNode>(Op)->getGlobal();
 488
 489   if (getTargetMachine().getRelocationModel() != Reloc::PIC_) {
 490     SDVTList VTs = DAG.getVTList(MVT::i32);
 491
 492     MipsTargetObjectFile &TLOF = (MipsTargetObjectFile&)getObjFileLowering();
 493
 494     // %gp_rel relocation
 495     if (TLOF.IsGlobalInSmallSection(GV, getTargetMachine())) {
 496       SDValue GA = DAG.getTargetGlobalAddress(GV, MVT::i32, 0,
 497                                               MipsII::MO_GPREL);
 498       SDValue GPRelNode = DAG.getNode(MipsISD::GPRel, dl, VTs, &GA, 1);
 499       SDValue GOT = DAG.getGLOBAL_OFFSET_TABLE(MVT::i32);
 500       return DAG.getNode(ISD::ADD, dl, MVT::i32, GOT, GPRelNode);
 501     }
 502     // %hi/%lo relocation
 503     SDValue GA = DAG.getTargetGlobalAddress(GV, MVT::i32, 0,
 504                                             MipsII::MO_ABS_HILO);
 505     SDValue HiPart = DAG.getNode(MipsISD::Hi, dl, VTs, &GA, 1);
 506     SDValue Lo = DAG.getNode(MipsISD::Lo, dl, MVT::i32, GA);
 507     return DAG.getNode(ISD::ADD, dl, MVT::i32, HiPart, Lo);
 508
 509   } else {
 510     SDValue GA = DAG.getTargetGlobalAddress(GV, MVT::i32, 0,
 511                                             MipsII::MO_GOT);
 512     SDValue ResNode = DAG.getLoad(MVT::i32, dl,
 513                                   DAG.getEntryNode(), GA, NULL, 0,
 514                                   false, false, 0);
 515     // On functions and global targets not internal linked only
 516     // a load from got/GP is necessary for PIC to work.
 517     if (!GV->hasLocalLinkage() || isa<Function>(GV))
 518       return ResNode;
 519     SDValue Lo = DAG.getNode(MipsISD::Lo, dl, MVT::i32, GA);
 520     return DAG.getNode(ISD::ADD, dl, MVT::i32, ResNode, Lo);
 521   }
 522
 523   llvm_unreachable("Dont know how to handle GlobalAddress");
 524   return SDValue(0,0);
 525 }
 526
 527 SDValue MipsTargetLowering::
 528 LowerGlobalTLSAddress(SDValue Op, SelectionDAG &DAG)
 529 {
 530   llvm_unreachable("TLS not implemented for MIPS.");
 531   return SDValue(); // Not reached
 532 }
 533
 534 SDValue MipsTargetLowering::
 535 LowerJumpTable(SDValue Op, SelectionDAG &DAG)
 536 {
 537   SDValue ResNode;
 538   SDValue HiPart;
 539   // FIXME there isn't actually debug info here
 540   DebugLoc dl = Op.getDebugLoc();
 541   bool IsPIC = getTargetMachine().getRelocationModel() == Reloc::PIC_;
 542   unsigned char OpFlag = IsPIC ? MipsII::MO_GOT : MipsII::MO_ABS_HILO;
 543
 544   EVT PtrVT = Op.getValueType();
 545   JumpTableSDNode *JT  = cast<JumpTableSDNode>(Op);
 546
 547   SDValue JTI = DAG.getTargetJumpTable(JT->getIndex(), PtrVT, OpFlag);
 548
 549   if (IsPIC) {
 550     SDValue Ops[] = { JTI };
 551     HiPart = DAG.getNode(MipsISD::Hi, dl, DAG.getVTList(MVT::i32), Ops, 1);
 552   } else // Emit Load from Global Pointer
 553     HiPart = DAG.getLoad(MVT::i32, dl, DAG.getEntryNode(), JTI, NULL, 0,
 554                          false, false, 0);
 555
 556   SDValue Lo = DAG.getNode(MipsISD::Lo, dl, MVT::i32, JTI);
 557   ResNode = DAG.getNode(ISD::ADD, dl, MVT::i32, HiPart, Lo);
 558
 559   return ResNode;
 560 }
 561
 562 SDValue MipsTargetLowering::
 563 LowerConstantPool(SDValue Op, SelectionDAG &DAG)
 564 {
 565   SDValue ResNode;
 566   ConstantPoolSDNode *N = cast<ConstantPoolSDNode>(Op);
 567   Constant *C = N->getConstVal();
 568   // FIXME there isn't actually debug info here
 569   DebugLoc dl = Op.getDebugLoc();
 570
 571   // gp_rel relocation
 572   // FIXME: we should reference the constant pool using small data sections,
 573   // but the asm printer currently doens't support this feature without
 574   // hacking it. This feature should come soon so we can uncomment the
 575   // stuff below.
 576   //if (IsInSmallSection(C->getType())) {
 577   //  SDValue GPRelNode = DAG.getNode(MipsISD::GPRel, MVT::i32, CP);
 578   //  SDValue GOT = DAG.getGLOBAL_OFFSET_TABLE(MVT::i32);
 579   //  ResNode = DAG.getNode(ISD::ADD, MVT::i32, GOT, GPRelNode);
 580
 581   if (getTargetMachine().getRelocationModel() != Reloc::PIC_) {
 582     SDValue CP = DAG.getTargetConstantPool(C, MVT::i32, N->getAlignment(),
 583                                       N->getOffset(), MipsII::MO_ABS_HILO);
 584     SDValue HiPart = DAG.getNode(MipsISD::Hi, dl, MVT::i32, CP);
 585     SDValue Lo = DAG.getNode(MipsISD::Lo, dl, MVT::i32, CP);
 586     ResNode = DAG.getNode(ISD::ADD, dl, MVT::i32, HiPart, Lo);
 587   } else {
 588     SDValue CP = DAG.getTargetConstantPool(C, MVT::i32, N->getAlignment(),
 589                                       N->getOffset(), MipsII::MO_GOT);
 590     SDValue Load = DAG.getLoad(MVT::i32, dl, DAG.getEntryNode(),
 591                                CP, NULL, 0, false, false, 0);
 592     SDValue Lo = DAG.getNode(MipsISD::Lo, dl, MVT::i32, CP);
 593     ResNode = DAG.getNode(ISD::ADD, dl, MVT::i32, Load, Lo);
 594   }
 595
 596   return ResNode;
 597 }
 598
 599 SDValue MipsTargetLowering::LowerVASTART(SDValue Op, SelectionDAG &DAG) {
 600   DebugLoc dl = Op.getDebugLoc();
 601   SDValue FI = DAG.getFrameIndex(VarArgsFrameIndex, getPointerTy());
 602
 603   // vastart just stores the address of the VarArgsFrameIndex slot into the
 604   // memory location argument.
 605   const Value *SV = cast<SrcValueSDNode>(Op.getOperand(2))->getValue();
 606   return DAG.getStore(Op.getOperand(0), dl, FI, Op.getOperand(1), SV, 0,
 607                       false, false, 0);
 608 }
 609
 610 //===----------------------------------------------------------------------===//
 611 //                      Calling Convention Implementation
 612 //===----------------------------------------------------------------------===//
 613
 614 #include "MipsGenCallingConv.inc"
 615
 616 //===----------------------------------------------------------------------===//
 617 // TODO: Implement a generic logic using tblgen that can support this.
 618 // Mips O32 ABI rules:
 619 // ---
 620 // i32 - Passed in A0, A1, A2, A3 and stack
 621 // f32 - Only passed in f32 registers if no int reg has been used yet to hold
 622 //       an argument. Otherwise, passed in A1, A2, A3 and stack.
 623 // f64 - Only passed in two aliased f32 registers if no int reg has been used
 624 //       yet to hold an argument. Otherwise, use A2, A3 and stack. If A1 is
 625 //       not used, it must be shadowed. If only A3 is avaiable, shadow it and
 626 //       go to stack.
 627 //===----------------------------------------------------------------------===//
 628
 629 static bool CC_MipsO32(unsigned ValNo, EVT ValVT,
 630                        EVT LocVT, CCValAssign::LocInfo LocInfo,
 631                        ISD::ArgFlagsTy ArgFlags, CCState &State) {
 632
 633   static const unsigned IntRegsSize=4, FloatRegsSize=2;
 634
 635   static const unsigned IntRegs[] = {
 636       Mips::A0, Mips::A1, Mips::A2, Mips::A3
 637   };
 638   static const unsigned F32Regs[] = {
 639       Mips::F12, Mips::F14
 640   };
 641   static const unsigned F64Regs[] = {
 642       Mips::D6, Mips::D7
 643   };
 644
 645   unsigned Reg=0;
 646   unsigned UnallocIntReg = State.getFirstUnallocated(IntRegs, IntRegsSize);
 647   bool IntRegUsed = (IntRegs[UnallocIntReg] != (unsigned (Mips::A0)));
 648
 649   // Promote i8 and i16
 650   if (LocVT == MVT::i8 || LocVT == MVT::i16) {
 651     LocVT = MVT::i32;
 652     if (ArgFlags.isSExt())
 653       LocInfo = CCValAssign::SExt;
 654     else if (ArgFlags.isZExt())
 655       LocInfo = CCValAssign::ZExt;
 656     else
 657       LocInfo = CCValAssign::AExt;
 658   }
 659
 660   if (ValVT == MVT::i32 || (ValVT == MVT::f32 && IntRegUsed)) {
 661     Reg = State.AllocateReg(IntRegs, IntRegsSize);
 662     IntRegUsed = true;
 663     LocVT = MVT::i32;
 664   }
 665
 666   if (ValVT.isFloatingPoint() && !IntRegUsed) {
 667     if (ValVT == MVT::f32)
 668       Reg = State.AllocateReg(F32Regs, FloatRegsSize);
 669     else
 670       Reg = State.AllocateReg(F64Regs, FloatRegsSize);
 671   }
 672
 673   if (ValVT == MVT::f64 && IntRegUsed) {
 674     if (UnallocIntReg != IntRegsSize) {
 675       // If we hit register A3 as the first not allocated, we must
 676       // mark it as allocated (shadow) and use the stack instead.
 677       if (IntRegs[UnallocIntReg] != (unsigned (Mips::A3)))
 678         Reg = Mips::A2;
 679       for (;UnallocIntReg < IntRegsSize; ++UnallocIntReg)
 680         State.AllocateReg(UnallocIntReg);
 681     }
 682     LocVT = MVT::i32;
 683   }
 684
 685   if (!Reg) {
 686     unsigned SizeInBytes = ValVT.getSizeInBits() >> 3;
 687     unsigned Offset = State.AllocateStack(SizeInBytes, SizeInBytes);
 688     State.addLoc(CCValAssign::getMem(ValNo, ValVT, Offset, LocVT, LocInfo));
 689   } else
 690     State.addLoc(CCValAssign::getReg(ValNo, ValVT, Reg, LocVT, LocInfo));
 691
 692   return false; // CC must always match
 693 }
 694
 695 static bool CC_MipsO32_VarArgs(unsigned ValNo, EVT ValVT,
 696                        EVT LocVT, CCValAssign::LocInfo LocInfo,
 697                        ISD::ArgFlagsTy ArgFlags, CCState &State) {
 698
 699   static const unsigned IntRegsSize=4;
 700
 701   static const unsigned IntRegs[] = {
 702       Mips::A0, Mips::A1, Mips::A2, Mips::A3
 703   };
 704
 705   // Promote i8 and i16
 706   if (LocVT == MVT::i8 || LocVT == MVT::i16) {
 707     LocVT = MVT::i32;
 708     if (ArgFlags.isSExt())
 709       LocInfo = CCValAssign::SExt;
 710     else if (ArgFlags.isZExt())
 711       LocInfo = CCValAssign::ZExt;
 712     else
 713       LocInfo = CCValAssign::AExt;
 714   }
 715
 716   if (ValVT == MVT::i32 || ValVT == MVT::f32) {
 717     if (unsigned Reg = State.AllocateReg(IntRegs, IntRegsSize)) {
 718       State.addLoc(CCValAssign::getReg(ValNo, ValVT, Reg, MVT::i32, LocInfo));
 719       return false;
 720     }
 721     unsigned Off = State.AllocateStack(4, 4);
 722     State.addLoc(CCValAssign::getMem(ValNo, ValVT, Off, LocVT, LocInfo));
 723     return false;
 724   }
 725
 726   unsigned UnallocIntReg = State.getFirstUnallocated(IntRegs, IntRegsSize);
 727   if (ValVT == MVT::f64) {
 728     if (IntRegs[UnallocIntReg] == (unsigned (Mips::A1))) {
 729       // A1 can't be used anymore, because 64 bit arguments
 730       // must be aligned when copied back to the caller stack
 731       State.AllocateReg(IntRegs, IntRegsSize);
 732       UnallocIntReg++;
 733     }
 734
 735     if (IntRegs[UnallocIntReg] == (unsigned (Mips::A0)) ||
 736         IntRegs[UnallocIntReg] == (unsigned (Mips::A2))) {
 737       unsigned Reg = State.AllocateReg(IntRegs, IntRegsSize);
 738       State.addLoc(CCValAssign::getReg(ValNo, ValVT, Reg, MVT::i32, LocInfo));
 739       // Shadow the next register so it can be used
 740       // later to get the other 32bit part.
 741       State.AllocateReg(IntRegs, IntRegsSize);
 742       return false;
 743     }
 744
 745     // Register is shadowed to preserve alignment, and the
 746     // argument goes to a stack location.
 747     if (UnallocIntReg != IntRegsSize)
 748       State.AllocateReg(IntRegs, IntRegsSize);
 749
 750     unsigned Off = State.AllocateStack(8, 8);
 751     State.addLoc(CCValAssign::getMem(ValNo, ValVT, Off, LocVT, LocInfo));
 752     return false;
 753   }
 754
 755   return true; // CC didn't match
 756 }
 757
 758 //===----------------------------------------------------------------------===//
 759 //                  Call Calling Convention Implementation
 760 //===----------------------------------------------------------------------===//
 761
 762 /// LowerCall - functions arguments are copied from virtual regs to
 763 /// (physical regs)/(stack frame), CALLSEQ_START and CALLSEQ_END are emitted.
 764 /// TODO: isTailCall.
 765 SDValue
 766 MipsTargetLowering::LowerCall(SDValue Chain, SDValue Callee,
 767                               CallingConv::ID CallConv, bool isVarArg,
 768                               bool &isTailCall,
 769                               const SmallVectorImpl<ISD::OutputArg> &Outs,
 770                               const SmallVectorImpl<ISD::InputArg> &Ins,
 771                               DebugLoc dl, SelectionDAG &DAG,
 772                               SmallVectorImpl<SDValue> &InVals) {
 773   // MIPs target does not yet support tail call optimization.
 774   isTailCall = false;
 775
 776   MachineFunction &MF = DAG.getMachineFunction();
 777   MachineFrameInfo *MFI = MF.getFrameInfo();
 778   bool IsPIC = getTargetMachine().getRelocationModel() == Reloc::PIC_;
 779
 780   // Analyze operands of the call, assigning locations to each operand.
 781   SmallVector<CCValAssign, 16> ArgLocs;
 782   CCState CCInfo(CallConv, isVarArg, getTargetMachine(), ArgLocs,
 783                  *DAG.getContext());
 784
 785   // To meet O32 ABI, Mips must always allocate 16 bytes on
 786   // the stack (even if less than 4 are used as arguments)
 787   if (Subtarget->isABI_O32()) {
 788     int VTsize = EVT(MVT::i32).getSizeInBits()/8;
 789     MFI->CreateFixedObject(VTsize, (VTsize*3), true, false);
 790     CCInfo.AnalyzeCallOperands(Outs,
 791                      isVarArg ? CC_MipsO32_VarArgs : CC_MipsO32);
 792   } else
 793     CCInfo.AnalyzeCallOperands(Outs, CC_Mips);
 794
 795   // Get a count of how many bytes are to be pushed on the stack.
 796   unsigned NumBytes = CCInfo.getNextStackOffset();
 797   Chain = DAG.getCALLSEQ_START(Chain, DAG.getIntPtrConstant(NumBytes, true));
 798
 799   // With EABI is it possible to have 16 args on registers.
 800   SmallVector<std::pair<unsigned, SDValue>, 16> RegsToPass;
 801   SmallVector<SDValue, 8> MemOpChains;
 802
 803   // First/LastArgStackLoc contains the first/last
 804   // "at stack" argument location.
 805   int LastArgStackLoc = 0;
 806   unsigned FirstStackArgLoc = (Subtarget->isABI_EABI() ? 0 : 16);
 807
 808   // Walk the register/memloc assignments, inserting copies/loads.
 809   for (unsigned i = 0, e = ArgLocs.size(); i != e; ++i) {
 810     SDValue Arg = Outs[i].Val;
 811     CCValAssign &VA = ArgLocs[i];
 812
 813     // Promote the value if needed.
 814     switch (VA.getLocInfo()) {
 815     default: llvm_unreachable("Unknown loc info!");
 816     case CCValAssign::Full:
 817       if (Subtarget->isABI_O32() && VA.isRegLoc()) {
 818         if (VA.getValVT() == MVT::f32 && VA.getLocVT() == MVT::i32)
 819           Arg = DAG.getNode(ISD::BIT_CONVERT, dl, MVT::i32, Arg);
 820         if (VA.getValVT() == MVT::f64 && VA.getLocVT() == MVT::i32) {
 821           Arg = DAG.getNode(ISD::BIT_CONVERT, dl, MVT::i64, Arg);
 822           SDValue Lo = DAG.getNode(ISD::EXTRACT_ELEMENT, dl, MVT::i32, Arg,
 823                                    DAG.getConstant(0, getPointerTy()));
 824           SDValue Hi = DAG.getNode(ISD::EXTRACT_ELEMENT, dl, MVT::i32, Arg,
 825                                    DAG.getConstant(1, getPointerTy()));
 826           RegsToPass.push_back(std::make_pair(VA.getLocReg(), Lo));
 827           RegsToPass.push_back(std::make_pair(VA.getLocReg()+1, Hi));
 828           continue;
 829         }
 830       }
 831       break;
 832     case CCValAssign::SExt:
 833       Arg = DAG.getNode(ISD::SIGN_EXTEND, dl, VA.getLocVT(), Arg);
 834       break;
 835     case CCValAssign::ZExt:
 836       Arg = DAG.getNode(ISD::ZERO_EXTEND, dl, VA.getLocVT(), Arg);
 837       break;
 838     case CCValAssign::AExt:
 839       Arg = DAG.getNode(ISD::ANY_EXTEND, dl, VA.getLocVT(), Arg);
 840       break;
 841     }
 842
 843     // Arguments that can be passed on register must be kept at
 844     // RegsToPass vector
 845     if (VA.isRegLoc()) {
 846       RegsToPass.push_back(std::make_pair(VA.getLocReg(), Arg));
 847       continue;
 848     }
 849
 850     // Register can't get to this point...
 851     assert(VA.isMemLoc());
 852
 853     // Create the frame index object for this incoming parameter
 854     // This guarantees that when allocating Local Area the firsts
 855     // 16 bytes which are alwayes reserved won't be overwritten
 856     // if O32 ABI is used. For EABI the first address is zero.
 857     LastArgStackLoc = (FirstStackArgLoc + VA.getLocMemOffset());
 858     int FI = MFI->CreateFixedObject(VA.getValVT().getSizeInBits()/8,
 859                                     LastArgStackLoc, true, false);
 860
 861     SDValue PtrOff = DAG.getFrameIndex(FI,getPointerTy());
 862
 863     // emit ISD::STORE whichs stores the
 864     // parameter value to a stack Location
 865     MemOpChains.push_back(DAG.getStore(Chain, dl, Arg, PtrOff, NULL, 0,
 866                                        false, false, 0));
 867   }
 868
 869   // Transform all store nodes into one single node because all store
 870   // nodes are independent of each other.
 871   if (!MemOpChains.empty())
 872     Chain = DAG.getNode(ISD::TokenFactor, dl, MVT::Other,
 873                         &MemOpChains[0], MemOpChains.size());
 874
 875   // Build a sequence of copy-to-reg nodes chained together with token
 876   // chain and flag operands which copy the outgoing args into registers.
 877   // The InFlag in necessary since all emited instructions must be
 878   // stuck together.
 879   SDValue InFlag;
 880   for (unsigned i = 0, e = RegsToPass.size(); i != e; ++i) {
 881     Chain = DAG.getCopyToReg(Chain, dl, RegsToPass[i].first,
 882                              RegsToPass[i].second, InFlag);
 883     InFlag = Chain.getValue(1);
 884   }
 885
 886   // If the callee is a GlobalAddress/ExternalSymbol node (quite common, every
 887   // direct call is) turn it into a TargetGlobalAddress/TargetExternalSymbol
 888   // node so that legalize doesn't hack it.
 889   unsigned char OpFlag = IsPIC ? MipsII::MO_GOT_CALL : MipsII::MO_NO_FLAG;
 890   if (GlobalAddressSDNode *G = dyn_cast<GlobalAddressSDNode>(Callee))
 891     Callee = DAG.getTargetGlobalAddress(G->getGlobal(),
 892                                 getPointerTy(), 0, OpFlag);
 893   else if (ExternalSymbolSDNode *S = dyn_cast<ExternalSymbolSDNode>(Callee))
 894     Callee = DAG.getTargetExternalSymbol(S->getSymbol(),
 895                                 getPointerTy(), OpFlag);
 896
 897   // MipsJmpLink = #chain, #target_address, #opt_in_flags...
 898   //             = Chain, Callee, Reg#1, Reg#2, ...
 899   //
 900   // Returns a chain & a flag for retval copy to use.
 901   SDVTList NodeTys = DAG.getVTList(MVT::Other, MVT::Flag);
 902   SmallVector<SDValue, 8> Ops;
 903   Ops.push_back(Chain);
 904   Ops.push_back(Callee);
 905
 906   // Add argument registers to the end of the list so that they are
 907   // known live into the call.
 908   for (unsigned i = 0, e = RegsToPass.size(); i != e; ++i)
 909     Ops.push_back(DAG.getRegister(RegsToPass[i].first,
 910                                   RegsToPass[i].second.getValueType()));
 911
 912   if (InFlag.getNode())
 913     Ops.push_back(InFlag);
 914
 915   Chain  = DAG.getNode(MipsISD::JmpLink, dl, NodeTys, &Ops[0], Ops.size());
 916   InFlag = Chain.getValue(1);
 917
 918   // Create a stack location to hold GP when PIC is used. This stack
 919   // location is used on function prologue to save GP and also after all
 920   // emited CALL's to restore GP.
 921   if (IsPIC) {
 922       // Function can have an arbitrary number of calls, so
 923       // hold the LastArgStackLoc with the biggest offset.
 924       int FI;
 925       MipsFunctionInfo *MipsFI = MF.getInfo<MipsFunctionInfo>();
 926       if (LastArgStackLoc >= MipsFI->getGPStackOffset()) {
 927         LastArgStackLoc = (!LastArgStackLoc) ? (16) : (LastArgStackLoc+4);
 928         // Create the frame index only once. SPOffset here can be anything
 929         // (this will be fixed on processFunctionBeforeFrameFinalized)
 930         if (MipsFI->getGPStackOffset() == -1) {
 931           FI = MFI->CreateFixedObject(4, 0, true, false);
 932           MipsFI->setGPFI(FI);
 933         }
 934         MipsFI->setGPStackOffset(LastArgStackLoc);
 935       }
 936
 937       // Reload GP value.
 938       FI = MipsFI->getGPFI();
 939       SDValue FIN = DAG.getFrameIndex(FI,getPointerTy());
 940       SDValue GPLoad = DAG.getLoad(MVT::i32, dl, Chain, FIN, NULL, 0,
 941                                    false, false, 0);
 942       Chain = GPLoad.getValue(1);
 943       Chain = DAG.getCopyToReg(Chain, dl, DAG.getRegister(Mips::GP, MVT::i32),
 944                                GPLoad, SDValue(0,0));
 945       InFlag = Chain.getValue(1);
 946   }
 947
 948   // Create the CALLSEQ_END node.
 949   Chain = DAG.getCALLSEQ_END(Chain, DAG.getIntPtrConstant(NumBytes, true),
 950                              DAG.getIntPtrConstant(0, true), InFlag);
 951   InFlag = Chain.getValue(1);
 952
 953   // Handle result values, copying them out of physregs into vregs that we
 954   // return.
 955   return LowerCallResult(Chain, InFlag, CallConv, isVarArg,
 956                          Ins, dl, DAG, InVals);
 957 }
 958
 959 /// LowerCallResult - Lower the result values of a call into the
 960 /// appropriate copies out of appropriate physical registers.
 961 SDValue
 962 MipsTargetLowering::LowerCallResult(SDValue Chain, SDValue InFlag,
 963                                     CallingConv::ID CallConv, bool isVarArg,
 964                                     const SmallVectorImpl<ISD::InputArg> &Ins,
 965                                     DebugLoc dl, SelectionDAG &DAG,
 966                                     SmallVectorImpl<SDValue> &InVals) {
 967
 968   // Assign locations to each value returned by this call.
 969   SmallVector<CCValAssign, 16> RVLocs;
 970   CCState CCInfo(CallConv, isVarArg, getTargetMachine(),
 971                  RVLocs, *DAG.getContext());
 972
 973   CCInfo.AnalyzeCallResult(Ins, RetCC_Mips);
 974
 975   // Copy all of the result registers out of their specified physreg.
 976   for (unsigned i = 0; i != RVLocs.size(); ++i) {
 977     Chain = DAG.getCopyFromReg(Chain, dl, RVLocs[i].getLocReg(),
 978                                RVLocs[i].getValVT(), InFlag).getValue(1);
 979     InFlag = Chain.getValue(2);
 980     InVals.push_back(Chain.getValue(0));
 981   }
 982
 983   return Chain;
 984 }
 985
 986 //===----------------------------------------------------------------------===//
 987 //             Formal Arguments Calling Convention Implementation
 988 //===----------------------------------------------------------------------===//
 989
 990 /// LowerFormalArguments - transform physical registers into virtual registers
 991 /// and generate load operations for arguments places on the stack.
 992 SDValue
 993 MipsTargetLowering::LowerFormalArguments(SDValue Chain,
 994                                         CallingConv::ID CallConv, bool isVarArg,
 995                                         const SmallVectorImpl<ISD::InputArg>
 996                                         &Ins,
 997                                         DebugLoc dl, SelectionDAG &DAG,
 998                                         SmallVectorImpl<SDValue> &InVals) {
 999
1000   MachineFunction &MF = DAG.getMachineFunction();
1001   MachineFrameInfo *MFI = MF.getFrameInfo();
1002   MipsFunctionInfo *MipsFI = MF.getInfo<MipsFunctionInfo>();
1003
1004   unsigned StackReg = MF.getTarget().getRegisterInfo()->getFrameRegister(MF);
1005   VarArgsFrameIndex = 0;
1006
1007   // Used with vargs to acumulate store chains.
1008   std::vector<SDValue> OutChains;
1009
1010   // Keep track of the last register used for arguments
1011   unsigned ArgRegEnd = 0;
1012
1013   // Assign locations to all of the incoming arguments.
1014   SmallVector<CCValAssign, 16> ArgLocs;
1015   CCState CCInfo(CallConv, isVarArg, getTargetMachine(),
1016                  ArgLocs, *DAG.getContext());
1017
1018   if (Subtarget->isABI_O32())
1019     CCInfo.AnalyzeFormalArguments(Ins,
1020                         isVarArg ? CC_MipsO32_VarArgs : CC_MipsO32);
1021   else
1022     CCInfo.AnalyzeFormalArguments(Ins, CC_Mips);
1023
1024   SDValue StackPtr;
1025
1026   unsigned FirstStackArgLoc = (Subtarget->isABI_EABI() ? 0 : 16);
1027
1028   for (unsigned i = 0, e = ArgLocs.size(); i != e; ++i) {
1029     CCValAssign &VA = ArgLocs[i];
1030
1031     // Arguments stored on registers
1032     if (VA.isRegLoc()) {
1033       EVT RegVT = VA.getLocVT();
1034       ArgRegEnd = VA.getLocReg();
1035       TargetRegisterClass *RC = 0;
1036
1037       if (RegVT == MVT::i32)
1038         RC = Mips::CPURegsRegisterClass;
1039       else if (RegVT == MVT::f32)
1040         RC = Mips::FGR32RegisterClass;
1041       else if (RegVT == MVT::f64) {
1042         if (!Subtarget->isSingleFloat())
1043           RC = Mips::AFGR64RegisterClass;
1044       } else
1045         llvm_unreachable("RegVT not supported by FormalArguments Lowering");
1046
1047       // Transform the arguments stored on
1048       // physical registers into virtual ones
1049       unsigned Reg = AddLiveIn(DAG.getMachineFunction(), ArgRegEnd, RC);
1050       SDValue ArgValue = DAG.getCopyFromReg(Chain, dl, Reg, RegVT);
1051
1052       // If this is an 8 or 16-bit value, it has been passed promoted
1053       // to 32 bits.  Insert an assert[sz]ext to capture this, then
1054       // truncate to the right size.
1055       if (VA.getLocInfo() != CCValAssign::Full) {
1056         unsigned Opcode = 0;
1057         if (VA.getLocInfo() == CCValAssign::SExt)
1058           Opcode = ISD::AssertSext;
1059         else if (VA.getLocInfo() == CCValAssign::ZExt)
1060           Opcode = ISD::AssertZext;
1061         if (Opcode)
1062           ArgValue = DAG.getNode(Opcode, dl, RegVT, ArgValue,
1063                                  DAG.getValueType(VA.getValVT()));
1064         ArgValue = DAG.getNode(ISD::TRUNCATE, dl, VA.getValVT(), ArgValue);
1065       }
1066
1067       // Handle O32 ABI cases: i32->f32 and (i32,i32)->f64
1068       if (Subtarget->isABI_O32()) {
1069         if (RegVT == MVT::i32 && VA.getValVT() == MVT::f32)
1070           ArgValue = DAG.getNode(ISD::BIT_CONVERT, dl, MVT::f32, ArgValue);
1071         if (RegVT == MVT::i32 && VA.getValVT() == MVT::f64) {
1072           unsigned Reg2 = AddLiveIn(DAG.getMachineFunction(),
1073                                     VA.getLocReg()+1, RC);
1074           SDValue ArgValue2 = DAG.getCopyFromReg(Chain, dl, Reg2, RegVT);
1075           SDValue Hi = DAG.getNode(ISD::BIT_CONVERT, dl, MVT::f32, ArgValue);
1076           SDValue Lo = DAG.getNode(ISD::BIT_CONVERT, dl, MVT::f32, ArgValue2);
1077           ArgValue = DAG.getNode(ISD::BUILD_PAIR, dl, MVT::f64, Lo, Hi);
1078         }
1079       }
1080
1081       InVals.push_back(ArgValue);
1082     } else { // VA.isRegLoc()
1083
1084       // sanity check
1085       assert(VA.isMemLoc());
1086
1087       // The last argument is not a register anymore
1088       ArgRegEnd = 0;
1089
1090       // The stack pointer offset is relative to the caller stack frame.
1091       // Since the real stack size is unknown here, a negative SPOffset
1092       // is used so there's a way to adjust these offsets when the stack
1093       // size get known (on EliminateFrameIndex). A dummy SPOffset is
1094       // used instead of a direct negative address (which is recorded to
1095       // be used on emitPrologue) to avoid mis-calc of the first stack
1096       // offset on PEI::calculateFrameObjectOffsets.
1097       // Arguments are always 32-bit.
1098       unsigned ArgSize = VA.getLocVT().getSizeInBits()/8;
1099       int FI = MFI->CreateFixedObject(ArgSize, 0, true, false);
1100       MipsFI->recordLoadArgsFI(FI, -(ArgSize+
1101         (FirstStackArgLoc + VA.getLocMemOffset())));
1102
1103       // Create load nodes to retrieve arguments from the stack
1104       SDValue FIN = DAG.getFrameIndex(FI, getPointerTy());
1105       InVals.push_back(DAG.getLoad(VA.getValVT(), dl, Chain, FIN, NULL, 0,
1106                                    false, false, 0));
1107     }
1108   }
1109
1110   // The mips ABIs for returning structs by value requires that we copy
1111   // the sret argument into $v0 for the return. Save the argument into
1112   // a virtual register so that we can access it from the return points.
1113   if (DAG.getMachineFunction().getFunction()->hasStructRetAttr()) {
1114     unsigned Reg = MipsFI->getSRetReturnReg();
1115     if (!Reg) {
1116       Reg = MF.getRegInfo().createVirtualRegister(getRegClassFor(MVT::i32));
1117       MipsFI->setSRetReturnReg(Reg);
1118     }
1119     SDValue Copy = DAG.getCopyToReg(DAG.getEntryNode(), dl, Reg, InVals[0]);
1120     Chain = DAG.getNode(ISD::TokenFactor, dl, MVT::Other, Copy, Chain);
1121   }
1122
1123   // To meet ABI, when VARARGS are passed on registers, the registers
1124   // must have their values written to the caller stack frame. If the last
1125   // argument was placed in the stack, there's no need to save any register.
1126   if ((isVarArg) && (Subtarget->isABI_O32() && ArgRegEnd)) {
1127     if (StackPtr.getNode() == 0)
1128       StackPtr = DAG.getRegister(StackReg, getPointerTy());
1129
1130     // The last register argument that must be saved is Mips::A3
1131     TargetRegisterClass *RC = Mips::CPURegsRegisterClass;
1132     unsigned StackLoc = ArgLocs.size()-1;
1133
1134     for (++ArgRegEnd; ArgRegEnd <= Mips::A3; ++ArgRegEnd, ++StackLoc) {
1135       unsigned Reg = AddLiveIn(DAG.getMachineFunction(), ArgRegEnd, RC);
1136       SDValue ArgValue = DAG.getCopyFromReg(Chain, dl, Reg, MVT::i32);
1137
1138       int FI = MFI->CreateFixedObject(4, 0, true, false);
1139       MipsFI->recordStoreVarArgsFI(FI, -(4+(StackLoc*4)));
1140       SDValue PtrOff = DAG.getFrameIndex(FI, getPointerTy());
1141       OutChains.push_back(DAG.getStore(Chain, dl, ArgValue, PtrOff, NULL, 0,
1142                                        false, false, 0));
1143
1144       // Record the frame index of the first variable argument
1145       // which is a value necessary to VASTART.
1146       if (!VarArgsFrameIndex)
1147         VarArgsFrameIndex = FI;
1148     }
1149   }
1150
1151   // All stores are grouped in one node to allow the matching between
1152   // the size of Ins and InVals. This only happens when on varg functions
1153   if (!OutChains.empty()) {
1154     OutChains.push_back(Chain);
1155     Chain = DAG.getNode(ISD::TokenFactor, dl, MVT::Other,
1156                         &OutChains[0], OutChains.size());
1157   }
1158
1159   return Chain;
1160 }
1161
1162 //===----------------------------------------------------------------------===//
1163 //               Return Value Calling Convention Implementation
1164 //===----------------------------------------------------------------------===//
1165
1166 SDValue
1167 MipsTargetLowering::LowerReturn(SDValue Chain,
1168                                 CallingConv::ID CallConv, bool isVarArg,
1169                                 const SmallVectorImpl<ISD::OutputArg> &Outs,
1170                                 DebugLoc dl, SelectionDAG &DAG) {
1171
1172   // CCValAssign - represent the assignment of
1173   // the return value to a location
1174   SmallVector<CCValAssign, 16> RVLocs;
1175
1176   // CCState - Info about the registers and stack slot.
1177   CCState CCInfo(CallConv, isVarArg, getTargetMachine(),
1178                  RVLocs, *DAG.getContext());
1179
1180   // Analize return values.
1181   CCInfo.AnalyzeReturn(Outs, RetCC_Mips);
1182
1183   // If this is the first return lowered for this function, add
1184   // the regs to the liveout set for the function.
1185   if (DAG.getMachineFunction().getRegInfo().liveout_empty()) {
1186     for (unsigned i = 0; i != RVLocs.size(); ++i)
1187       if (RVLocs[i].isRegLoc())
1188         DAG.getMachineFunction().getRegInfo().addLiveOut(RVLocs[i].getLocReg());
1189   }
1190
1191   SDValue Flag;
1192
1193   // Copy the result values into the output registers.
1194   for (unsigned i = 0; i != RVLocs.size(); ++i) {
1195     CCValAssign &VA = RVLocs[i];
1196     assert(VA.isRegLoc() && "Can only return in registers!");
1197
1198     Chain = DAG.getCopyToReg(Chain, dl, VA.getLocReg(),
1199                              Outs[i].Val, Flag);
1200
1201     // guarantee that all emitted copies are
1202     // stuck together, avoiding something bad
1203     Flag = Chain.getValue(1);
1204   }
1205
1206   // The mips ABIs for returning structs by value requires that we copy
1207   // the sret argument into $v0 for the return. We saved the argument into
1208   // a virtual register in the entry block, so now we copy the value out
1209   // and into $v0.
1210   if (DAG.getMachineFunction().getFunction()->hasStructRetAttr()) {
1211     MachineFunction &MF      = DAG.getMachineFunction();
1212     MipsFunctionInfo *MipsFI = MF.getInfo<MipsFunctionInfo>();
1213     unsigned Reg = MipsFI->getSRetReturnReg();
1214
1215     if (!Reg)
1216       llvm_unreachable("sret virtual register not created in the entry block");
1217     SDValue Val = DAG.getCopyFromReg(Chain, dl, Reg, getPointerTy());
1218
1219     Chain = DAG.getCopyToReg(Chain, dl, Mips::V0, Val, Flag);
1220     Flag = Chain.getValue(1);
1221   }
1222
1223   // Return on Mips is always a "jr $ra"
1224   if (Flag.getNode())
1225     return DAG.getNode(MipsISD::Ret, dl, MVT::Other,
1226                        Chain, DAG.getRegister(Mips::RA, MVT::i32), Flag);
1227   else // Return Void
1228     return DAG.getNode(MipsISD::Ret, dl, MVT::Other,
1229                        Chain, DAG.getRegister(Mips::RA, MVT::i32));
1230 }
1231
1232 //===----------------------------------------------------------------------===//
1233 //                           Mips Inline Assembly Support
1234 //===----------------------------------------------------------------------===//
1235
1236 /// getConstraintType - Given a constraint letter, return the type of
1237 /// constraint it is for this target.
1238 MipsTargetLowering::ConstraintType MipsTargetLowering::
1239 getConstraintType(const std::string &Constraint) const
1240 {
1241   // Mips specific constrainy
1242   // GCC config/mips/constraints.md
1243   //
1244   // 'd' : An address register. Equivalent to r
1245   //       unless generating MIPS16 code.
1246   // 'y' : Equivalent to r; retained for
1247   //       backwards compatibility.
1248   // 'f' : Floating Point registers.
1249   if (Constraint.size() == 1) {
1250     switch (Constraint[0]) {
1251       default : break;
1252       case 'd':
1253       case 'y':
1254       case 'f':
1255         return C_RegisterClass;
1256         break;
1257     }
1258   }
1259   return TargetLowering::getConstraintType(Constraint);
1260 }
1261
1262 /// getRegClassForInlineAsmConstraint - Given a constraint letter (e.g. "r"),
1263 /// return a list of registers that can be used to satisfy the constraint.
1264 /// This should only be used for C_RegisterClass constraints.
1265 std::pair<unsigned, const TargetRegisterClass*> MipsTargetLowering::
1266 getRegForInlineAsmConstraint(const std::string &Constraint, EVT VT) const
1267 {
1268   if (Constraint.size() == 1) {
1269     switch (Constraint[0]) {
1270     case 'r':
1271       return std::make_pair(0U, Mips::CPURegsRegisterClass);
1272     case 'f':
1273       if (VT == MVT::f32)
1274         return std::make_pair(0U, Mips::FGR32RegisterClass);
1275       if (VT == MVT::f64)
1276         if ((!Subtarget->isSingleFloat()) && (!Subtarget->isFP64bit()))
1277           return std::make_pair(0U, Mips::AFGR64RegisterClass);
1278     }
1279   }
1280   return TargetLowering::getRegForInlineAsmConstraint(Constraint, VT);
1281 }
1282
1283 /// Given a register class constraint, like 'r', if this corresponds directly
1284 /// to an LLVM register class, return a register of 0 and the register class
1285 /// pointer.
1286 std::vector<unsigned> MipsTargetLowering::
1287 getRegClassForInlineAsmConstraint(const std::string &Constraint,
1288                                   EVT VT) const
1289 {
1290   if (Constraint.size() != 1)
1291     return std::vector<unsigned>();
1292
1293   switch (Constraint[0]) {
1294     default : break;
1295     case 'r':
1296     // GCC Mips Constraint Letters
1297     case 'd':
1298     case 'y':
1299       return make_vector<unsigned>(Mips::T0, Mips::T1, Mips::T2, Mips::T3,
1300              Mips::T4, Mips::T5, Mips::T6, Mips::T7, Mips::S0, Mips::S1,
1301              Mips::S2, Mips::S3, Mips::S4, Mips::S5, Mips::S6, Mips::S7,
1302              Mips::T8, 0);
1303
1304     case 'f':
1305       if (VT == MVT::f32) {
1306         if (Subtarget->isSingleFloat())
1307           return make_vector<unsigned>(Mips::F2, Mips::F3, Mips::F4, Mips::F5,
1308                  Mips::F6, Mips::F7, Mips::F8, Mips::F9, Mips::F10, Mips::F11,
1309                  Mips::F20, Mips::F21, Mips::F22, Mips::F23, Mips::F24,
1310                  Mips::F25, Mips::F26, Mips::F27, Mips::F28, Mips::F29,
1311                  Mips::F30, Mips::F31, 0);
1312         else
1313           return make_vector<unsigned>(Mips::F2, Mips::F4, Mips::F6, Mips::F8,
1314                  Mips::F10, Mips::F20, Mips::F22, Mips::F24, Mips::F26,
1315                  Mips::F28, Mips::F30, 0);
1316       }
1317
1318       if (VT == MVT::f64)
1319         if ((!Subtarget->isSingleFloat()) && (!Subtarget->isFP64bit()))
1320           return make_vector<unsigned>(Mips::D1, Mips::D2, Mips::D3, Mips::D4,
1321                  Mips::D5, Mips::D10, Mips::D11, Mips::D12, Mips::D13,
1322                  Mips::D14, Mips::D15, 0);
1323   }
1324   return std::vector<unsigned>();
1325 }
1326
1327 bool
1328 MipsTargetLowering::isOffsetFoldingLegal(const GlobalAddressSDNode *GA) const {
1329   // The Mips target isn't yet aware of offsets.
1330   return false;
1331 }
1332
1333 bool MipsTargetLowering::isFPImmLegal(const APFloat &Imm, EVT VT) const {
1334   if (VT != MVT::f32 && VT != MVT::f64)
1335     return false;
1336   return Imm.isZero();
1337 }