Optimize the creation of mapping symbols.
[oota-llvm.git] / lib / Target / ARM / MCTargetDesc / ARMELFStreamer.cpp
1 //===- lib/MC/ARMELFStreamer.cpp - ELF Object Output for ARM --------------===//
2 //
3 //                     The LLVM Compiler Infrastructure
4 //
5 // This file is distributed under the University of Illinois Open Source
6 // License. See LICENSE.TXT for details.
7 //
8 //===----------------------------------------------------------------------===//
9 //
10 // This file assembles .s files and emits ARM ELF .o object files. Different
11 // from generic ELF streamer in emitting mapping symbols ($a, $t and $d) to
12 // delimit regions of data and code.
13 //
14 //===----------------------------------------------------------------------===//
15
16 #include "ARMRegisterInfo.h"
17 #include "ARMUnwindOpAsm.h"
18 #include "llvm/ADT/StringExtras.h"
19 #include "llvm/ADT/Twine.h"
20 #include "llvm/MC/MCAsmBackend.h"
21 #include "llvm/MC/MCAsmInfo.h"
22 #include "llvm/MC/MCAssembler.h"
23 #include "llvm/MC/MCCodeEmitter.h"
24 #include "llvm/MC/MCContext.h"
25 #include "llvm/MC/MCELFStreamer.h"
26 #include "llvm/MC/MCExpr.h"
27 #include "llvm/MC/MCInst.h"
28 #include "llvm/MC/MCInstPrinter.h"
29 #include "llvm/MC/MCObjectFileInfo.h"
30 #include "llvm/MC/MCObjectStreamer.h"
31 #include "llvm/MC/MCRegisterInfo.h"
32 #include "llvm/MC/MCSection.h"
33 #include "llvm/MC/MCSectionELF.h"
34 #include "llvm/MC/MCStreamer.h"
35 #include "llvm/MC/MCSymbolELF.h"
36 #include "llvm/MC/MCValue.h"
37 #include "llvm/Support/ARMBuildAttributes.h"
38 #include "llvm/Support/ARMEHABI.h"
39 #include "llvm/Support/TargetParser.h"
40 #include "llvm/Support/Debug.h"
41 #include "llvm/Support/ELF.h"
42 #include "llvm/Support/FormattedStream.h"
43 #include "llvm/Support/LEB128.h"
44 #include "llvm/Support/raw_ostream.h"
45 #include <algorithm>
46
47 using namespace llvm;
48
49 static std::string GetAEABIUnwindPersonalityName(unsigned Index) {
50   assert(Index < ARM::EHABI::NUM_PERSONALITY_INDEX &&
51          "Invalid personality index");
52   return (Twine("__aeabi_unwind_cpp_pr") + Twine(Index)).str();
53 }
54
55 namespace {
56
57 class ARMELFStreamer;
58
59 class ARMTargetAsmStreamer : public ARMTargetStreamer {
60   formatted_raw_ostream &OS;
61   MCInstPrinter &InstPrinter;
62   bool IsVerboseAsm;
63
64   void emitFnStart() override;
65   void emitFnEnd() override;
66   void emitCantUnwind() override;
67   void emitPersonality(const MCSymbol *Personality) override;
68   void emitPersonalityIndex(unsigned Index) override;
69   void emitHandlerData() override;
70   void emitSetFP(unsigned FpReg, unsigned SpReg, int64_t Offset = 0) override;
71   void emitMovSP(unsigned Reg, int64_t Offset = 0) override;
72   void emitPad(int64_t Offset) override;
73   void emitRegSave(const SmallVectorImpl<unsigned> &RegList,
74                    bool isVector) override;
75   void emitUnwindRaw(int64_t Offset,
76                      const SmallVectorImpl<uint8_t> &Opcodes) override;
77
78   void switchVendor(StringRef Vendor) override;
79   void emitAttribute(unsigned Attribute, unsigned Value) override;
80   void emitTextAttribute(unsigned Attribute, StringRef String) override;
81   void emitIntTextAttribute(unsigned Attribute, unsigned IntValue,
82                             StringRef StrinValue) override;
83   void emitArch(unsigned Arch) override;
84   void emitArchExtension(unsigned ArchExt) override;
85   void emitObjectArch(unsigned Arch) override;
86   void emitFPU(unsigned FPU) override;
87   void emitInst(uint32_t Inst, char Suffix = '\0') override;
88   void finishAttributeSection() override;
89
90   void AnnotateTLSDescriptorSequence(const MCSymbolRefExpr *SRE) override;
91   void emitThumbSet(MCSymbol *Symbol, const MCExpr *Value) override;
92
93 public:
94   ARMTargetAsmStreamer(MCStreamer &S, formatted_raw_ostream &OS,
95                        MCInstPrinter &InstPrinter, bool VerboseAsm);
96 };
97
98 ARMTargetAsmStreamer::ARMTargetAsmStreamer(MCStreamer &S,
99                                            formatted_raw_ostream &OS,
100                                            MCInstPrinter &InstPrinter,
101                                            bool VerboseAsm)
102     : ARMTargetStreamer(S), OS(OS), InstPrinter(InstPrinter),
103       IsVerboseAsm(VerboseAsm) {}
104 void ARMTargetAsmStreamer::emitFnStart() { OS << "\t.fnstart\n"; }
105 void ARMTargetAsmStreamer::emitFnEnd() { OS << "\t.fnend\n"; }
106 void ARMTargetAsmStreamer::emitCantUnwind() { OS << "\t.cantunwind\n"; }
107 void ARMTargetAsmStreamer::emitPersonality(const MCSymbol *Personality) {
108   OS << "\t.personality " << Personality->getName() << '\n';
109 }
110 void ARMTargetAsmStreamer::emitPersonalityIndex(unsigned Index) {
111   OS << "\t.personalityindex " << Index << '\n';
112 }
113 void ARMTargetAsmStreamer::emitHandlerData() { OS << "\t.handlerdata\n"; }
114 void ARMTargetAsmStreamer::emitSetFP(unsigned FpReg, unsigned SpReg,
115                                      int64_t Offset) {
116   OS << "\t.setfp\t";
117   InstPrinter.printRegName(OS, FpReg);
118   OS << ", ";
119   InstPrinter.printRegName(OS, SpReg);
120   if (Offset)
121     OS << ", #" << Offset;
122   OS << '\n';
123 }
124 void ARMTargetAsmStreamer::emitMovSP(unsigned Reg, int64_t Offset) {
125   assert((Reg != ARM::SP && Reg != ARM::PC) &&
126          "the operand of .movsp cannot be either sp or pc");
127
128   OS << "\t.movsp\t";
129   InstPrinter.printRegName(OS, Reg);
130   if (Offset)
131     OS << ", #" << Offset;
132   OS << '\n';
133 }
134 void ARMTargetAsmStreamer::emitPad(int64_t Offset) {
135   OS << "\t.pad\t#" << Offset << '\n';
136 }
137 void ARMTargetAsmStreamer::emitRegSave(const SmallVectorImpl<unsigned> &RegList,
138                                        bool isVector) {
139   assert(RegList.size() && "RegList should not be empty");
140   if (isVector)
141     OS << "\t.vsave\t{";
142   else
143     OS << "\t.save\t{";
144
145   InstPrinter.printRegName(OS, RegList[0]);
146
147   for (unsigned i = 1, e = RegList.size(); i != e; ++i) {
148     OS << ", ";
149     InstPrinter.printRegName(OS, RegList[i]);
150   }
151
152   OS << "}\n";
153 }
154 void ARMTargetAsmStreamer::switchVendor(StringRef Vendor) {
155 }
156 void ARMTargetAsmStreamer::emitAttribute(unsigned Attribute, unsigned Value) {
157   OS << "\t.eabi_attribute\t" << Attribute << ", " << Twine(Value);
158   if (IsVerboseAsm) {
159     StringRef Name = ARMBuildAttrs::AttrTypeAsString(Attribute);
160     if (!Name.empty())
161       OS << "\t@ " << Name;
162   }
163   OS << "\n";
164 }
165 void ARMTargetAsmStreamer::emitTextAttribute(unsigned Attribute,
166                                              StringRef String) {
167   switch (Attribute) {
168   case ARMBuildAttrs::CPU_name:
169     OS << "\t.cpu\t" << String.lower();
170     break;
171   default:
172     OS << "\t.eabi_attribute\t" << Attribute << ", \"" << String << "\"";
173     if (IsVerboseAsm) {
174       StringRef Name = ARMBuildAttrs::AttrTypeAsString(Attribute);
175       if (!Name.empty())
176         OS << "\t@ " << Name;
177     }
178     break;
179   }
180   OS << "\n";
181 }
182 void ARMTargetAsmStreamer::emitIntTextAttribute(unsigned Attribute,
183                                                 unsigned IntValue,
184                                                 StringRef StringValue) {
185   switch (Attribute) {
186   default: llvm_unreachable("unsupported multi-value attribute in asm mode");
187   case ARMBuildAttrs::compatibility:
188     OS << "\t.eabi_attribute\t" << Attribute << ", " << IntValue;
189     if (!StringValue.empty())
190       OS << ", \"" << StringValue << "\"";
191     if (IsVerboseAsm)
192       OS << "\t@ " << ARMBuildAttrs::AttrTypeAsString(Attribute);
193     break;
194   }
195   OS << "\n";
196 }
197 void ARMTargetAsmStreamer::emitArch(unsigned Arch) {
198   OS << "\t.arch\t" << ARMTargetParser::getArchName(Arch) << "\n";
199 }
200 void ARMTargetAsmStreamer::emitArchExtension(unsigned ArchExt) {
201   OS << "\t.arch_extension\t" << ARMTargetParser::getArchExtName(ArchExt) << "\n";
202 }
203 void ARMTargetAsmStreamer::emitObjectArch(unsigned Arch) {
204   OS << "\t.object_arch\t" << ARMTargetParser::getArchName(Arch) << '\n';
205 }
206 void ARMTargetAsmStreamer::emitFPU(unsigned FPU) {
207   OS << "\t.fpu\t" << ARMTargetParser::getFPUName(FPU) << "\n";
208 }
209 void ARMTargetAsmStreamer::finishAttributeSection() {
210 }
211 void
212 ARMTargetAsmStreamer::AnnotateTLSDescriptorSequence(const MCSymbolRefExpr *S) {
213   OS << "\t.tlsdescseq\t" << S->getSymbol().getName();
214 }
215
216 void ARMTargetAsmStreamer::emitThumbSet(MCSymbol *Symbol, const MCExpr *Value) {
217   const MCAsmInfo *MAI = Streamer.getContext().getAsmInfo();
218
219   OS << "\t.thumb_set\t";
220   Symbol->print(OS, MAI);
221   OS << ", ";
222   Value->print(OS, MAI);
223   OS << '\n';
224 }
225
226 void ARMTargetAsmStreamer::emitInst(uint32_t Inst, char Suffix) {
227   OS << "\t.inst";
228   if (Suffix)
229     OS << "." << Suffix;
230   OS << "\t0x" << Twine::utohexstr(Inst) << "\n";
231 }
232
233 void ARMTargetAsmStreamer::emitUnwindRaw(int64_t Offset,
234                                       const SmallVectorImpl<uint8_t> &Opcodes) {
235   OS << "\t.unwind_raw " << Offset;
236   for (SmallVectorImpl<uint8_t>::const_iterator OCI = Opcodes.begin(),
237                                                 OCE = Opcodes.end();
238        OCI != OCE; ++OCI)
239     OS << ", 0x" << Twine::utohexstr(*OCI);
240   OS << '\n';
241 }
242
243 class ARMTargetELFStreamer : public ARMTargetStreamer {
244 private:
245   // This structure holds all attributes, accounting for
246   // their string/numeric value, so we can later emmit them
247   // in declaration order, keeping all in the same vector
248   struct AttributeItem {
249     enum {
250       HiddenAttribute = 0,
251       NumericAttribute,
252       TextAttribute,
253       NumericAndTextAttributes
254     } Type;
255     unsigned Tag;
256     unsigned IntValue;
257     StringRef StringValue;
258
259     static bool LessTag(const AttributeItem &LHS, const AttributeItem &RHS) {
260       // The conformance tag must be emitted first when serialised
261       // into an object file. Specifically, the addenda to the ARM ABI
262       // states that (2.3.7.4):
263       //
264       // "To simplify recognition by consumers in the common case of
265       // claiming conformity for the whole file, this tag should be
266       // emitted first in a file-scope sub-subsection of the first
267       // public subsection of the attributes section."
268       //
269       // So it is special-cased in this comparison predicate when the
270       // attributes are sorted in finishAttributeSection().
271       return (RHS.Tag != ARMBuildAttrs::conformance) &&
272              ((LHS.Tag == ARMBuildAttrs::conformance) || (LHS.Tag < RHS.Tag));
273     }
274   };
275
276   StringRef CurrentVendor;
277   unsigned FPU;
278   unsigned Arch;
279   unsigned EmittedArch;
280   SmallVector<AttributeItem, 64> Contents;
281
282   MCSection *AttributeSection;
283
284   AttributeItem *getAttributeItem(unsigned Attribute) {
285     for (size_t i = 0; i < Contents.size(); ++i)
286       if (Contents[i].Tag == Attribute)
287         return &Contents[i];
288     return nullptr;
289   }
290
291   void setAttributeItem(unsigned Attribute, unsigned Value,
292                         bool OverwriteExisting) {
293     // Look for existing attribute item
294     if (AttributeItem *Item = getAttributeItem(Attribute)) {
295       if (!OverwriteExisting)
296         return;
297       Item->Type = AttributeItem::NumericAttribute;
298       Item->IntValue = Value;
299       return;
300     }
301
302     // Create new attribute item
303     AttributeItem Item = {
304       AttributeItem::NumericAttribute,
305       Attribute,
306       Value,
307       StringRef("")
308     };
309     Contents.push_back(Item);
310   }
311
312   void setAttributeItem(unsigned Attribute, StringRef Value,
313                         bool OverwriteExisting) {
314     // Look for existing attribute item
315     if (AttributeItem *Item = getAttributeItem(Attribute)) {
316       if (!OverwriteExisting)
317         return;
318       Item->Type = AttributeItem::TextAttribute;
319       Item->StringValue = Value;
320       return;
321     }
322
323     // Create new attribute item
324     AttributeItem Item = {
325       AttributeItem::TextAttribute,
326       Attribute,
327       0,
328       Value
329     };
330     Contents.push_back(Item);
331   }
332
333   void setAttributeItems(unsigned Attribute, unsigned IntValue,
334                          StringRef StringValue, bool OverwriteExisting) {
335     // Look for existing attribute item
336     if (AttributeItem *Item = getAttributeItem(Attribute)) {
337       if (!OverwriteExisting)
338         return;
339       Item->Type = AttributeItem::NumericAndTextAttributes;
340       Item->IntValue = IntValue;
341       Item->StringValue = StringValue;
342       return;
343     }
344
345     // Create new attribute item
346     AttributeItem Item = {
347       AttributeItem::NumericAndTextAttributes,
348       Attribute,
349       IntValue,
350       StringValue
351     };
352     Contents.push_back(Item);
353   }
354
355   void emitArchDefaultAttributes();
356   void emitFPUDefaultAttributes();
357
358   ARMELFStreamer &getStreamer();
359
360   void emitFnStart() override;
361   void emitFnEnd() override;
362   void emitCantUnwind() override;
363   void emitPersonality(const MCSymbol *Personality) override;
364   void emitPersonalityIndex(unsigned Index) override;
365   void emitHandlerData() override;
366   void emitSetFP(unsigned FpReg, unsigned SpReg, int64_t Offset = 0) override;
367   void emitMovSP(unsigned Reg, int64_t Offset = 0) override;
368   void emitPad(int64_t Offset) override;
369   void emitRegSave(const SmallVectorImpl<unsigned> &RegList,
370                    bool isVector) override;
371   void emitUnwindRaw(int64_t Offset,
372                      const SmallVectorImpl<uint8_t> &Opcodes) override;
373
374   void switchVendor(StringRef Vendor) override;
375   void emitAttribute(unsigned Attribute, unsigned Value) override;
376   void emitTextAttribute(unsigned Attribute, StringRef String) override;
377   void emitIntTextAttribute(unsigned Attribute, unsigned IntValue,
378                             StringRef StringValue) override;
379   void emitArch(unsigned Arch) override;
380   void emitObjectArch(unsigned Arch) override;
381   void emitFPU(unsigned FPU) override;
382   void emitInst(uint32_t Inst, char Suffix = '\0') override;
383   void finishAttributeSection() override;
384   void emitLabel(MCSymbol *Symbol) override;
385
386   void AnnotateTLSDescriptorSequence(const MCSymbolRefExpr *SRE) override;
387   void emitThumbSet(MCSymbol *Symbol, const MCExpr *Value) override;
388
389   size_t calculateContentSize() const;
390
391 public:
392   ARMTargetELFStreamer(MCStreamer &S)
393     : ARMTargetStreamer(S), CurrentVendor("aeabi"), FPU(ARM::FK_INVALID),
394       Arch(ARM::AK_INVALID), EmittedArch(ARM::AK_INVALID),
395       AttributeSection(nullptr) {}
396 };
397
398 /// Extend the generic ELFStreamer class so that it can emit mapping symbols at
399 /// the appropriate points in the object files. These symbols are defined in the
400 /// ARM ELF ABI: infocenter.arm.com/help/topic/com.arm.../IHI0044D_aaelf.pdf.
401 ///
402 /// In brief: $a, $t or $d should be emitted at the start of each contiguous
403 /// region of ARM code, Thumb code or data in a section. In practice, this
404 /// emission does not rely on explicit assembler directives but on inherent
405 /// properties of the directives doing the emission (e.g. ".byte" is data, "add
406 /// r0, r0, r0" an instruction).
407 ///
408 /// As a result this system is orthogonal to the DataRegion infrastructure used
409 /// by MachO. Beware!
410 class ARMELFStreamer : public MCELFStreamer {
411 public:
412   friend class ARMTargetELFStreamer;
413
414   ARMELFStreamer(MCContext &Context, MCAsmBackend &TAB, raw_pwrite_stream &OS,
415                  MCCodeEmitter *Emitter, bool IsThumb)
416       : MCELFStreamer(Context, TAB, OS, Emitter), IsThumb(IsThumb),
417         MappingSymbolCounter(0), LastEMS(EMS_None) {
418     Reset();
419   }
420
421   ~ARMELFStreamer() {}
422
423   void FinishImpl() override;
424
425   // ARM exception handling directives
426   void emitFnStart();
427   void emitFnEnd();
428   void emitCantUnwind();
429   void emitPersonality(const MCSymbol *Per);
430   void emitPersonalityIndex(unsigned index);
431   void emitHandlerData();
432   void emitSetFP(unsigned NewFpReg, unsigned NewSpReg, int64_t Offset = 0);
433   void emitMovSP(unsigned Reg, int64_t Offset = 0);
434   void emitPad(int64_t Offset);
435   void emitRegSave(const SmallVectorImpl<unsigned> &RegList, bool isVector);
436   void emitUnwindRaw(int64_t Offset, const SmallVectorImpl<uint8_t> &Opcodes);
437
438   void ChangeSection(MCSection *Section, const MCExpr *Subsection) override {
439     // We have to keep track of the mapping symbol state of any sections we
440     // use. Each one should start off as EMS_None, which is provided as the
441     // default constructor by DenseMap::lookup.
442     LastMappingSymbols[getPreviousSection().first] = LastEMS;
443     LastEMS = LastMappingSymbols.lookup(Section);
444
445     MCELFStreamer::ChangeSection(Section, Subsection);
446   }
447
448   /// This function is the one used to emit instruction data into the ELF
449   /// streamer. We override it to add the appropriate mapping symbol if
450   /// necessary.
451   void EmitInstruction(const MCInst& Inst,
452                        const MCSubtargetInfo &STI) override {
453     if (IsThumb)
454       EmitThumbMappingSymbol();
455     else
456       EmitARMMappingSymbol();
457
458     MCELFStreamer::EmitInstruction(Inst, STI);
459   }
460
461   void emitInst(uint32_t Inst, char Suffix) {
462     unsigned Size;
463     char Buffer[4];
464     const bool LittleEndian = getContext().getAsmInfo()->isLittleEndian();
465
466     switch (Suffix) {
467     case '\0':
468       Size = 4;
469
470       assert(!IsThumb);
471       EmitARMMappingSymbol();
472       for (unsigned II = 0, IE = Size; II != IE; II++) {
473         const unsigned I = LittleEndian ? (Size - II - 1) : II;
474         Buffer[Size - II - 1] = uint8_t(Inst >> I * CHAR_BIT);
475       }
476
477       break;
478     case 'n':
479     case 'w':
480       Size = (Suffix == 'n' ? 2 : 4);
481
482       assert(IsThumb);
483       EmitThumbMappingSymbol();
484       for (unsigned II = 0, IE = Size; II != IE; II = II + 2) {
485         const unsigned I0 = LittleEndian ? II + 0 : (Size - II - 1);
486         const unsigned I1 = LittleEndian ? II + 1 : (Size - II - 2);
487         Buffer[Size - II - 2] = uint8_t(Inst >> I0 * CHAR_BIT);
488         Buffer[Size - II - 1] = uint8_t(Inst >> I1 * CHAR_BIT);
489       }
490
491       break;
492     default:
493       llvm_unreachable("Invalid Suffix");
494     }
495
496     MCELFStreamer::EmitBytes(StringRef(Buffer, Size));
497   }
498
499   /// This is one of the functions used to emit data into an ELF section, so the
500   /// ARM streamer overrides it to add the appropriate mapping symbol ($d) if
501   /// necessary.
502   void EmitBytes(StringRef Data) override {
503     EmitDataMappingSymbol();
504     MCELFStreamer::EmitBytes(Data);
505   }
506
507   /// This is one of the functions used to emit data into an ELF section, so the
508   /// ARM streamer overrides it to add the appropriate mapping symbol ($d) if
509   /// necessary.
510   void EmitValueImpl(const MCExpr *Value, unsigned Size,
511                      const SMLoc &Loc) override {
512     if (const MCSymbolRefExpr *SRE = dyn_cast_or_null<MCSymbolRefExpr>(Value))
513       if (SRE->getKind() == MCSymbolRefExpr::VK_ARM_SBREL && !(Size == 4))
514         getContext().reportFatalError(Loc, "relocated expression must be 32-bit");
515
516     EmitDataMappingSymbol();
517     MCELFStreamer::EmitValueImpl(Value, Size);
518   }
519
520   void EmitAssemblerFlag(MCAssemblerFlag Flag) override {
521     MCELFStreamer::EmitAssemblerFlag(Flag);
522
523     switch (Flag) {
524     case MCAF_SyntaxUnified:
525       return; // no-op here.
526     case MCAF_Code16:
527       IsThumb = true;
528       return; // Change to Thumb mode
529     case MCAF_Code32:
530       IsThumb = false;
531       return; // Change to ARM mode
532     case MCAF_Code64:
533       return;
534     case MCAF_SubsectionsViaSymbols:
535       return;
536     }
537   }
538
539 private:
540   enum ElfMappingSymbol {
541     EMS_None,
542     EMS_ARM,
543     EMS_Thumb,
544     EMS_Data
545   };
546
547   void EmitDataMappingSymbol() {
548     if (LastEMS == EMS_Data) return;
549     EmitMappingSymbol("$d");
550     LastEMS = EMS_Data;
551   }
552
553   void EmitThumbMappingSymbol() {
554     if (LastEMS == EMS_Thumb) return;
555     EmitMappingSymbol("$t");
556     LastEMS = EMS_Thumb;
557   }
558
559   void EmitARMMappingSymbol() {
560     if (LastEMS == EMS_ARM) return;
561     EmitMappingSymbol("$a");
562     LastEMS = EMS_ARM;
563   }
564
565   void EmitMappingSymbol(StringRef Name) {
566     auto *Symbol = cast<MCSymbolELF>(getContext().getOrCreateSymbol(
567         Name + "." + Twine(MappingSymbolCounter++)));
568     EmitLabel(Symbol);
569
570     Symbol->setType(ELF::STT_NOTYPE);
571     Symbol->setBinding(ELF::STB_LOCAL);
572     Symbol->setExternal(false);
573   }
574
575   void EmitThumbFunc(MCSymbol *Func) override {
576     getAssembler().setIsThumbFunc(Func);
577     EmitSymbolAttribute(Func, MCSA_ELF_TypeFunction);
578   }
579
580   // Helper functions for ARM exception handling directives
581   void Reset();
582
583   void EmitPersonalityFixup(StringRef Name);
584   void FlushPendingOffset();
585   void FlushUnwindOpcodes(bool NoHandlerData);
586
587   void SwitchToEHSection(const char *Prefix, unsigned Type, unsigned Flags,
588                          SectionKind Kind, const MCSymbol &Fn);
589   void SwitchToExTabSection(const MCSymbol &FnStart);
590   void SwitchToExIdxSection(const MCSymbol &FnStart);
591
592   void EmitFixup(const MCExpr *Expr, MCFixupKind Kind);
593
594   bool IsThumb;
595   int64_t MappingSymbolCounter;
596
597   DenseMap<const MCSection *, ElfMappingSymbol> LastMappingSymbols;
598   ElfMappingSymbol LastEMS;
599
600   // ARM Exception Handling Frame Information
601   MCSymbol *ExTab;
602   MCSymbol *FnStart;
603   const MCSymbol *Personality;
604   unsigned PersonalityIndex;
605   unsigned FPReg; // Frame pointer register
606   int64_t FPOffset; // Offset: (final frame pointer) - (initial $sp)
607   int64_t SPOffset; // Offset: (final $sp) - (initial $sp)
608   int64_t PendingOffset; // Offset: (final $sp) - (emitted $sp)
609   bool UsedFP;
610   bool CantUnwind;
611   SmallVector<uint8_t, 64> Opcodes;
612   UnwindOpcodeAssembler UnwindOpAsm;
613 };
614 } // end anonymous namespace
615
616 ARMELFStreamer &ARMTargetELFStreamer::getStreamer() {
617   return static_cast<ARMELFStreamer &>(Streamer);
618 }
619
620 void ARMTargetELFStreamer::emitFnStart() { getStreamer().emitFnStart(); }
621 void ARMTargetELFStreamer::emitFnEnd() { getStreamer().emitFnEnd(); }
622 void ARMTargetELFStreamer::emitCantUnwind() { getStreamer().emitCantUnwind(); }
623 void ARMTargetELFStreamer::emitPersonality(const MCSymbol *Personality) {
624   getStreamer().emitPersonality(Personality);
625 }
626 void ARMTargetELFStreamer::emitPersonalityIndex(unsigned Index) {
627   getStreamer().emitPersonalityIndex(Index);
628 }
629 void ARMTargetELFStreamer::emitHandlerData() {
630   getStreamer().emitHandlerData();
631 }
632 void ARMTargetELFStreamer::emitSetFP(unsigned FpReg, unsigned SpReg,
633                                      int64_t Offset) {
634   getStreamer().emitSetFP(FpReg, SpReg, Offset);
635 }
636 void ARMTargetELFStreamer::emitMovSP(unsigned Reg, int64_t Offset) {
637   getStreamer().emitMovSP(Reg, Offset);
638 }
639 void ARMTargetELFStreamer::emitPad(int64_t Offset) {
640   getStreamer().emitPad(Offset);
641 }
642 void ARMTargetELFStreamer::emitRegSave(const SmallVectorImpl<unsigned> &RegList,
643                                        bool isVector) {
644   getStreamer().emitRegSave(RegList, isVector);
645 }
646 void ARMTargetELFStreamer::emitUnwindRaw(int64_t Offset,
647                                       const SmallVectorImpl<uint8_t> &Opcodes) {
648   getStreamer().emitUnwindRaw(Offset, Opcodes);
649 }
650 void ARMTargetELFStreamer::switchVendor(StringRef Vendor) {
651   assert(!Vendor.empty() && "Vendor cannot be empty.");
652
653   if (CurrentVendor == Vendor)
654     return;
655
656   if (!CurrentVendor.empty())
657     finishAttributeSection();
658
659   assert(Contents.empty() &&
660          ".ARM.attributes should be flushed before changing vendor");
661   CurrentVendor = Vendor;
662
663 }
664 void ARMTargetELFStreamer::emitAttribute(unsigned Attribute, unsigned Value) {
665   setAttributeItem(Attribute, Value, /* OverwriteExisting= */ true);
666 }
667 void ARMTargetELFStreamer::emitTextAttribute(unsigned Attribute,
668                                              StringRef Value) {
669   setAttributeItem(Attribute, Value, /* OverwriteExisting= */ true);
670 }
671 void ARMTargetELFStreamer::emitIntTextAttribute(unsigned Attribute,
672                                                 unsigned IntValue,
673                                                 StringRef StringValue) {
674   setAttributeItems(Attribute, IntValue, StringValue,
675                     /* OverwriteExisting= */ true);
676 }
677 void ARMTargetELFStreamer::emitArch(unsigned Value) {
678   Arch = Value;
679 }
680 void ARMTargetELFStreamer::emitObjectArch(unsigned Value) {
681   EmittedArch = Value;
682 }
683 void ARMTargetELFStreamer::emitArchDefaultAttributes() {
684   using namespace ARMBuildAttrs;
685
686   setAttributeItem(CPU_name,
687                    ARMTargetParser::getCPUAttr(Arch),
688                    false);
689
690   if (EmittedArch == ARM::AK_INVALID)
691     setAttributeItem(CPU_arch,
692                      ARMTargetParser::getArchAttr(Arch),
693                      false);
694   else
695     setAttributeItem(CPU_arch,
696                      ARMTargetParser::getArchAttr(EmittedArch),
697                      false);
698
699   switch (Arch) {
700   case ARM::AK_ARMV2:
701   case ARM::AK_ARMV2A:
702   case ARM::AK_ARMV3:
703   case ARM::AK_ARMV3M:
704   case ARM::AK_ARMV4:
705   case ARM::AK_ARMV5:
706     setAttributeItem(ARM_ISA_use, Allowed, false);
707     break;
708
709   case ARM::AK_ARMV4T:
710   case ARM::AK_ARMV5T:
711   case ARM::AK_ARMV5TE:
712   case ARM::AK_ARMV6:
713   case ARM::AK_ARMV6J:
714     setAttributeItem(ARM_ISA_use, Allowed, false);
715     setAttributeItem(THUMB_ISA_use, Allowed, false);
716     break;
717
718   case ARM::AK_ARMV6T2:
719     setAttributeItem(ARM_ISA_use, Allowed, false);
720     setAttributeItem(THUMB_ISA_use, AllowThumb32, false);
721     break;
722
723   case ARM::AK_ARMV6K:
724   case ARM::AK_ARMV6Z:
725   case ARM::AK_ARMV6ZK:
726     setAttributeItem(ARM_ISA_use, Allowed, false);
727     setAttributeItem(THUMB_ISA_use, Allowed, false);
728     setAttributeItem(Virtualization_use, AllowTZ, false);
729     break;
730
731   case ARM::AK_ARMV6M:
732     setAttributeItem(THUMB_ISA_use, Allowed, false);
733     break;
734
735   case ARM::AK_ARMV7:
736     setAttributeItem(THUMB_ISA_use, AllowThumb32, false);
737     break;
738
739   case ARM::AK_ARMV7A:
740     setAttributeItem(CPU_arch_profile, ApplicationProfile, false);
741     setAttributeItem(ARM_ISA_use, Allowed, false);
742     setAttributeItem(THUMB_ISA_use, AllowThumb32, false);
743     break;
744
745   case ARM::AK_ARMV7R:
746     setAttributeItem(CPU_arch_profile, RealTimeProfile, false);
747     setAttributeItem(ARM_ISA_use, Allowed, false);
748     setAttributeItem(THUMB_ISA_use, AllowThumb32, false);
749     break;
750
751   case ARM::AK_ARMV7M:
752     setAttributeItem(CPU_arch_profile, MicroControllerProfile, false);
753     setAttributeItem(THUMB_ISA_use, AllowThumb32, false);
754     break;
755
756   case ARM::AK_ARMV8A:
757   case ARM::AK_ARMV8_1A:
758     setAttributeItem(CPU_arch_profile, ApplicationProfile, false);
759     setAttributeItem(ARM_ISA_use, Allowed, false);
760     setAttributeItem(THUMB_ISA_use, AllowThumb32, false);
761     setAttributeItem(MPextension_use, Allowed, false);
762     setAttributeItem(Virtualization_use, AllowTZVirtualization, false);
763     break;
764
765   case ARM::AK_IWMMXT:
766     setAttributeItem(ARM_ISA_use, Allowed, false);
767     setAttributeItem(THUMB_ISA_use, Allowed, false);
768     setAttributeItem(WMMX_arch, AllowWMMXv1, false);
769     break;
770
771   case ARM::AK_IWMMXT2:
772     setAttributeItem(ARM_ISA_use, Allowed, false);
773     setAttributeItem(THUMB_ISA_use, Allowed, false);
774     setAttributeItem(WMMX_arch, AllowWMMXv2, false);
775     break;
776
777   default:
778     report_fatal_error("Unknown Arch: " + Twine(Arch));
779     break;
780   }
781 }
782 void ARMTargetELFStreamer::emitFPU(unsigned Value) {
783   FPU = Value;
784 }
785 void ARMTargetELFStreamer::emitFPUDefaultAttributes() {
786   switch (FPU) {
787   case ARM::FK_VFP:
788   case ARM::FK_VFPV2:
789     setAttributeItem(ARMBuildAttrs::FP_arch,
790                      ARMBuildAttrs::AllowFPv2,
791                      /* OverwriteExisting= */ false);
792     break;
793
794   case ARM::FK_VFPV3:
795     setAttributeItem(ARMBuildAttrs::FP_arch,
796                      ARMBuildAttrs::AllowFPv3A,
797                      /* OverwriteExisting= */ false);
798     break;
799
800   case ARM::FK_VFPV3_D16:
801     setAttributeItem(ARMBuildAttrs::FP_arch,
802                      ARMBuildAttrs::AllowFPv3B,
803                      /* OverwriteExisting= */ false);
804     break;
805
806   case ARM::FK_VFPV4:
807     setAttributeItem(ARMBuildAttrs::FP_arch,
808                      ARMBuildAttrs::AllowFPv4A,
809                      /* OverwriteExisting= */ false);
810     break;
811
812   // ABI_HardFP_use is handled in ARMAsmPrinter, so _SP_D16 is treated the same
813   // as _D16 here.
814   case ARM::FK_FPV4_SP_D16:
815   case ARM::FK_VFPV4_D16:
816     setAttributeItem(ARMBuildAttrs::FP_arch,
817                      ARMBuildAttrs::AllowFPv4B,
818                      /* OverwriteExisting= */ false);
819     break;
820
821   case ARM::FK_FP_ARMV8:
822     setAttributeItem(ARMBuildAttrs::FP_arch,
823                      ARMBuildAttrs::AllowFPARMv8A,
824                      /* OverwriteExisting= */ false);
825     break;
826
827   // FPV5_D16 is identical to FP_ARMV8 except for the number of D registers, so
828   // uses the FP_ARMV8_D16 build attribute.
829   case ARM::FK_FPV5_SP_D16:
830   case ARM::FK_FPV5_D16:
831     setAttributeItem(ARMBuildAttrs::FP_arch,
832                      ARMBuildAttrs::AllowFPARMv8B,
833                      /* OverwriteExisting= */ false);
834     break;
835
836   case ARM::FK_NEON:
837     setAttributeItem(ARMBuildAttrs::FP_arch,
838                      ARMBuildAttrs::AllowFPv3A,
839                      /* OverwriteExisting= */ false);
840     setAttributeItem(ARMBuildAttrs::Advanced_SIMD_arch,
841                      ARMBuildAttrs::AllowNeon,
842                      /* OverwriteExisting= */ false);
843     break;
844
845   case ARM::FK_NEON_VFPV4:
846     setAttributeItem(ARMBuildAttrs::FP_arch,
847                      ARMBuildAttrs::AllowFPv4A,
848                      /* OverwriteExisting= */ false);
849     setAttributeItem(ARMBuildAttrs::Advanced_SIMD_arch,
850                      ARMBuildAttrs::AllowNeon2,
851                      /* OverwriteExisting= */ false);
852     break;
853
854   case ARM::FK_NEON_FP_ARMV8:
855   case ARM::FK_CRYPTO_NEON_FP_ARMV8:
856     setAttributeItem(ARMBuildAttrs::FP_arch,
857                      ARMBuildAttrs::AllowFPARMv8A,
858                      /* OverwriteExisting= */ false);
859     // 'Advanced_SIMD_arch' must be emitted not here, but within
860     // ARMAsmPrinter::emitAttributes(), depending on hasV8Ops() and hasV8_1a()
861     break;
862
863   case ARM::FK_SOFTVFP:
864   case ARM::FK_NONE:
865     break;
866
867   default:
868     report_fatal_error("Unknown FPU: " + Twine(FPU));
869     break;
870   }
871 }
872 size_t ARMTargetELFStreamer::calculateContentSize() const {
873   size_t Result = 0;
874   for (size_t i = 0; i < Contents.size(); ++i) {
875     AttributeItem item = Contents[i];
876     switch (item.Type) {
877     case AttributeItem::HiddenAttribute:
878       break;
879     case AttributeItem::NumericAttribute:
880       Result += getULEB128Size(item.Tag);
881       Result += getULEB128Size(item.IntValue);
882       break;
883     case AttributeItem::TextAttribute:
884       Result += getULEB128Size(item.Tag);
885       Result += item.StringValue.size() + 1; // string + '\0'
886       break;
887     case AttributeItem::NumericAndTextAttributes:
888       Result += getULEB128Size(item.Tag);
889       Result += getULEB128Size(item.IntValue);
890       Result += item.StringValue.size() + 1; // string + '\0';
891       break;
892     }
893   }
894   return Result;
895 }
896 void ARMTargetELFStreamer::finishAttributeSection() {
897   // <format-version>
898   // [ <section-length> "vendor-name"
899   // [ <file-tag> <size> <attribute>*
900   //   | <section-tag> <size> <section-number>* 0 <attribute>*
901   //   | <symbol-tag> <size> <symbol-number>* 0 <attribute>*
902   //   ]+
903   // ]*
904
905   if (FPU != ARM::FK_INVALID)
906     emitFPUDefaultAttributes();
907
908   if (Arch != ARM::AK_INVALID)
909     emitArchDefaultAttributes();
910
911   if (Contents.empty())
912     return;
913
914   std::sort(Contents.begin(), Contents.end(), AttributeItem::LessTag);
915
916   ARMELFStreamer &Streamer = getStreamer();
917
918   // Switch to .ARM.attributes section
919   if (AttributeSection) {
920     Streamer.SwitchSection(AttributeSection);
921   } else {
922     AttributeSection = Streamer.getContext().getELFSection(
923         ".ARM.attributes", ELF::SHT_ARM_ATTRIBUTES, 0);
924     Streamer.SwitchSection(AttributeSection);
925
926     // Format version
927     Streamer.EmitIntValue(0x41, 1);
928   }
929
930   // Vendor size + Vendor name + '\0'
931   const size_t VendorHeaderSize = 4 + CurrentVendor.size() + 1;
932
933   // Tag + Tag Size
934   const size_t TagHeaderSize = 1 + 4;
935
936   const size_t ContentsSize = calculateContentSize();
937
938   Streamer.EmitIntValue(VendorHeaderSize + TagHeaderSize + ContentsSize, 4);
939   Streamer.EmitBytes(CurrentVendor);
940   Streamer.EmitIntValue(0, 1); // '\0'
941
942   Streamer.EmitIntValue(ARMBuildAttrs::File, 1);
943   Streamer.EmitIntValue(TagHeaderSize + ContentsSize, 4);
944
945   // Size should have been accounted for already, now
946   // emit each field as its type (ULEB or String)
947   for (size_t i = 0; i < Contents.size(); ++i) {
948     AttributeItem item = Contents[i];
949     Streamer.EmitULEB128IntValue(item.Tag);
950     switch (item.Type) {
951     default: llvm_unreachable("Invalid attribute type");
952     case AttributeItem::NumericAttribute:
953       Streamer.EmitULEB128IntValue(item.IntValue);
954       break;
955     case AttributeItem::TextAttribute:
956       Streamer.EmitBytes(item.StringValue);
957       Streamer.EmitIntValue(0, 1); // '\0'
958       break;
959     case AttributeItem::NumericAndTextAttributes:
960       Streamer.EmitULEB128IntValue(item.IntValue);
961       Streamer.EmitBytes(item.StringValue);
962       Streamer.EmitIntValue(0, 1); // '\0'
963       break;
964     }
965   }
966
967   Contents.clear();
968   FPU = ARM::FK_INVALID;
969 }
970
971 void ARMTargetELFStreamer::emitLabel(MCSymbol *Symbol) {
972   ARMELFStreamer &Streamer = getStreamer();
973   if (!Streamer.IsThumb)
974     return;
975
976   Streamer.getAssembler().registerSymbol(*Symbol);
977   unsigned Type = cast<MCSymbolELF>(Symbol)->getType();
978   if (Type == ELF::STT_FUNC || Type == ELF::STT_GNU_IFUNC)
979     Streamer.EmitThumbFunc(Symbol);
980 }
981
982 void
983 ARMTargetELFStreamer::AnnotateTLSDescriptorSequence(const MCSymbolRefExpr *S) {
984   getStreamer().EmitFixup(S, FK_Data_4);
985 }
986
987 void ARMTargetELFStreamer::emitThumbSet(MCSymbol *Symbol, const MCExpr *Value) {
988   if (const MCSymbolRefExpr *SRE = dyn_cast<MCSymbolRefExpr>(Value)) {
989     const MCSymbol &Sym = SRE->getSymbol();
990     if (!Sym.isDefined()) {
991       getStreamer().EmitAssignment(Symbol, Value);
992       return;
993     }
994   }
995
996   getStreamer().EmitThumbFunc(Symbol);
997   getStreamer().EmitAssignment(Symbol, Value);
998 }
999
1000 void ARMTargetELFStreamer::emitInst(uint32_t Inst, char Suffix) {
1001   getStreamer().emitInst(Inst, Suffix);
1002 }
1003
1004 void ARMELFStreamer::FinishImpl() {
1005   MCTargetStreamer &TS = *getTargetStreamer();
1006   ARMTargetStreamer &ATS = static_cast<ARMTargetStreamer &>(TS);
1007   ATS.finishAttributeSection();
1008
1009   MCELFStreamer::FinishImpl();
1010 }
1011
1012 inline void ARMELFStreamer::SwitchToEHSection(const char *Prefix,
1013                                               unsigned Type,
1014                                               unsigned Flags,
1015                                               SectionKind Kind,
1016                                               const MCSymbol &Fn) {
1017   const MCSectionELF &FnSection =
1018     static_cast<const MCSectionELF &>(Fn.getSection());
1019
1020   // Create the name for new section
1021   StringRef FnSecName(FnSection.getSectionName());
1022   SmallString<128> EHSecName(Prefix);
1023   if (FnSecName != ".text") {
1024     EHSecName += FnSecName;
1025   }
1026
1027   // Get .ARM.extab or .ARM.exidx section
1028   const MCSymbolELF *Group = FnSection.getGroup();
1029   if (Group)
1030     Flags |= ELF::SHF_GROUP;
1031   MCSectionELF *EHSection =
1032       getContext().getELFSection(EHSecName, Type, Flags, 0, Group,
1033                                  FnSection.getUniqueID(), nullptr, &FnSection);
1034
1035   assert(EHSection && "Failed to get the required EH section");
1036
1037   // Switch to .ARM.extab or .ARM.exidx section
1038   SwitchSection(EHSection);
1039   EmitCodeAlignment(4);
1040 }
1041
1042 inline void ARMELFStreamer::SwitchToExTabSection(const MCSymbol &FnStart) {
1043   SwitchToEHSection(".ARM.extab",
1044                     ELF::SHT_PROGBITS,
1045                     ELF::SHF_ALLOC,
1046                     SectionKind::getDataRel(),
1047                     FnStart);
1048 }
1049
1050 inline void ARMELFStreamer::SwitchToExIdxSection(const MCSymbol &FnStart) {
1051   SwitchToEHSection(".ARM.exidx",
1052                     ELF::SHT_ARM_EXIDX,
1053                     ELF::SHF_ALLOC | ELF::SHF_LINK_ORDER,
1054                     SectionKind::getDataRel(),
1055                     FnStart);
1056 }
1057 void ARMELFStreamer::EmitFixup(const MCExpr *Expr, MCFixupKind Kind) {
1058   MCDataFragment *Frag = getOrCreateDataFragment();
1059   Frag->getFixups().push_back(MCFixup::create(Frag->getContents().size(), Expr,
1060                                               Kind));
1061 }
1062
1063 void ARMELFStreamer::Reset() {
1064   ExTab = nullptr;
1065   FnStart = nullptr;
1066   Personality = nullptr;
1067   PersonalityIndex = ARM::EHABI::NUM_PERSONALITY_INDEX;
1068   FPReg = ARM::SP;
1069   FPOffset = 0;
1070   SPOffset = 0;
1071   PendingOffset = 0;
1072   UsedFP = false;
1073   CantUnwind = false;
1074
1075   Opcodes.clear();
1076   UnwindOpAsm.Reset();
1077 }
1078
1079 void ARMELFStreamer::emitFnStart() {
1080   assert(FnStart == nullptr);
1081   FnStart = getContext().createTempSymbol();
1082   EmitLabel(FnStart);
1083 }
1084
1085 void ARMELFStreamer::emitFnEnd() {
1086   assert(FnStart && ".fnstart must precedes .fnend");
1087
1088   // Emit unwind opcodes if there is no .handlerdata directive
1089   if (!ExTab && !CantUnwind)
1090     FlushUnwindOpcodes(true);
1091
1092   // Emit the exception index table entry
1093   SwitchToExIdxSection(*FnStart);
1094
1095   if (PersonalityIndex < ARM::EHABI::NUM_PERSONALITY_INDEX)
1096     EmitPersonalityFixup(GetAEABIUnwindPersonalityName(PersonalityIndex));
1097
1098   const MCSymbolRefExpr *FnStartRef =
1099     MCSymbolRefExpr::create(FnStart,
1100                             MCSymbolRefExpr::VK_ARM_PREL31,
1101                             getContext());
1102
1103   EmitValue(FnStartRef, 4);
1104
1105   if (CantUnwind) {
1106     EmitIntValue(ARM::EHABI::EXIDX_CANTUNWIND, 4);
1107   } else if (ExTab) {
1108     // Emit a reference to the unwind opcodes in the ".ARM.extab" section.
1109     const MCSymbolRefExpr *ExTabEntryRef =
1110       MCSymbolRefExpr::create(ExTab,
1111                               MCSymbolRefExpr::VK_ARM_PREL31,
1112                               getContext());
1113     EmitValue(ExTabEntryRef, 4);
1114   } else {
1115     // For the __aeabi_unwind_cpp_pr0, we have to emit the unwind opcodes in
1116     // the second word of exception index table entry.  The size of the unwind
1117     // opcodes should always be 4 bytes.
1118     assert(PersonalityIndex == ARM::EHABI::AEABI_UNWIND_CPP_PR0 &&
1119            "Compact model must use __aeabi_unwind_cpp_pr0 as personality");
1120     assert(Opcodes.size() == 4u &&
1121            "Unwind opcode size for __aeabi_unwind_cpp_pr0 must be equal to 4");
1122     uint64_t Intval = Opcodes[0] |
1123                       Opcodes[1] << 8 |
1124                       Opcodes[2] << 16 |
1125                       Opcodes[3] << 24;
1126     EmitIntValue(Intval, Opcodes.size());
1127   }
1128
1129   // Switch to the section containing FnStart
1130   SwitchSection(&FnStart->getSection());
1131
1132   // Clean exception handling frame information
1133   Reset();
1134 }
1135
1136 void ARMELFStreamer::emitCantUnwind() { CantUnwind = true; }
1137
1138 // Add the R_ARM_NONE fixup at the same position
1139 void ARMELFStreamer::EmitPersonalityFixup(StringRef Name) {
1140   const MCSymbol *PersonalitySym = getContext().getOrCreateSymbol(Name);
1141
1142   const MCSymbolRefExpr *PersonalityRef = MCSymbolRefExpr::create(
1143       PersonalitySym, MCSymbolRefExpr::VK_ARM_NONE, getContext());
1144
1145   visitUsedExpr(*PersonalityRef);
1146   MCDataFragment *DF = getOrCreateDataFragment();
1147   DF->getFixups().push_back(MCFixup::create(DF->getContents().size(),
1148                                             PersonalityRef,
1149                                             MCFixup::getKindForSize(4, false)));
1150 }
1151
1152 void ARMELFStreamer::FlushPendingOffset() {
1153   if (PendingOffset != 0) {
1154     UnwindOpAsm.EmitSPOffset(-PendingOffset);
1155     PendingOffset = 0;
1156   }
1157 }
1158
1159 void ARMELFStreamer::FlushUnwindOpcodes(bool NoHandlerData) {
1160   // Emit the unwind opcode to restore $sp.
1161   if (UsedFP) {
1162     const MCRegisterInfo *MRI = getContext().getRegisterInfo();
1163     int64_t LastRegSaveSPOffset = SPOffset - PendingOffset;
1164     UnwindOpAsm.EmitSPOffset(LastRegSaveSPOffset - FPOffset);
1165     UnwindOpAsm.EmitSetSP(MRI->getEncodingValue(FPReg));
1166   } else {
1167     FlushPendingOffset();
1168   }
1169
1170   // Finalize the unwind opcode sequence
1171   UnwindOpAsm.Finalize(PersonalityIndex, Opcodes);
1172
1173   // For compact model 0, we have to emit the unwind opcodes in the .ARM.exidx
1174   // section.  Thus, we don't have to create an entry in the .ARM.extab
1175   // section.
1176   if (NoHandlerData && PersonalityIndex == ARM::EHABI::AEABI_UNWIND_CPP_PR0)
1177     return;
1178
1179   // Switch to .ARM.extab section.
1180   SwitchToExTabSection(*FnStart);
1181
1182   // Create .ARM.extab label for offset in .ARM.exidx
1183   assert(!ExTab);
1184   ExTab = getContext().createTempSymbol();
1185   EmitLabel(ExTab);
1186
1187   // Emit personality
1188   if (Personality) {
1189     const MCSymbolRefExpr *PersonalityRef =
1190       MCSymbolRefExpr::create(Personality,
1191                               MCSymbolRefExpr::VK_ARM_PREL31,
1192                               getContext());
1193
1194     EmitValue(PersonalityRef, 4);
1195   }
1196
1197   // Emit unwind opcodes
1198   assert((Opcodes.size() % 4) == 0 &&
1199          "Unwind opcode size for __aeabi_cpp_unwind_pr0 must be multiple of 4");
1200   for (unsigned I = 0; I != Opcodes.size(); I += 4) {
1201     uint64_t Intval = Opcodes[I] |
1202                       Opcodes[I + 1] << 8 |
1203                       Opcodes[I + 2] << 16 |
1204                       Opcodes[I + 3] << 24;
1205     EmitIntValue(Intval, 4);
1206   }
1207
1208   // According to ARM EHABI section 9.2, if the __aeabi_unwind_cpp_pr1() or
1209   // __aeabi_unwind_cpp_pr2() is used, then the handler data must be emitted
1210   // after the unwind opcodes.  The handler data consists of several 32-bit
1211   // words, and should be terminated by zero.
1212   //
1213   // In case that the .handlerdata directive is not specified by the
1214   // programmer, we should emit zero to terminate the handler data.
1215   if (NoHandlerData && !Personality)
1216     EmitIntValue(0, 4);
1217 }
1218
1219 void ARMELFStreamer::emitHandlerData() { FlushUnwindOpcodes(false); }
1220
1221 void ARMELFStreamer::emitPersonality(const MCSymbol *Per) {
1222   Personality = Per;
1223   UnwindOpAsm.setPersonality(Per);
1224 }
1225
1226 void ARMELFStreamer::emitPersonalityIndex(unsigned Index) {
1227   assert(Index < ARM::EHABI::NUM_PERSONALITY_INDEX && "invalid index");
1228   PersonalityIndex = Index;
1229 }
1230
1231 void ARMELFStreamer::emitSetFP(unsigned NewFPReg, unsigned NewSPReg,
1232                                int64_t Offset) {
1233   assert((NewSPReg == ARM::SP || NewSPReg == FPReg) &&
1234          "the operand of .setfp directive should be either $sp or $fp");
1235
1236   UsedFP = true;
1237   FPReg = NewFPReg;
1238
1239   if (NewSPReg == ARM::SP)
1240     FPOffset = SPOffset + Offset;
1241   else
1242     FPOffset += Offset;
1243 }
1244
1245 void ARMELFStreamer::emitMovSP(unsigned Reg, int64_t Offset) {
1246   assert((Reg != ARM::SP && Reg != ARM::PC) &&
1247          "the operand of .movsp cannot be either sp or pc");
1248   assert(FPReg == ARM::SP && "current FP must be SP");
1249
1250   FlushPendingOffset();
1251
1252   FPReg = Reg;
1253   FPOffset = SPOffset + Offset;
1254
1255   const MCRegisterInfo *MRI = getContext().getRegisterInfo();
1256   UnwindOpAsm.EmitSetSP(MRI->getEncodingValue(FPReg));
1257 }
1258
1259 void ARMELFStreamer::emitPad(int64_t Offset) {
1260   // Track the change of the $sp offset
1261   SPOffset -= Offset;
1262
1263   // To squash multiple .pad directives, we should delay the unwind opcode
1264   // until the .save, .vsave, .handlerdata, or .fnend directives.
1265   PendingOffset -= Offset;
1266 }
1267
1268 void ARMELFStreamer::emitRegSave(const SmallVectorImpl<unsigned> &RegList,
1269                                  bool IsVector) {
1270   // Collect the registers in the register list
1271   unsigned Count = 0;
1272   uint32_t Mask = 0;
1273   const MCRegisterInfo *MRI = getContext().getRegisterInfo();
1274   for (size_t i = 0; i < RegList.size(); ++i) {
1275     unsigned Reg = MRI->getEncodingValue(RegList[i]);
1276     assert(Reg < (IsVector ? 32U : 16U) && "Register out of range");
1277     unsigned Bit = (1u << Reg);
1278     if ((Mask & Bit) == 0) {
1279       Mask |= Bit;
1280       ++Count;
1281     }
1282   }
1283
1284   // Track the change the $sp offset: For the .save directive, the
1285   // corresponding push instruction will decrease the $sp by (4 * Count).
1286   // For the .vsave directive, the corresponding vpush instruction will
1287   // decrease $sp by (8 * Count).
1288   SPOffset -= Count * (IsVector ? 8 : 4);
1289
1290   // Emit the opcode
1291   FlushPendingOffset();
1292   if (IsVector)
1293     UnwindOpAsm.EmitVFPRegSave(Mask);
1294   else
1295     UnwindOpAsm.EmitRegSave(Mask);
1296 }
1297
1298 void ARMELFStreamer::emitUnwindRaw(int64_t Offset,
1299                                    const SmallVectorImpl<uint8_t> &Opcodes) {
1300   FlushPendingOffset();
1301   SPOffset = SPOffset - Offset;
1302   UnwindOpAsm.EmitRaw(Opcodes);
1303 }
1304
1305 namespace llvm {
1306
1307 MCTargetStreamer *createARMTargetAsmStreamer(MCStreamer &S,
1308                                              formatted_raw_ostream &OS,
1309                                              MCInstPrinter *InstPrint,
1310                                              bool isVerboseAsm) {
1311   return new ARMTargetAsmStreamer(S, OS, *InstPrint, isVerboseAsm);
1312 }
1313
1314 MCTargetStreamer *createARMNullTargetStreamer(MCStreamer &S) {
1315   return new ARMTargetStreamer(S);
1316 }
1317
1318 MCTargetStreamer *createARMObjectTargetStreamer(MCStreamer &S,
1319                                                 const MCSubtargetInfo &STI) {
1320   const Triple &TT = STI.getTargetTriple();
1321   if (TT.getObjectFormat() == Triple::ELF)
1322     return new ARMTargetELFStreamer(S);
1323   return new ARMTargetStreamer(S);
1324 }
1325
1326 MCELFStreamer *createARMELFStreamer(MCContext &Context, MCAsmBackend &TAB,
1327                                     raw_pwrite_stream &OS,
1328                                     MCCodeEmitter *Emitter, bool RelaxAll,
1329                                     bool IsThumb) {
1330     ARMELFStreamer *S = new ARMELFStreamer(Context, TAB, OS, Emitter, IsThumb);
1331     // FIXME: This should eventually end up somewhere else where more
1332     // intelligent flag decisions can be made. For now we are just maintaining
1333     // the status quo for ARM and setting EF_ARM_EABI_VER5 as the default.
1334     S->getAssembler().setELFHeaderEFlags(ELF::EF_ARM_EABI_VER5);
1335
1336     if (RelaxAll)
1337       S->getAssembler().setRelaxAll(true);
1338     return S;
1339   }
1340
1341 }
1342
1343