MC/Mach-O/x86_64: Support @GOTPCREL on symbols, even for non-PCrel relocations!
[oota-llvm.git] / lib / MC / MachObjectWriter.cpp
1 //===- lib/MC/MachObjectWriter.cpp - Mach-O File Writer -------------------===//
2 //
3 //                     The LLVM Compiler Infrastructure
4 //
5 // This file is distributed under the University of Illinois Open Source
6 // License. See LICENSE.TXT for details.
7 //
8 //===----------------------------------------------------------------------===//
9
10 #include "llvm/MC/MachObjectWriter.h"
11 #include "llvm/ADT/StringMap.h"
12 #include "llvm/ADT/Twine.h"
13 #include "llvm/MC/MCAssembler.h"
14 #include "llvm/MC/MCAsmLayout.h"
15 #include "llvm/MC/MCExpr.h"
16 #include "llvm/MC/MCObjectWriter.h"
17 #include "llvm/MC/MCSectionMachO.h"
18 #include "llvm/MC/MCSymbol.h"
19 #include "llvm/MC/MCValue.h"
20 #include "llvm/Support/ErrorHandling.h"
21 #include "llvm/Support/MachO.h"
22 #include "llvm/Target/TargetAsmBackend.h"
23
24 // FIXME: Gross.
25 #include "../Target/X86/X86FixupKinds.h"
26
27 #include <vector>
28 using namespace llvm;
29
30 static unsigned getFixupKindLog2Size(unsigned Kind) {
31   switch (Kind) {
32   default: llvm_unreachable("invalid fixup kind!");
33   case X86::reloc_pcrel_1byte:
34   case FK_Data_1: return 0;
35   case FK_Data_2: return 1;
36   case X86::reloc_pcrel_4byte:
37   case X86::reloc_riprel_4byte:
38   case X86::reloc_riprel_4byte_movq_load:
39   case FK_Data_4: return 2;
40   case FK_Data_8: return 3;
41   }
42 }
43
44 static bool isFixupKindPCRel(unsigned Kind) {
45   switch (Kind) {
46   default:
47     return false;
48   case X86::reloc_pcrel_1byte:
49   case X86::reloc_pcrel_4byte:
50   case X86::reloc_riprel_4byte:
51   case X86::reloc_riprel_4byte_movq_load:
52     return true;
53   }
54 }
55
56 static bool isFixupKindRIPRel(unsigned Kind) {
57   return Kind == X86::reloc_riprel_4byte ||
58     Kind == X86::reloc_riprel_4byte_movq_load;
59 }
60
61 namespace {
62
63 class MachObjectWriterImpl {
64   // See <mach-o/loader.h>.
65   enum {
66     Header_Magic32 = 0xFEEDFACE,
67     Header_Magic64 = 0xFEEDFACF
68   };
69
70   enum {
71     Header32Size = 28,
72     Header64Size = 32,
73     SegmentLoadCommand32Size = 56,
74     SegmentLoadCommand64Size = 72,
75     Section32Size = 68,
76     Section64Size = 80,
77     SymtabLoadCommandSize = 24,
78     DysymtabLoadCommandSize = 80,
79     Nlist32Size = 12,
80     Nlist64Size = 16,
81     RelocationInfoSize = 8
82   };
83
84   enum HeaderFileType {
85     HFT_Object = 0x1
86   };
87
88   enum HeaderFlags {
89     HF_SubsectionsViaSymbols = 0x2000
90   };
91
92   enum LoadCommandType {
93     LCT_Segment = 0x1,
94     LCT_Symtab = 0x2,
95     LCT_Dysymtab = 0xb,
96     LCT_Segment64 = 0x19
97   };
98
99   // See <mach-o/nlist.h>.
100   enum SymbolTypeType {
101     STT_Undefined = 0x00,
102     STT_Absolute  = 0x02,
103     STT_Section   = 0x0e
104   };
105
106   enum SymbolTypeFlags {
107     // If any of these bits are set, then the entry is a stab entry number (see
108     // <mach-o/stab.h>. Otherwise the other masks apply.
109     STF_StabsEntryMask = 0xe0,
110
111     STF_TypeMask       = 0x0e,
112     STF_External       = 0x01,
113     STF_PrivateExtern  = 0x10
114   };
115
116   /// IndirectSymbolFlags - Flags for encoding special values in the indirect
117   /// symbol entry.
118   enum IndirectSymbolFlags {
119     ISF_Local    = 0x80000000,
120     ISF_Absolute = 0x40000000
121   };
122
123   /// RelocationFlags - Special flags for addresses.
124   enum RelocationFlags {
125     RF_Scattered = 0x80000000
126   };
127
128   enum RelocationInfoType {
129     RIT_Vanilla             = 0,
130     RIT_Pair                = 1,
131     RIT_Difference          = 2,
132     RIT_PreboundLazyPointer = 3,
133     RIT_LocalDifference     = 4
134   };
135
136   /// X86_64 uses its own relocation types.
137   enum RelocationInfoTypeX86_64 {
138     RIT_X86_64_Unsigned   = 0,
139     RIT_X86_64_Signed     = 1,
140     RIT_X86_64_Branch     = 2,
141     RIT_X86_64_GOTLoad    = 3,
142     RIT_X86_64_GOT        = 4,
143     RIT_X86_64_Subtractor = 5,
144     RIT_X86_64_Signed1    = 6,
145     RIT_X86_64_Signed2    = 7,
146     RIT_X86_64_Signed4    = 8
147   };
148
149   /// MachSymbolData - Helper struct for containing some precomputed information
150   /// on symbols.
151   struct MachSymbolData {
152     MCSymbolData *SymbolData;
153     uint64_t StringIndex;
154     uint8_t SectionIndex;
155
156     // Support lexicographic sorting.
157     bool operator<(const MachSymbolData &RHS) const {
158       const std::string &Name = SymbolData->getSymbol().getName();
159       return Name < RHS.SymbolData->getSymbol().getName();
160     }
161   };
162
163   /// @name Relocation Data
164   /// @{
165
166   struct MachRelocationEntry {
167     uint32_t Word0;
168     uint32_t Word1;
169   };
170
171   llvm::DenseMap<const MCSectionData*,
172                  std::vector<MachRelocationEntry> > Relocations;
173
174   /// @}
175   /// @name Symbol Table Data
176   /// @{
177
178   SmallString<256> StringTable;
179   std::vector<MachSymbolData> LocalSymbolData;
180   std::vector<MachSymbolData> ExternalSymbolData;
181   std::vector<MachSymbolData> UndefinedSymbolData;
182
183   /// @}
184
185   MachObjectWriter *Writer;
186
187   raw_ostream &OS;
188
189   unsigned Is64Bit : 1;
190
191 public:
192   MachObjectWriterImpl(MachObjectWriter *_Writer, bool _Is64Bit)
193     : Writer(_Writer), OS(Writer->getStream()), Is64Bit(_Is64Bit) {
194   }
195
196   void Write8(uint8_t Value) { Writer->Write8(Value); }
197   void Write16(uint16_t Value) { Writer->Write16(Value); }
198   void Write32(uint32_t Value) { Writer->Write32(Value); }
199   void Write64(uint64_t Value) { Writer->Write64(Value); }
200   void WriteZeros(unsigned N) { Writer->WriteZeros(N); }
201   void WriteBytes(StringRef Str, unsigned ZeroFillSize = 0) {
202     Writer->WriteBytes(Str, ZeroFillSize);
203   }
204
205   void WriteHeader(unsigned NumLoadCommands, unsigned LoadCommandsSize,
206                    bool SubsectionsViaSymbols) {
207     uint32_t Flags = 0;
208
209     if (SubsectionsViaSymbols)
210       Flags |= HF_SubsectionsViaSymbols;
211
212     // struct mach_header (28 bytes) or
213     // struct mach_header_64 (32 bytes)
214
215     uint64_t Start = OS.tell();
216     (void) Start;
217
218     Write32(Is64Bit ? Header_Magic64 : Header_Magic32);
219
220     // FIXME: Support cputype.
221     Write32(Is64Bit ? MachO::CPUTypeX86_64 : MachO::CPUTypeI386);
222     // FIXME: Support cpusubtype.
223     Write32(MachO::CPUSubType_I386_ALL);
224     Write32(HFT_Object);
225     Write32(NumLoadCommands);    // Object files have a single load command, the
226                                  // segment.
227     Write32(LoadCommandsSize);
228     Write32(Flags);
229     if (Is64Bit)
230       Write32(0); // reserved
231
232     assert(OS.tell() - Start == Is64Bit ? Header64Size : Header32Size);
233   }
234
235   /// WriteSegmentLoadCommand - Write a segment load command.
236   ///
237   /// \arg NumSections - The number of sections in this segment.
238   /// \arg SectionDataSize - The total size of the sections.
239   void WriteSegmentLoadCommand(unsigned NumSections,
240                                uint64_t VMSize,
241                                uint64_t SectionDataStartOffset,
242                                uint64_t SectionDataSize) {
243     // struct segment_command (56 bytes) or
244     // struct segment_command_64 (72 bytes)
245
246     uint64_t Start = OS.tell();
247     (void) Start;
248
249     unsigned SegmentLoadCommandSize = Is64Bit ? SegmentLoadCommand64Size :
250       SegmentLoadCommand32Size;
251     Write32(Is64Bit ? LCT_Segment64 : LCT_Segment);
252     Write32(SegmentLoadCommandSize +
253             NumSections * (Is64Bit ? Section64Size : Section32Size));
254
255     WriteBytes("", 16);
256     if (Is64Bit) {
257       Write64(0); // vmaddr
258       Write64(VMSize); // vmsize
259       Write64(SectionDataStartOffset); // file offset
260       Write64(SectionDataSize); // file size
261     } else {
262       Write32(0); // vmaddr
263       Write32(VMSize); // vmsize
264       Write32(SectionDataStartOffset); // file offset
265       Write32(SectionDataSize); // file size
266     }
267     Write32(0x7); // maxprot
268     Write32(0x7); // initprot
269     Write32(NumSections);
270     Write32(0); // flags
271
272     assert(OS.tell() - Start == SegmentLoadCommandSize);
273   }
274
275   void WriteSection(const MCAssembler &Asm, const MCAsmLayout &Layout,
276                     const MCSectionData &SD, uint64_t FileOffset,
277                     uint64_t RelocationsStart, unsigned NumRelocations) {
278     uint64_t SectionSize = Layout.getSectionSize(&SD);
279
280     // The offset is unused for virtual sections.
281     if (Asm.getBackend().isVirtualSection(SD.getSection())) {
282       assert(Layout.getSectionFileSize(&SD) == 0 && "Invalid file size!");
283       FileOffset = 0;
284     }
285
286     // struct section (68 bytes) or
287     // struct section_64 (80 bytes)
288
289     uint64_t Start = OS.tell();
290     (void) Start;
291
292     // FIXME: cast<> support!
293     const MCSectionMachO &Section =
294       static_cast<const MCSectionMachO&>(SD.getSection());
295     WriteBytes(Section.getSectionName(), 16);
296     WriteBytes(Section.getSegmentName(), 16);
297     if (Is64Bit) {
298       Write64(Layout.getSectionAddress(&SD)); // address
299       Write64(SectionSize); // size
300     } else {
301       Write32(Layout.getSectionAddress(&SD)); // address
302       Write32(SectionSize); // size
303     }
304     Write32(FileOffset);
305
306     unsigned Flags = Section.getTypeAndAttributes();
307     if (SD.hasInstructions())
308       Flags |= MCSectionMachO::S_ATTR_SOME_INSTRUCTIONS;
309
310     assert(isPowerOf2_32(SD.getAlignment()) && "Invalid alignment!");
311     Write32(Log2_32(SD.getAlignment()));
312     Write32(NumRelocations ? RelocationsStart : 0);
313     Write32(NumRelocations);
314     Write32(Flags);
315     Write32(0); // reserved1
316     Write32(Section.getStubSize()); // reserved2
317     if (Is64Bit)
318       Write32(0); // reserved3
319
320     assert(OS.tell() - Start == Is64Bit ? Section64Size : Section32Size);
321   }
322
323   void WriteSymtabLoadCommand(uint32_t SymbolOffset, uint32_t NumSymbols,
324                               uint32_t StringTableOffset,
325                               uint32_t StringTableSize) {
326     // struct symtab_command (24 bytes)
327
328     uint64_t Start = OS.tell();
329     (void) Start;
330
331     Write32(LCT_Symtab);
332     Write32(SymtabLoadCommandSize);
333     Write32(SymbolOffset);
334     Write32(NumSymbols);
335     Write32(StringTableOffset);
336     Write32(StringTableSize);
337
338     assert(OS.tell() - Start == SymtabLoadCommandSize);
339   }
340
341   void WriteDysymtabLoadCommand(uint32_t FirstLocalSymbol,
342                                 uint32_t NumLocalSymbols,
343                                 uint32_t FirstExternalSymbol,
344                                 uint32_t NumExternalSymbols,
345                                 uint32_t FirstUndefinedSymbol,
346                                 uint32_t NumUndefinedSymbols,
347                                 uint32_t IndirectSymbolOffset,
348                                 uint32_t NumIndirectSymbols) {
349     // struct dysymtab_command (80 bytes)
350
351     uint64_t Start = OS.tell();
352     (void) Start;
353
354     Write32(LCT_Dysymtab);
355     Write32(DysymtabLoadCommandSize);
356     Write32(FirstLocalSymbol);
357     Write32(NumLocalSymbols);
358     Write32(FirstExternalSymbol);
359     Write32(NumExternalSymbols);
360     Write32(FirstUndefinedSymbol);
361     Write32(NumUndefinedSymbols);
362     Write32(0); // tocoff
363     Write32(0); // ntoc
364     Write32(0); // modtaboff
365     Write32(0); // nmodtab
366     Write32(0); // extrefsymoff
367     Write32(0); // nextrefsyms
368     Write32(IndirectSymbolOffset);
369     Write32(NumIndirectSymbols);
370     Write32(0); // extreloff
371     Write32(0); // nextrel
372     Write32(0); // locreloff
373     Write32(0); // nlocrel
374
375     assert(OS.tell() - Start == DysymtabLoadCommandSize);
376   }
377
378   void WriteNlist(MachSymbolData &MSD, const MCAsmLayout &Layout) {
379     MCSymbolData &Data = *MSD.SymbolData;
380     const MCSymbol &Symbol = Data.getSymbol();
381     uint8_t Type = 0;
382     uint16_t Flags = Data.getFlags();
383     uint32_t Address = 0;
384
385     // Set the N_TYPE bits. See <mach-o/nlist.h>.
386     //
387     // FIXME: Are the prebound or indirect fields possible here?
388     if (Symbol.isUndefined())
389       Type = STT_Undefined;
390     else if (Symbol.isAbsolute())
391       Type = STT_Absolute;
392     else
393       Type = STT_Section;
394
395     // FIXME: Set STAB bits.
396
397     if (Data.isPrivateExtern())
398       Type |= STF_PrivateExtern;
399
400     // Set external bit.
401     if (Data.isExternal() || Symbol.isUndefined())
402       Type |= STF_External;
403
404     // Compute the symbol address.
405     if (Symbol.isDefined()) {
406       if (Symbol.isAbsolute()) {
407         llvm_unreachable("FIXME: Not yet implemented!");
408       } else {
409         Address = Layout.getSymbolAddress(&Data);
410       }
411     } else if (Data.isCommon()) {
412       // Common symbols are encoded with the size in the address
413       // field, and their alignment in the flags.
414       Address = Data.getCommonSize();
415
416       // Common alignment is packed into the 'desc' bits.
417       if (unsigned Align = Data.getCommonAlignment()) {
418         unsigned Log2Size = Log2_32(Align);
419         assert((1U << Log2Size) == Align && "Invalid 'common' alignment!");
420         if (Log2Size > 15)
421           llvm_report_error("invalid 'common' alignment '" +
422                             Twine(Align) + "'");
423         // FIXME: Keep this mask with the SymbolFlags enumeration.
424         Flags = (Flags & 0xF0FF) | (Log2Size << 8);
425       }
426     }
427
428     // struct nlist (12 bytes)
429
430     Write32(MSD.StringIndex);
431     Write8(Type);
432     Write8(MSD.SectionIndex);
433
434     // The Mach-O streamer uses the lowest 16-bits of the flags for the 'desc'
435     // value.
436     Write16(Flags);
437     if (Is64Bit)
438       Write64(Address);
439     else
440       Write32(Address);
441   }
442
443   // FIXME: We really need to improve the relocation validation. Basically, we
444   // want to implement a separate computation which evaluates the relocation
445   // entry as the linker would, and verifies that the resultant fixup value is
446   // exactly what the encoder wanted. This will catch several classes of
447   // problems:
448   //
449   //  - Relocation entry bugs, the two algorithms are unlikely to have the same
450   //    exact bug.
451   //
452   //  - Relaxation issues, where we forget to relax something.
453   //
454   //  - Input errors, where something cannot be correctly encoded. 'as' allows
455   //    these through in many cases.
456
457   void RecordX86_64Relocation(const MCAssembler &Asm, const MCAsmLayout &Layout,
458                               const MCFragment *Fragment,
459                               const MCAsmFixup &Fixup, MCValue Target,
460                               uint64_t &FixedValue) {
461     unsigned IsPCRel = isFixupKindPCRel(Fixup.Kind);
462     unsigned IsRIPRel = isFixupKindRIPRel(Fixup.Kind);
463     unsigned Log2Size = getFixupKindLog2Size(Fixup.Kind);
464
465     // See <reloc.h>.
466     uint32_t Address = Layout.getFragmentOffset(Fragment) + Fixup.Offset;
467     int64_t Value = 0;
468     unsigned Index = 0;
469     unsigned IsExtern = 0;
470     unsigned Type = 0;
471
472     Value = Target.getConstant();
473
474     if (IsPCRel) {
475       // Compensate for the relocation offset, Darwin x86_64 relocations only
476       // have the addend and appear to have attempted to define it to be the
477       // actual expression addend without the PCrel bias. However, instructions
478       // with data following the relocation are not accomodated for (see comment
479       // below regarding SIGNED{1,2,4}), so it isn't exactly that either.
480       Value += 1 << Log2Size;
481     }
482
483     if (Target.isAbsolute()) { // constant
484       // SymbolNum of 0 indicates the absolute section.
485       Type = RIT_X86_64_Unsigned;
486       Index = 0;
487
488       // FIXME: I believe this is broken, I don't think the linker can
489       // understand it. I think it would require a local relocation, but I'm not
490       // sure if that would work either. The official way to get an absolute
491       // PCrel relocation is to use an absolute symbol (which we don't support
492       // yet).
493       if (IsPCRel) {
494         IsExtern = 1;
495         Type = RIT_X86_64_Branch;
496       }
497     } else if (Target.getSymB()) { // A - B + constant
498       const MCSymbol *A = &Target.getSymA()->getSymbol();
499       MCSymbolData &A_SD = Asm.getSymbolData(*A);
500       const MCSymbolData *A_Base = Asm.getAtom(Layout, &A_SD);
501
502       const MCSymbol *B = &Target.getSymB()->getSymbol();
503       MCSymbolData &B_SD = Asm.getSymbolData(*B);
504       const MCSymbolData *B_Base = Asm.getAtom(Layout, &B_SD);
505
506       // Neither symbol can be modified.
507       if (Target.getSymA()->getKind() != MCSymbolRefExpr::VK_None ||
508           Target.getSymB()->getKind() != MCSymbolRefExpr::VK_None)
509         llvm_report_error("unsupported relocation of modified symbol");
510
511       // We don't support PCrel relocations of differences. Darwin 'as' doesn't
512       // implement most of these correctly.
513       if (IsPCRel)
514         llvm_report_error("unsupported pc-relative relocation of difference");
515
516       // We don't currently support any situation where one or both of the
517       // symbols would require a local relocation. This is almost certainly
518       // unused and may not be possible to encode correctly.
519       if (!A_Base || !B_Base)
520         llvm_report_error("unsupported local relocations in difference");
521
522       // Darwin 'as' doesn't emit correct relocations for this (it ends up with
523       // a single SIGNED relocation); reject it for now.
524       if (A_Base == B_Base)
525         llvm_report_error("unsupported relocation with identical base");
526
527       Value += Layout.getSymbolAddress(&A_SD) - Layout.getSymbolAddress(A_Base);
528       Value -= Layout.getSymbolAddress(&B_SD) - Layout.getSymbolAddress(B_Base);
529
530       Index = A_Base->getIndex();
531       IsExtern = 1;
532       Type = RIT_X86_64_Unsigned;
533
534       MachRelocationEntry MRE;
535       MRE.Word0 = Address;
536       MRE.Word1 = ((Index     <<  0) |
537                    (IsPCRel   << 24) |
538                    (Log2Size  << 25) |
539                    (IsExtern  << 27) |
540                    (Type      << 28));
541       Relocations[Fragment->getParent()].push_back(MRE);
542
543       Index = B_Base->getIndex();
544       IsExtern = 1;
545       Type = RIT_X86_64_Subtractor;
546     } else {
547       const MCSymbol *Symbol = &Target.getSymA()->getSymbol();
548       MCSymbolData &SD = Asm.getSymbolData(*Symbol);
549       const MCSymbolData *Base = Asm.getAtom(Layout, &SD);
550
551       // x86_64 almost always uses external relocations, except when there is no
552       // symbol to use as a base address (a local symbol with no preceeding
553       // non-local symbol).
554       if (Base) {
555         Index = Base->getIndex();
556         IsExtern = 1;
557
558         // Add the local offset, if needed.
559         if (Base != &SD)
560           Value += Layout.getSymbolAddress(&SD) - Layout.getSymbolAddress(Base);
561       } else {
562         // The index is the section ordinal (1-based).
563         Index = SD.getFragment()->getParent()->getOrdinal() + 1;
564         IsExtern = 0;
565         Value += Layout.getSymbolAddress(&SD);
566
567         if (IsPCRel)
568           Value -= Address + (1 << Log2Size);
569       }
570
571       MCSymbolRefExpr::VariantKind Modifier = Target.getSymA()->getKind();
572       if (IsPCRel) {
573         if (IsRIPRel) {
574           if (Modifier == MCSymbolRefExpr::VK_GOTPCREL) {
575             // x86_64 distinguishes movq foo@GOTPCREL so that the linker can
576             // rewrite the movq to an leaq at link time if the symbol ends up in
577             // the same linkage unit.
578             if (unsigned(Fixup.Kind) == X86::reloc_riprel_4byte_movq_load)
579               Type = RIT_X86_64_GOTLoad;
580             else
581               Type = RIT_X86_64_GOT;
582           } else if (Modifier != MCSymbolRefExpr::VK_None)
583             llvm_report_error("unsupported symbol modifier in relocation");
584           else
585             Type = RIT_X86_64_Signed;
586         } else {
587           if (Modifier != MCSymbolRefExpr::VK_None)
588             llvm_report_error("unsupported symbol modifier in branch "
589                               "relocation");
590
591           Type = RIT_X86_64_Branch;
592         }
593
594         // The Darwin x86_64 relocation format has a problem where it cannot
595         // encode an address (L<foo> + <constant>) which is outside the atom
596         // containing L<foo>. Generally, this shouldn't occur but it does happen
597         // when we have a RIPrel instruction with data following the relocation
598         // entry (e.g., movb $012, L0(%rip)). Even with the PCrel adjustment
599         // Darwin x86_64 uses, the offset is still negative and the linker has
600         // no way to recognize this.
601         //
602         // To work around this, Darwin uses several special relocation types to
603         // indicate the offsets. However, the specification or implementation of
604         // these seems to also be incomplete; they should adjust the addend as
605         // well based on the actual encoded instruction (the additional bias),
606         // but instead appear to just look at the final offset.
607         if (IsRIPRel) {
608           switch (-(Target.getConstant() + (1 << Log2Size))) {
609           case 1: Type = RIT_X86_64_Signed1; break;
610           case 2: Type = RIT_X86_64_Signed2; break;
611           case 4: Type = RIT_X86_64_Signed4; break;
612           }
613         }
614       } else {
615         if (Modifier == MCSymbolRefExpr::VK_GOT) {
616           Type = RIT_X86_64_GOT;
617         } else if (Modifier == MCSymbolRefExpr::VK_GOTPCREL) {
618           // GOTPCREL is allowed as a modifier on non-PCrel instructions, in
619           // which case all we do is set the PCrel bit in the relocation entry;
620           // this is used with exception handling, for example. The source is
621           // required to include any necessary offset directly.
622           Type = RIT_X86_64_GOT;
623           IsPCRel = 1;
624         } else if (Modifier != MCSymbolRefExpr::VK_None)
625           llvm_report_error("unsupported symbol modifier in relocation");
626         else
627           Type = RIT_X86_64_Unsigned;
628       }
629     }
630
631     // x86_64 always writes custom values into the fixups.
632     FixedValue = Value;
633
634     // struct relocation_info (8 bytes)
635     MachRelocationEntry MRE;
636     MRE.Word0 = Address;
637     MRE.Word1 = ((Index     <<  0) |
638                  (IsPCRel   << 24) |
639                  (Log2Size  << 25) |
640                  (IsExtern  << 27) |
641                  (Type      << 28));
642     Relocations[Fragment->getParent()].push_back(MRE);
643   }
644
645   void RecordScatteredRelocation(const MCAssembler &Asm,
646                                  const MCAsmLayout &Layout,
647                                  const MCFragment *Fragment,
648                                  const MCAsmFixup &Fixup, MCValue Target,
649                                  uint64_t &FixedValue) {
650     uint32_t Address = Layout.getFragmentOffset(Fragment) + Fixup.Offset;
651     unsigned IsPCRel = isFixupKindPCRel(Fixup.Kind);
652     unsigned Log2Size = getFixupKindLog2Size(Fixup.Kind);
653     unsigned Type = RIT_Vanilla;
654
655     // See <reloc.h>.
656     const MCSymbol *A = &Target.getSymA()->getSymbol();
657     MCSymbolData *A_SD = &Asm.getSymbolData(*A);
658
659     if (!A_SD->getFragment())
660       llvm_report_error("symbol '" + A->getName() +
661                         "' can not be undefined in a subtraction expression");
662
663     uint32_t Value = Layout.getSymbolAddress(A_SD);
664     uint32_t Value2 = 0;
665
666     if (const MCSymbolRefExpr *B = Target.getSymB()) {
667       MCSymbolData *B_SD = &Asm.getSymbolData(B->getSymbol());
668
669       if (!B_SD->getFragment())
670         llvm_report_error("symbol '" + B->getSymbol().getName() +
671                           "' can not be undefined in a subtraction expression");
672
673       // Select the appropriate difference relocation type.
674       //
675       // Note that there is no longer any semantic difference between these two
676       // relocation types from the linkers point of view, this is done solely
677       // for pedantic compatibility with 'as'.
678       Type = A_SD->isExternal() ? RIT_Difference : RIT_LocalDifference;
679       Value2 = Layout.getSymbolAddress(B_SD);
680     }
681
682     // Relocations are written out in reverse order, so the PAIR comes first.
683     if (Type == RIT_Difference || Type == RIT_LocalDifference) {
684       MachRelocationEntry MRE;
685       MRE.Word0 = ((0         <<  0) |
686                    (RIT_Pair  << 24) |
687                    (Log2Size  << 28) |
688                    (IsPCRel   << 30) |
689                    RF_Scattered);
690       MRE.Word1 = Value2;
691       Relocations[Fragment->getParent()].push_back(MRE);
692     }
693
694     MachRelocationEntry MRE;
695     MRE.Word0 = ((Address   <<  0) |
696                  (Type      << 24) |
697                  (Log2Size  << 28) |
698                  (IsPCRel   << 30) |
699                  RF_Scattered);
700     MRE.Word1 = Value;
701     Relocations[Fragment->getParent()].push_back(MRE);
702   }
703
704   void RecordRelocation(const MCAssembler &Asm, const MCAsmLayout &Layout,
705                         const MCFragment *Fragment, const MCAsmFixup &Fixup,
706                         MCValue Target, uint64_t &FixedValue) {
707     if (Is64Bit) {
708       RecordX86_64Relocation(Asm, Layout, Fragment, Fixup, Target, FixedValue);
709       return;
710     }
711
712     unsigned IsPCRel = isFixupKindPCRel(Fixup.Kind);
713     unsigned Log2Size = getFixupKindLog2Size(Fixup.Kind);
714
715     // If this is a difference or a defined symbol plus an offset, then we need
716     // a scattered relocation entry.
717     uint32_t Offset = Target.getConstant();
718     if (IsPCRel)
719       Offset += 1 << Log2Size;
720     if (Target.getSymB() ||
721         (Target.getSymA() && !Target.getSymA()->getSymbol().isUndefined() &&
722          Offset)) {
723       RecordScatteredRelocation(Asm, Layout, Fragment, Fixup,Target,FixedValue);
724       return;
725     }
726
727     // See <reloc.h>.
728     uint32_t Address = Layout.getFragmentOffset(Fragment) + Fixup.Offset;
729     uint32_t Value = 0;
730     unsigned Index = 0;
731     unsigned IsExtern = 0;
732     unsigned Type = 0;
733
734     if (Target.isAbsolute()) { // constant
735       // SymbolNum of 0 indicates the absolute section.
736       //
737       // FIXME: Currently, these are never generated (see code below). I cannot
738       // find a case where they are actually emitted.
739       Type = RIT_Vanilla;
740       Value = 0;
741     } else {
742       const MCSymbol *Symbol = &Target.getSymA()->getSymbol();
743       MCSymbolData *SD = &Asm.getSymbolData(*Symbol);
744
745       if (Symbol->isUndefined()) {
746         IsExtern = 1;
747         Index = SD->getIndex();
748         Value = 0;
749       } else {
750         // The index is the section ordinal (1-based).
751         Index = SD->getFragment()->getParent()->getOrdinal() + 1;
752         Value = Layout.getSymbolAddress(SD);
753       }
754
755       Type = RIT_Vanilla;
756     }
757
758     // struct relocation_info (8 bytes)
759     MachRelocationEntry MRE;
760     MRE.Word0 = Address;
761     MRE.Word1 = ((Index     <<  0) |
762                  (IsPCRel   << 24) |
763                  (Log2Size  << 25) |
764                  (IsExtern  << 27) |
765                  (Type      << 28));
766     Relocations[Fragment->getParent()].push_back(MRE);
767   }
768
769   void BindIndirectSymbols(MCAssembler &Asm) {
770     // This is the point where 'as' creates actual symbols for indirect symbols
771     // (in the following two passes). It would be easier for us to do this
772     // sooner when we see the attribute, but that makes getting the order in the
773     // symbol table much more complicated than it is worth.
774     //
775     // FIXME: Revisit this when the dust settles.
776
777     // Bind non lazy symbol pointers first.
778     for (MCAssembler::indirect_symbol_iterator it = Asm.indirect_symbol_begin(),
779            ie = Asm.indirect_symbol_end(); it != ie; ++it) {
780       // FIXME: cast<> support!
781       const MCSectionMachO &Section =
782         static_cast<const MCSectionMachO&>(it->SectionData->getSection());
783
784       if (Section.getType() != MCSectionMachO::S_NON_LAZY_SYMBOL_POINTERS)
785         continue;
786
787       Asm.getOrCreateSymbolData(*it->Symbol);
788     }
789
790     // Then lazy symbol pointers and symbol stubs.
791     for (MCAssembler::indirect_symbol_iterator it = Asm.indirect_symbol_begin(),
792            ie = Asm.indirect_symbol_end(); it != ie; ++it) {
793       // FIXME: cast<> support!
794       const MCSectionMachO &Section =
795         static_cast<const MCSectionMachO&>(it->SectionData->getSection());
796
797       if (Section.getType() != MCSectionMachO::S_LAZY_SYMBOL_POINTERS &&
798           Section.getType() != MCSectionMachO::S_SYMBOL_STUBS)
799         continue;
800
801       // Set the symbol type to undefined lazy, but only on construction.
802       //
803       // FIXME: Do not hardcode.
804       bool Created;
805       MCSymbolData &Entry = Asm.getOrCreateSymbolData(*it->Symbol, &Created);
806       if (Created)
807         Entry.setFlags(Entry.getFlags() | 0x0001);
808     }
809   }
810
811   /// ComputeSymbolTable - Compute the symbol table data
812   ///
813   /// \param StringTable [out] - The string table data.
814   /// \param StringIndexMap [out] - Map from symbol names to offsets in the
815   /// string table.
816   void ComputeSymbolTable(MCAssembler &Asm, SmallString<256> &StringTable,
817                           std::vector<MachSymbolData> &LocalSymbolData,
818                           std::vector<MachSymbolData> &ExternalSymbolData,
819                           std::vector<MachSymbolData> &UndefinedSymbolData) {
820     // Build section lookup table.
821     DenseMap<const MCSection*, uint8_t> SectionIndexMap;
822     unsigned Index = 1;
823     for (MCAssembler::iterator it = Asm.begin(),
824            ie = Asm.end(); it != ie; ++it, ++Index)
825       SectionIndexMap[&it->getSection()] = Index;
826     assert(Index <= 256 && "Too many sections!");
827
828     // Index 0 is always the empty string.
829     StringMap<uint64_t> StringIndexMap;
830     StringTable += '\x00';
831
832     // Build the symbol arrays and the string table, but only for non-local
833     // symbols.
834     //
835     // The particular order that we collect the symbols and create the string
836     // table, then sort the symbols is chosen to match 'as'. Even though it
837     // doesn't matter for correctness, this is important for letting us diff .o
838     // files.
839     for (MCAssembler::symbol_iterator it = Asm.symbol_begin(),
840            ie = Asm.symbol_end(); it != ie; ++it) {
841       const MCSymbol &Symbol = it->getSymbol();
842
843       // Ignore non-linker visible symbols.
844       if (!Asm.isSymbolLinkerVisible(it))
845         continue;
846
847       if (!it->isExternal() && !Symbol.isUndefined())
848         continue;
849
850       uint64_t &Entry = StringIndexMap[Symbol.getName()];
851       if (!Entry) {
852         Entry = StringTable.size();
853         StringTable += Symbol.getName();
854         StringTable += '\x00';
855       }
856
857       MachSymbolData MSD;
858       MSD.SymbolData = it;
859       MSD.StringIndex = Entry;
860
861       if (Symbol.isUndefined()) {
862         MSD.SectionIndex = 0;
863         UndefinedSymbolData.push_back(MSD);
864       } else if (Symbol.isAbsolute()) {
865         MSD.SectionIndex = 0;
866         ExternalSymbolData.push_back(MSD);
867       } else {
868         MSD.SectionIndex = SectionIndexMap.lookup(&Symbol.getSection());
869         assert(MSD.SectionIndex && "Invalid section index!");
870         ExternalSymbolData.push_back(MSD);
871       }
872     }
873
874     // Now add the data for local symbols.
875     for (MCAssembler::symbol_iterator it = Asm.symbol_begin(),
876            ie = Asm.symbol_end(); it != ie; ++it) {
877       const MCSymbol &Symbol = it->getSymbol();
878
879       // Ignore non-linker visible symbols.
880       if (!Asm.isSymbolLinkerVisible(it))
881         continue;
882
883       if (it->isExternal() || Symbol.isUndefined())
884         continue;
885
886       uint64_t &Entry = StringIndexMap[Symbol.getName()];
887       if (!Entry) {
888         Entry = StringTable.size();
889         StringTable += Symbol.getName();
890         StringTable += '\x00';
891       }
892
893       MachSymbolData MSD;
894       MSD.SymbolData = it;
895       MSD.StringIndex = Entry;
896
897       if (Symbol.isAbsolute()) {
898         MSD.SectionIndex = 0;
899         LocalSymbolData.push_back(MSD);
900       } else {
901         MSD.SectionIndex = SectionIndexMap.lookup(&Symbol.getSection());
902         assert(MSD.SectionIndex && "Invalid section index!");
903         LocalSymbolData.push_back(MSD);
904       }
905     }
906
907     // External and undefined symbols are required to be in lexicographic order.
908     std::sort(ExternalSymbolData.begin(), ExternalSymbolData.end());
909     std::sort(UndefinedSymbolData.begin(), UndefinedSymbolData.end());
910
911     // Set the symbol indices.
912     Index = 0;
913     for (unsigned i = 0, e = LocalSymbolData.size(); i != e; ++i)
914       LocalSymbolData[i].SymbolData->setIndex(Index++);
915     for (unsigned i = 0, e = ExternalSymbolData.size(); i != e; ++i)
916       ExternalSymbolData[i].SymbolData->setIndex(Index++);
917     for (unsigned i = 0, e = UndefinedSymbolData.size(); i != e; ++i)
918       UndefinedSymbolData[i].SymbolData->setIndex(Index++);
919
920     // The string table is padded to a multiple of 4.
921     while (StringTable.size() % 4)
922       StringTable += '\x00';
923   }
924
925   void ExecutePostLayoutBinding(MCAssembler &Asm) {
926     // Create symbol data for any indirect symbols.
927     BindIndirectSymbols(Asm);
928
929     // Compute symbol table information and bind symbol indices.
930     ComputeSymbolTable(Asm, StringTable, LocalSymbolData, ExternalSymbolData,
931                        UndefinedSymbolData);
932   }
933
934   void WriteObject(const MCAssembler &Asm, const MCAsmLayout &Layout) {
935     unsigned NumSections = Asm.size();
936
937     // The section data starts after the header, the segment load command (and
938     // section headers) and the symbol table.
939     unsigned NumLoadCommands = 1;
940     uint64_t LoadCommandsSize = Is64Bit ?
941       SegmentLoadCommand64Size + NumSections * Section64Size :
942       SegmentLoadCommand32Size + NumSections * Section32Size;
943
944     // Add the symbol table load command sizes, if used.
945     unsigned NumSymbols = LocalSymbolData.size() + ExternalSymbolData.size() +
946       UndefinedSymbolData.size();
947     if (NumSymbols) {
948       NumLoadCommands += 2;
949       LoadCommandsSize += SymtabLoadCommandSize + DysymtabLoadCommandSize;
950     }
951
952     // Compute the total size of the section data, as well as its file size and
953     // vm size.
954     uint64_t SectionDataStart = (Is64Bit ? Header64Size : Header32Size)
955       + LoadCommandsSize;
956     uint64_t SectionDataSize = 0;
957     uint64_t SectionDataFileSize = 0;
958     uint64_t VMSize = 0;
959     for (MCAssembler::const_iterator it = Asm.begin(),
960            ie = Asm.end(); it != ie; ++it) {
961       const MCSectionData &SD = *it;
962       uint64_t Address = Layout.getSectionAddress(&SD);
963       uint64_t Size = Layout.getSectionSize(&SD);
964       uint64_t FileSize = Layout.getSectionFileSize(&SD);
965
966       VMSize = std::max(VMSize, Address + Size);
967
968       if (Asm.getBackend().isVirtualSection(SD.getSection()))
969         continue;
970
971       SectionDataSize = std::max(SectionDataSize, Address + Size);
972       SectionDataFileSize = std::max(SectionDataFileSize, Address + FileSize);
973     }
974
975     // The section data is padded to 4 bytes.
976     //
977     // FIXME: Is this machine dependent?
978     unsigned SectionDataPadding = OffsetToAlignment(SectionDataFileSize, 4);
979     SectionDataFileSize += SectionDataPadding;
980
981     // Write the prolog, starting with the header and load command...
982     WriteHeader(NumLoadCommands, LoadCommandsSize,
983                 Asm.getSubsectionsViaSymbols());
984     WriteSegmentLoadCommand(NumSections, VMSize,
985                             SectionDataStart, SectionDataSize);
986
987     // ... and then the section headers.
988     uint64_t RelocTableEnd = SectionDataStart + SectionDataFileSize;
989     for (MCAssembler::const_iterator it = Asm.begin(),
990            ie = Asm.end(); it != ie; ++it) {
991       std::vector<MachRelocationEntry> &Relocs = Relocations[it];
992       unsigned NumRelocs = Relocs.size();
993       uint64_t SectionStart = SectionDataStart + Layout.getSectionAddress(it);
994       WriteSection(Asm, Layout, *it, SectionStart, RelocTableEnd, NumRelocs);
995       RelocTableEnd += NumRelocs * RelocationInfoSize;
996     }
997
998     // Write the symbol table load command, if used.
999     if (NumSymbols) {
1000       unsigned FirstLocalSymbol = 0;
1001       unsigned NumLocalSymbols = LocalSymbolData.size();
1002       unsigned FirstExternalSymbol = FirstLocalSymbol + NumLocalSymbols;
1003       unsigned NumExternalSymbols = ExternalSymbolData.size();
1004       unsigned FirstUndefinedSymbol = FirstExternalSymbol + NumExternalSymbols;
1005       unsigned NumUndefinedSymbols = UndefinedSymbolData.size();
1006       unsigned NumIndirectSymbols = Asm.indirect_symbol_size();
1007       unsigned NumSymTabSymbols =
1008         NumLocalSymbols + NumExternalSymbols + NumUndefinedSymbols;
1009       uint64_t IndirectSymbolSize = NumIndirectSymbols * 4;
1010       uint64_t IndirectSymbolOffset = 0;
1011
1012       // If used, the indirect symbols are written after the section data.
1013       if (NumIndirectSymbols)
1014         IndirectSymbolOffset = RelocTableEnd;
1015
1016       // The symbol table is written after the indirect symbol data.
1017       uint64_t SymbolTableOffset = RelocTableEnd + IndirectSymbolSize;
1018
1019       // The string table is written after symbol table.
1020       uint64_t StringTableOffset =
1021         SymbolTableOffset + NumSymTabSymbols * (Is64Bit ? Nlist64Size :
1022                                                 Nlist32Size);
1023       WriteSymtabLoadCommand(SymbolTableOffset, NumSymTabSymbols,
1024                              StringTableOffset, StringTable.size());
1025
1026       WriteDysymtabLoadCommand(FirstLocalSymbol, NumLocalSymbols,
1027                                FirstExternalSymbol, NumExternalSymbols,
1028                                FirstUndefinedSymbol, NumUndefinedSymbols,
1029                                IndirectSymbolOffset, NumIndirectSymbols);
1030     }
1031
1032     // Write the actual section data.
1033     for (MCAssembler::const_iterator it = Asm.begin(),
1034            ie = Asm.end(); it != ie; ++it)
1035       Asm.WriteSectionData(it, Layout, Writer);
1036
1037     // Write the extra padding.
1038     WriteZeros(SectionDataPadding);
1039
1040     // Write the relocation entries.
1041     for (MCAssembler::const_iterator it = Asm.begin(),
1042            ie = Asm.end(); it != ie; ++it) {
1043       // Write the section relocation entries, in reverse order to match 'as'
1044       // (approximately, the exact algorithm is more complicated than this).
1045       std::vector<MachRelocationEntry> &Relocs = Relocations[it];
1046       for (unsigned i = 0, e = Relocs.size(); i != e; ++i) {
1047         Write32(Relocs[e - i - 1].Word0);
1048         Write32(Relocs[e - i - 1].Word1);
1049       }
1050     }
1051
1052     // Write the symbol table data, if used.
1053     if (NumSymbols) {
1054       // Write the indirect symbol entries.
1055       for (MCAssembler::const_indirect_symbol_iterator
1056              it = Asm.indirect_symbol_begin(),
1057              ie = Asm.indirect_symbol_end(); it != ie; ++it) {
1058         // Indirect symbols in the non lazy symbol pointer section have some
1059         // special handling.
1060         const MCSectionMachO &Section =
1061           static_cast<const MCSectionMachO&>(it->SectionData->getSection());
1062         if (Section.getType() == MCSectionMachO::S_NON_LAZY_SYMBOL_POINTERS) {
1063           // If this symbol is defined and internal, mark it as such.
1064           if (it->Symbol->isDefined() &&
1065               !Asm.getSymbolData(*it->Symbol).isExternal()) {
1066             uint32_t Flags = ISF_Local;
1067             if (it->Symbol->isAbsolute())
1068               Flags |= ISF_Absolute;
1069             Write32(Flags);
1070             continue;
1071           }
1072         }
1073
1074         Write32(Asm.getSymbolData(*it->Symbol).getIndex());
1075       }
1076
1077       // FIXME: Check that offsets match computed ones.
1078
1079       // Write the symbol table entries.
1080       for (unsigned i = 0, e = LocalSymbolData.size(); i != e; ++i)
1081         WriteNlist(LocalSymbolData[i], Layout);
1082       for (unsigned i = 0, e = ExternalSymbolData.size(); i != e; ++i)
1083         WriteNlist(ExternalSymbolData[i], Layout);
1084       for (unsigned i = 0, e = UndefinedSymbolData.size(); i != e; ++i)
1085         WriteNlist(UndefinedSymbolData[i], Layout);
1086
1087       // Write the string table.
1088       OS << StringTable.str();
1089     }
1090   }
1091 };
1092
1093 }
1094
1095 MachObjectWriter::MachObjectWriter(raw_ostream &OS,
1096                                    bool Is64Bit,
1097                                    bool IsLittleEndian)
1098   : MCObjectWriter(OS, IsLittleEndian)
1099 {
1100   Impl = new MachObjectWriterImpl(this, Is64Bit);
1101 }
1102
1103 MachObjectWriter::~MachObjectWriter() {
1104   delete (MachObjectWriterImpl*) Impl;
1105 }
1106
1107 void MachObjectWriter::ExecutePostLayoutBinding(MCAssembler &Asm) {
1108   ((MachObjectWriterImpl*) Impl)->ExecutePostLayoutBinding(Asm);
1109 }
1110
1111 void MachObjectWriter::RecordRelocation(const MCAssembler &Asm,
1112                                         const MCAsmLayout &Layout,
1113                                         const MCFragment *Fragment,
1114                                         const MCAsmFixup &Fixup, MCValue Target,
1115                                         uint64_t &FixedValue) {
1116   ((MachObjectWriterImpl*) Impl)->RecordRelocation(Asm, Layout, Fragment, Fixup,
1117                                                    Target, FixedValue);
1118 }
1119
1120 void MachObjectWriter::WriteObject(const MCAssembler &Asm,
1121                                    const MCAsmLayout &Layout) {
1122   ((MachObjectWriterImpl*) Impl)->WriteObject(Asm, Layout);
1123 }