[opaque pointer type]: Pass explicit pointee type when building a constant GEP.
[oota-llvm.git] / include / llvm / IR / Metadata.h
1 //===- llvm/IR/Metadata.h - Metadata definitions ----------------*- C++ -*-===//
2 //
3 //                     The LLVM Compiler Infrastructure
4 //
5 // This file is distributed under the University of Illinois Open Source
6 // License. See LICENSE.TXT for details.
7 //
8 //===----------------------------------------------------------------------===//
9 //
10 /// @file
11 /// This file contains the declarations for metadata subclasses.
12 /// They represent the different flavors of metadata that live in LLVM.
13 //
14 //===----------------------------------------------------------------------===//
15
16 #ifndef LLVM_IR_METADATA_H
17 #define LLVM_IR_METADATA_H
18
19 #include "llvm/ADT/ArrayRef.h"
20 #include "llvm/ADT/DenseMap.h"
21 #include "llvm/ADT/ilist_node.h"
22 #include "llvm/ADT/iterator_range.h"
23 #include "llvm/IR/Constant.h"
24 #include "llvm/IR/MetadataTracking.h"
25 #include "llvm/IR/Value.h"
26 #include "llvm/Support/ErrorHandling.h"
27 #include <type_traits>
28
29 namespace llvm {
30
31 class LLVMContext;
32 class Module;
33 class ModuleSlotTracker;
34
35 template<typename ValueSubClass, typename ItemParentClass>
36   class SymbolTableListTraits;
37
38 enum LLVMConstants : uint32_t {
39   DEBUG_METADATA_VERSION = 3 // Current debug info version number.
40 };
41
42 /// \brief Root of the metadata hierarchy.
43 ///
44 /// This is a root class for typeless data in the IR.
45 class Metadata {
46   friend class ReplaceableMetadataImpl;
47
48   /// \brief RTTI.
49   const unsigned char SubclassID;
50
51 protected:
52   /// \brief Active type of storage.
53   enum StorageType { Uniqued, Distinct, Temporary };
54
55   /// \brief Storage flag for non-uniqued, otherwise unowned, metadata.
56   unsigned Storage : 2;
57   // TODO: expose remaining bits to subclasses.
58
59   unsigned short SubclassData16;
60   unsigned SubclassData32;
61
62 public:
63   enum MetadataKind {
64     MDTupleKind,
65     DILocationKind,
66     GenericDINodeKind,
67     DISubrangeKind,
68     DIEnumeratorKind,
69     DIBasicTypeKind,
70     DIDerivedTypeKind,
71     DICompositeTypeKind,
72     DISubroutineTypeKind,
73     DIFileKind,
74     DICompileUnitKind,
75     DISubprogramKind,
76     DILexicalBlockKind,
77     DILexicalBlockFileKind,
78     DINamespaceKind,
79     DIModuleKind,
80     DITemplateTypeParameterKind,
81     DITemplateValueParameterKind,
82     DIGlobalVariableKind,
83     DILocalVariableKind,
84     DIExpressionKind,
85     DIObjCPropertyKind,
86     DIImportedEntityKind,
87     ConstantAsMetadataKind,
88     LocalAsMetadataKind,
89     MDStringKind
90   };
91
92 protected:
93   Metadata(unsigned ID, StorageType Storage)
94       : SubclassID(ID), Storage(Storage), SubclassData16(0), SubclassData32(0) {
95   }
96   ~Metadata() = default;
97
98   /// \brief Default handling of a changed operand, which asserts.
99   ///
100   /// If subclasses pass themselves in as owners to a tracking node reference,
101   /// they must provide an implementation of this method.
102   void handleChangedOperand(void *, Metadata *) {
103     llvm_unreachable("Unimplemented in Metadata subclass");
104   }
105
106 public:
107   unsigned getMetadataID() const { return SubclassID; }
108
109   /// \brief User-friendly dump.
110   ///
111   /// If \c M is provided, metadata nodes will be numbered canonically;
112   /// otherwise, pointer addresses are substituted.
113   ///
114   /// Note: this uses an explicit overload instead of default arguments so that
115   /// the nullptr version is easy to call from a debugger.
116   ///
117   /// @{
118   void dump() const;
119   void dump(const Module *M) const;
120   /// @}
121
122   /// \brief Print.
123   ///
124   /// Prints definition of \c this.
125   ///
126   /// If \c M is provided, metadata nodes will be numbered canonically;
127   /// otherwise, pointer addresses are substituted.
128   /// @{
129   void print(raw_ostream &OS, const Module *M = nullptr) const;
130   void print(raw_ostream &OS, ModuleSlotTracker &MST,
131              const Module *M = nullptr) const;
132   /// @}
133
134   /// \brief Print as operand.
135   ///
136   /// Prints reference of \c this.
137   ///
138   /// If \c M is provided, metadata nodes will be numbered canonically;
139   /// otherwise, pointer addresses are substituted.
140   /// @{
141   void printAsOperand(raw_ostream &OS, const Module *M = nullptr) const;
142   void printAsOperand(raw_ostream &OS, ModuleSlotTracker &MST,
143                       const Module *M = nullptr) const;
144   /// @}
145 };
146
147 #define HANDLE_METADATA(CLASS) class CLASS;
148 #include "llvm/IR/Metadata.def"
149
150 // Provide specializations of isa so that we don't need definitions of
151 // subclasses to see if the metadata is a subclass.
152 #define HANDLE_METADATA_LEAF(CLASS)                                            \
153   template <> struct isa_impl<CLASS, Metadata> {                               \
154     static inline bool doit(const Metadata &MD) {                              \
155       return MD.getMetadataID() == Metadata::CLASS##Kind;                      \
156     }                                                                          \
157   };
158 #include "llvm/IR/Metadata.def"
159
160 inline raw_ostream &operator<<(raw_ostream &OS, const Metadata &MD) {
161   MD.print(OS);
162   return OS;
163 }
164
165 /// \brief Metadata wrapper in the Value hierarchy.
166 ///
167 /// A member of the \a Value hierarchy to represent a reference to metadata.
168 /// This allows, e.g., instrinsics to have metadata as operands.
169 ///
170 /// Notably, this is the only thing in either hierarchy that is allowed to
171 /// reference \a LocalAsMetadata.
172 class MetadataAsValue : public Value {
173   friend class ReplaceableMetadataImpl;
174   friend class LLVMContextImpl;
175
176   Metadata *MD;
177
178   MetadataAsValue(Type *Ty, Metadata *MD);
179   ~MetadataAsValue() override;
180
181   /// \brief Drop use of metadata (during teardown).
182   void dropUse() { MD = nullptr; }
183
184 public:
185   static MetadataAsValue *get(LLVMContext &Context, Metadata *MD);
186   static MetadataAsValue *getIfExists(LLVMContext &Context, Metadata *MD);
187   Metadata *getMetadata() const { return MD; }
188
189   static bool classof(const Value *V) {
190     return V->getValueID() == MetadataAsValueVal;
191   }
192
193 private:
194   void handleChangedMetadata(Metadata *MD);
195   void track();
196   void untrack();
197 };
198
199 /// \brief Shared implementation of use-lists for replaceable metadata.
200 ///
201 /// Most metadata cannot be RAUW'ed.  This is a shared implementation of
202 /// use-lists and associated API for the two that support it (\a ValueAsMetadata
203 /// and \a TempMDNode).
204 class ReplaceableMetadataImpl {
205   friend class MetadataTracking;
206
207 public:
208   typedef MetadataTracking::OwnerTy OwnerTy;
209
210 private:
211   LLVMContext &Context;
212   uint64_t NextIndex;
213   SmallDenseMap<void *, std::pair<OwnerTy, uint64_t>, 4> UseMap;
214
215 public:
216   ReplaceableMetadataImpl(LLVMContext &Context)
217       : Context(Context), NextIndex(0) {}
218   ~ReplaceableMetadataImpl() {
219     assert(UseMap.empty() && "Cannot destroy in-use replaceable metadata");
220   }
221
222   LLVMContext &getContext() const { return Context; }
223
224   /// \brief Replace all uses of this with MD.
225   ///
226   /// Replace all uses of this with \c MD, which is allowed to be null.
227   void replaceAllUsesWith(Metadata *MD);
228
229   /// \brief Resolve all uses of this.
230   ///
231   /// Resolve all uses of this, turning off RAUW permanently.  If \c
232   /// ResolveUsers, call \a MDNode::resolve() on any users whose last operand
233   /// is resolved.
234   void resolveAllUses(bool ResolveUsers = true);
235
236 private:
237   void addRef(void *Ref, OwnerTy Owner);
238   void dropRef(void *Ref);
239   void moveRef(void *Ref, void *New, const Metadata &MD);
240
241   static ReplaceableMetadataImpl *get(Metadata &MD);
242 };
243
244 /// \brief Value wrapper in the Metadata hierarchy.
245 ///
246 /// This is a custom value handle that allows other metadata to refer to
247 /// classes in the Value hierarchy.
248 ///
249 /// Because of full uniquing support, each value is only wrapped by a single \a
250 /// ValueAsMetadata object, so the lookup maps are far more efficient than
251 /// those using ValueHandleBase.
252 class ValueAsMetadata : public Metadata, ReplaceableMetadataImpl {
253   friend class ReplaceableMetadataImpl;
254   friend class LLVMContextImpl;
255
256   Value *V;
257
258   /// \brief Drop users without RAUW (during teardown).
259   void dropUsers() {
260     ReplaceableMetadataImpl::resolveAllUses(/* ResolveUsers */ false);
261   }
262
263 protected:
264   ValueAsMetadata(unsigned ID, Value *V)
265       : Metadata(ID, Uniqued), ReplaceableMetadataImpl(V->getContext()), V(V) {
266     assert(V && "Expected valid value");
267   }
268   ~ValueAsMetadata() = default;
269
270 public:
271   static ValueAsMetadata *get(Value *V);
272   static ConstantAsMetadata *getConstant(Value *C) {
273     return cast<ConstantAsMetadata>(get(C));
274   }
275   static LocalAsMetadata *getLocal(Value *Local) {
276     return cast<LocalAsMetadata>(get(Local));
277   }
278
279   static ValueAsMetadata *getIfExists(Value *V);
280   static ConstantAsMetadata *getConstantIfExists(Value *C) {
281     return cast_or_null<ConstantAsMetadata>(getIfExists(C));
282   }
283   static LocalAsMetadata *getLocalIfExists(Value *Local) {
284     return cast_or_null<LocalAsMetadata>(getIfExists(Local));
285   }
286
287   Value *getValue() const { return V; }
288   Type *getType() const { return V->getType(); }
289   LLVMContext &getContext() const { return V->getContext(); }
290
291   static void handleDeletion(Value *V);
292   static void handleRAUW(Value *From, Value *To);
293
294 protected:
295   /// \brief Handle collisions after \a Value::replaceAllUsesWith().
296   ///
297   /// RAUW isn't supported directly for \a ValueAsMetadata, but if the wrapped
298   /// \a Value gets RAUW'ed and the target already exists, this is used to
299   /// merge the two metadata nodes.
300   void replaceAllUsesWith(Metadata *MD) {
301     ReplaceableMetadataImpl::replaceAllUsesWith(MD);
302   }
303
304 public:
305   static bool classof(const Metadata *MD) {
306     return MD->getMetadataID() == LocalAsMetadataKind ||
307            MD->getMetadataID() == ConstantAsMetadataKind;
308   }
309 };
310
311 class ConstantAsMetadata : public ValueAsMetadata {
312   friend class ValueAsMetadata;
313
314   ConstantAsMetadata(Constant *C)
315       : ValueAsMetadata(ConstantAsMetadataKind, C) {}
316
317 public:
318   static ConstantAsMetadata *get(Constant *C) {
319     return ValueAsMetadata::getConstant(C);
320   }
321   static ConstantAsMetadata *getIfExists(Constant *C) {
322     return ValueAsMetadata::getConstantIfExists(C);
323   }
324
325   Constant *getValue() const {
326     return cast<Constant>(ValueAsMetadata::getValue());
327   }
328
329   static bool classof(const Metadata *MD) {
330     return MD->getMetadataID() == ConstantAsMetadataKind;
331   }
332 };
333
334 class LocalAsMetadata : public ValueAsMetadata {
335   friend class ValueAsMetadata;
336
337   LocalAsMetadata(Value *Local)
338       : ValueAsMetadata(LocalAsMetadataKind, Local) {
339     assert(!isa<Constant>(Local) && "Expected local value");
340   }
341
342 public:
343   static LocalAsMetadata *get(Value *Local) {
344     return ValueAsMetadata::getLocal(Local);
345   }
346   static LocalAsMetadata *getIfExists(Value *Local) {
347     return ValueAsMetadata::getLocalIfExists(Local);
348   }
349
350   static bool classof(const Metadata *MD) {
351     return MD->getMetadataID() == LocalAsMetadataKind;
352   }
353 };
354
355 /// \brief Transitional API for extracting constants from Metadata.
356 ///
357 /// This namespace contains transitional functions for metadata that points to
358 /// \a Constants.
359 ///
360 /// In prehistory -- when metadata was a subclass of \a Value -- \a MDNode
361 /// operands could refer to any \a Value.  There's was a lot of code like this:
362 ///
363 /// \code
364 ///     MDNode *N = ...;
365 ///     auto *CI = dyn_cast<ConstantInt>(N->getOperand(2));
366 /// \endcode
367 ///
368 /// Now that \a Value and \a Metadata are in separate hierarchies, maintaining
369 /// the semantics for \a isa(), \a cast(), \a dyn_cast() (etc.) requires three
370 /// steps: cast in the \a Metadata hierarchy, extraction of the \a Value, and
371 /// cast in the \a Value hierarchy.  Besides creating boiler-plate, this
372 /// requires subtle control flow changes.
373 ///
374 /// The end-goal is to create a new type of metadata, called (e.g.) \a MDInt,
375 /// so that metadata can refer to numbers without traversing a bridge to the \a
376 /// Value hierarchy.  In this final state, the code above would look like this:
377 ///
378 /// \code
379 ///     MDNode *N = ...;
380 ///     auto *MI = dyn_cast<MDInt>(N->getOperand(2));
381 /// \endcode
382 ///
383 /// The API in this namespace supports the transition.  \a MDInt doesn't exist
384 /// yet, and even once it does, changing each metadata schema to use it is its
385 /// own mini-project.  In the meantime this API prevents us from introducing
386 /// complex and bug-prone control flow that will disappear in the end.  In
387 /// particular, the above code looks like this:
388 ///
389 /// \code
390 ///     MDNode *N = ...;
391 ///     auto *CI = mdconst::dyn_extract<ConstantInt>(N->getOperand(2));
392 /// \endcode
393 ///
394 /// The full set of provided functions includes:
395 ///
396 ///   mdconst::hasa                <=> isa
397 ///   mdconst::extract             <=> cast
398 ///   mdconst::extract_or_null     <=> cast_or_null
399 ///   mdconst::dyn_extract         <=> dyn_cast
400 ///   mdconst::dyn_extract_or_null <=> dyn_cast_or_null
401 ///
402 /// The target of the cast must be a subclass of \a Constant.
403 namespace mdconst {
404
405 namespace detail {
406 template <class T> T &make();
407 template <class T, class Result> struct HasDereference {
408   typedef char Yes[1];
409   typedef char No[2];
410   template <size_t N> struct SFINAE {};
411
412   template <class U, class V>
413   static Yes &hasDereference(SFINAE<sizeof(static_cast<V>(*make<U>()))> * = 0);
414   template <class U, class V> static No &hasDereference(...);
415
416   static const bool value =
417       sizeof(hasDereference<T, Result>(nullptr)) == sizeof(Yes);
418 };
419 template <class V, class M> struct IsValidPointer {
420   static const bool value = std::is_base_of<Constant, V>::value &&
421                             HasDereference<M, const Metadata &>::value;
422 };
423 template <class V, class M> struct IsValidReference {
424   static const bool value = std::is_base_of<Constant, V>::value &&
425                             std::is_convertible<M, const Metadata &>::value;
426 };
427 } // end namespace detail
428
429 /// \brief Check whether Metadata has a Value.
430 ///
431 /// As an analogue to \a isa(), check whether \c MD has an \a Value inside of
432 /// type \c X.
433 template <class X, class Y>
434 inline typename std::enable_if<detail::IsValidPointer<X, Y>::value, bool>::type
435 hasa(Y &&MD) {
436   assert(MD && "Null pointer sent into hasa");
437   if (auto *V = dyn_cast<ConstantAsMetadata>(MD))
438     return isa<X>(V->getValue());
439   return false;
440 }
441 template <class X, class Y>
442 inline
443     typename std::enable_if<detail::IsValidReference<X, Y &>::value, bool>::type
444     hasa(Y &MD) {
445   return hasa(&MD);
446 }
447
448 /// \brief Extract a Value from Metadata.
449 ///
450 /// As an analogue to \a cast(), extract the \a Value subclass \c X from \c MD.
451 template <class X, class Y>
452 inline typename std::enable_if<detail::IsValidPointer<X, Y>::value, X *>::type
453 extract(Y &&MD) {
454   return cast<X>(cast<ConstantAsMetadata>(MD)->getValue());
455 }
456 template <class X, class Y>
457 inline
458     typename std::enable_if<detail::IsValidReference<X, Y &>::value, X *>::type
459     extract(Y &MD) {
460   return extract(&MD);
461 }
462
463 /// \brief Extract a Value from Metadata, allowing null.
464 ///
465 /// As an analogue to \a cast_or_null(), extract the \a Value subclass \c X
466 /// from \c MD, allowing \c MD to be null.
467 template <class X, class Y>
468 inline typename std::enable_if<detail::IsValidPointer<X, Y>::value, X *>::type
469 extract_or_null(Y &&MD) {
470   if (auto *V = cast_or_null<ConstantAsMetadata>(MD))
471     return cast<X>(V->getValue());
472   return nullptr;
473 }
474
475 /// \brief Extract a Value from Metadata, if any.
476 ///
477 /// As an analogue to \a dyn_cast_or_null(), extract the \a Value subclass \c X
478 /// from \c MD, return null if \c MD doesn't contain a \a Value or if the \a
479 /// Value it does contain is of the wrong subclass.
480 template <class X, class Y>
481 inline typename std::enable_if<detail::IsValidPointer<X, Y>::value, X *>::type
482 dyn_extract(Y &&MD) {
483   if (auto *V = dyn_cast<ConstantAsMetadata>(MD))
484     return dyn_cast<X>(V->getValue());
485   return nullptr;
486 }
487
488 /// \brief Extract a Value from Metadata, if any, allowing null.
489 ///
490 /// As an analogue to \a dyn_cast_or_null(), extract the \a Value subclass \c X
491 /// from \c MD, return null if \c MD doesn't contain a \a Value or if the \a
492 /// Value it does contain is of the wrong subclass, allowing \c MD to be null.
493 template <class X, class Y>
494 inline typename std::enable_if<detail::IsValidPointer<X, Y>::value, X *>::type
495 dyn_extract_or_null(Y &&MD) {
496   if (auto *V = dyn_cast_or_null<ConstantAsMetadata>(MD))
497     return dyn_cast<X>(V->getValue());
498   return nullptr;
499 }
500
501 } // end namespace mdconst
502
503 //===----------------------------------------------------------------------===//
504 /// \brief A single uniqued string.
505 ///
506 /// These are used to efficiently contain a byte sequence for metadata.
507 /// MDString is always unnamed.
508 class MDString : public Metadata {
509   friend class StringMapEntry<MDString>;
510
511   MDString(const MDString &) = delete;
512   MDString &operator=(MDString &&) = delete;
513   MDString &operator=(const MDString &) = delete;
514
515   StringMapEntry<MDString> *Entry;
516   MDString() : Metadata(MDStringKind, Uniqued), Entry(nullptr) {}
517   MDString(MDString &&) : Metadata(MDStringKind, Uniqued) {}
518
519 public:
520   static MDString *get(LLVMContext &Context, StringRef Str);
521   static MDString *get(LLVMContext &Context, const char *Str) {
522     return get(Context, Str ? StringRef(Str) : StringRef());
523   }
524
525   StringRef getString() const;
526
527   unsigned getLength() const { return (unsigned)getString().size(); }
528
529   typedef StringRef::iterator iterator;
530
531   /// \brief Pointer to the first byte of the string.
532   iterator begin() const { return getString().begin(); }
533
534   /// \brief Pointer to one byte past the end of the string.
535   iterator end() const { return getString().end(); }
536
537   const unsigned char *bytes_begin() const { return getString().bytes_begin(); }
538   const unsigned char *bytes_end() const { return getString().bytes_end(); }
539
540   /// \brief Methods for support type inquiry through isa, cast, and dyn_cast.
541   static bool classof(const Metadata *MD) {
542     return MD->getMetadataID() == MDStringKind;
543   }
544 };
545
546 /// \brief A collection of metadata nodes that might be associated with a
547 /// memory access used by the alias-analysis infrastructure.
548 struct AAMDNodes {
549   explicit AAMDNodes(MDNode *T = nullptr, MDNode *S = nullptr,
550                      MDNode *N = nullptr)
551       : TBAA(T), Scope(S), NoAlias(N) {}
552
553   bool operator==(const AAMDNodes &A) const {
554     return TBAA == A.TBAA && Scope == A.Scope && NoAlias == A.NoAlias;
555   }
556
557   bool operator!=(const AAMDNodes &A) const { return !(*this == A); }
558
559   explicit operator bool() const { return TBAA || Scope || NoAlias; }
560
561   /// \brief The tag for type-based alias analysis.
562   MDNode *TBAA;
563
564   /// \brief The tag for alias scope specification (used with noalias).
565   MDNode *Scope;
566
567   /// \brief The tag specifying the noalias scope.
568   MDNode *NoAlias;
569 };
570
571 // Specialize DenseMapInfo for AAMDNodes.
572 template<>
573 struct DenseMapInfo<AAMDNodes> {
574   static inline AAMDNodes getEmptyKey() {
575     return AAMDNodes(DenseMapInfo<MDNode *>::getEmptyKey(), 0, 0);
576   }
577   static inline AAMDNodes getTombstoneKey() {
578     return AAMDNodes(DenseMapInfo<MDNode *>::getTombstoneKey(), 0, 0);
579   }
580   static unsigned getHashValue(const AAMDNodes &Val) {
581     return DenseMapInfo<MDNode *>::getHashValue(Val.TBAA) ^
582            DenseMapInfo<MDNode *>::getHashValue(Val.Scope) ^
583            DenseMapInfo<MDNode *>::getHashValue(Val.NoAlias);
584   }
585   static bool isEqual(const AAMDNodes &LHS, const AAMDNodes &RHS) {
586     return LHS == RHS;
587   }
588 };
589
590 /// \brief Tracking metadata reference owned by Metadata.
591 ///
592 /// Similar to \a TrackingMDRef, but it's expected to be owned by an instance
593 /// of \a Metadata, which has the option of registering itself for callbacks to
594 /// re-unique itself.
595 ///
596 /// In particular, this is used by \a MDNode.
597 class MDOperand {
598   MDOperand(MDOperand &&) = delete;
599   MDOperand(const MDOperand &) = delete;
600   MDOperand &operator=(MDOperand &&) = delete;
601   MDOperand &operator=(const MDOperand &) = delete;
602
603   Metadata *MD;
604
605 public:
606   MDOperand() : MD(nullptr) {}
607   ~MDOperand() { untrack(); }
608
609   Metadata *get() const { return MD; }
610   operator Metadata *() const { return get(); }
611   Metadata *operator->() const { return get(); }
612   Metadata &operator*() const { return *get(); }
613
614   void reset() {
615     untrack();
616     MD = nullptr;
617   }
618   void reset(Metadata *MD, Metadata *Owner) {
619     untrack();
620     this->MD = MD;
621     track(Owner);
622   }
623
624 private:
625   void track(Metadata *Owner) {
626     if (MD) {
627       if (Owner)
628         MetadataTracking::track(this, *MD, *Owner);
629       else
630         MetadataTracking::track(MD);
631     }
632   }
633   void untrack() {
634     assert(static_cast<void *>(this) == &MD && "Expected same address");
635     if (MD)
636       MetadataTracking::untrack(MD);
637   }
638 };
639
640 template <> struct simplify_type<MDOperand> {
641   typedef Metadata *SimpleType;
642   static SimpleType getSimplifiedValue(MDOperand &MD) { return MD.get(); }
643 };
644
645 template <> struct simplify_type<const MDOperand> {
646   typedef Metadata *SimpleType;
647   static SimpleType getSimplifiedValue(const MDOperand &MD) { return MD.get(); }
648 };
649
650 /// \brief Pointer to the context, with optional RAUW support.
651 ///
652 /// Either a raw (non-null) pointer to the \a LLVMContext, or an owned pointer
653 /// to \a ReplaceableMetadataImpl (which has a reference to \a LLVMContext).
654 class ContextAndReplaceableUses {
655   PointerUnion<LLVMContext *, ReplaceableMetadataImpl *> Ptr;
656
657   ContextAndReplaceableUses() = delete;
658   ContextAndReplaceableUses(ContextAndReplaceableUses &&) = delete;
659   ContextAndReplaceableUses(const ContextAndReplaceableUses &) = delete;
660   ContextAndReplaceableUses &operator=(ContextAndReplaceableUses &&) = delete;
661   ContextAndReplaceableUses &
662   operator=(const ContextAndReplaceableUses &) = delete;
663
664 public:
665   ContextAndReplaceableUses(LLVMContext &Context) : Ptr(&Context) {}
666   ContextAndReplaceableUses(
667       std::unique_ptr<ReplaceableMetadataImpl> ReplaceableUses)
668       : Ptr(ReplaceableUses.release()) {
669     assert(getReplaceableUses() && "Expected non-null replaceable uses");
670   }
671   ~ContextAndReplaceableUses() { delete getReplaceableUses(); }
672
673   operator LLVMContext &() { return getContext(); }
674
675   /// \brief Whether this contains RAUW support.
676   bool hasReplaceableUses() const {
677     return Ptr.is<ReplaceableMetadataImpl *>();
678   }
679   LLVMContext &getContext() const {
680     if (hasReplaceableUses())
681       return getReplaceableUses()->getContext();
682     return *Ptr.get<LLVMContext *>();
683   }
684   ReplaceableMetadataImpl *getReplaceableUses() const {
685     if (hasReplaceableUses())
686       return Ptr.get<ReplaceableMetadataImpl *>();
687     return nullptr;
688   }
689
690   /// \brief Assign RAUW support to this.
691   ///
692   /// Make this replaceable, taking ownership of \c ReplaceableUses (which must
693   /// not be null).
694   void
695   makeReplaceable(std::unique_ptr<ReplaceableMetadataImpl> ReplaceableUses) {
696     assert(ReplaceableUses && "Expected non-null replaceable uses");
697     assert(&ReplaceableUses->getContext() == &getContext() &&
698            "Expected same context");
699     delete getReplaceableUses();
700     Ptr = ReplaceableUses.release();
701   }
702
703   /// \brief Drop RAUW support.
704   ///
705   /// Cede ownership of RAUW support, returning it.
706   std::unique_ptr<ReplaceableMetadataImpl> takeReplaceableUses() {
707     assert(hasReplaceableUses() && "Expected to own replaceable uses");
708     std::unique_ptr<ReplaceableMetadataImpl> ReplaceableUses(
709         getReplaceableUses());
710     Ptr = &ReplaceableUses->getContext();
711     return ReplaceableUses;
712   }
713 };
714
715 struct TempMDNodeDeleter {
716   inline void operator()(MDNode *Node) const;
717 };
718
719 #define HANDLE_MDNODE_LEAF(CLASS)                                              \
720   typedef std::unique_ptr<CLASS, TempMDNodeDeleter> Temp##CLASS;
721 #define HANDLE_MDNODE_BRANCH(CLASS) HANDLE_MDNODE_LEAF(CLASS)
722 #include "llvm/IR/Metadata.def"
723
724 /// \brief Metadata node.
725 ///
726 /// Metadata nodes can be uniqued, like constants, or distinct.  Temporary
727 /// metadata nodes (with full support for RAUW) can be used to delay uniquing
728 /// until forward references are known.  The basic metadata node is an \a
729 /// MDTuple.
730 ///
731 /// There is limited support for RAUW at construction time.  At construction
732 /// time, if any operand is a temporary node (or an unresolved uniqued node,
733 /// which indicates a transitive temporary operand), the node itself will be
734 /// unresolved.  As soon as all operands become resolved, it will drop RAUW
735 /// support permanently.
736 ///
737 /// If an unresolved node is part of a cycle, \a resolveCycles() needs
738 /// to be called on some member of the cycle once all temporary nodes have been
739 /// replaced.
740 class MDNode : public Metadata {
741   friend class ReplaceableMetadataImpl;
742   friend class LLVMContextImpl;
743
744   MDNode(const MDNode &) = delete;
745   void operator=(const MDNode &) = delete;
746   void *operator new(size_t) = delete;
747
748   unsigned NumOperands;
749   unsigned NumUnresolved;
750
751 protected:
752   ContextAndReplaceableUses Context;
753
754   void *operator new(size_t Size, unsigned NumOps);
755   void operator delete(void *Mem);
756
757   /// \brief Required by std, but never called.
758   void operator delete(void *, unsigned) {
759     llvm_unreachable("Constructor throws?");
760   }
761
762   /// \brief Required by std, but never called.
763   void operator delete(void *, unsigned, bool) {
764     llvm_unreachable("Constructor throws?");
765   }
766
767   MDNode(LLVMContext &Context, unsigned ID, StorageType Storage,
768          ArrayRef<Metadata *> Ops1, ArrayRef<Metadata *> Ops2 = None);
769   ~MDNode() = default;
770
771   void dropAllReferences();
772
773   MDOperand *mutable_begin() { return mutable_end() - NumOperands; }
774   MDOperand *mutable_end() { return reinterpret_cast<MDOperand *>(this); }
775
776   typedef iterator_range<MDOperand *> mutable_op_range;
777   mutable_op_range mutable_operands() {
778     return mutable_op_range(mutable_begin(), mutable_end());
779   }
780
781 public:
782   static inline MDTuple *get(LLVMContext &Context, ArrayRef<Metadata *> MDs);
783   static inline MDTuple *getIfExists(LLVMContext &Context,
784                                      ArrayRef<Metadata *> MDs);
785   static inline MDTuple *getDistinct(LLVMContext &Context,
786                                      ArrayRef<Metadata *> MDs);
787   static inline TempMDTuple getTemporary(LLVMContext &Context,
788                                          ArrayRef<Metadata *> MDs);
789
790   /// \brief Create a (temporary) clone of this.
791   TempMDNode clone() const;
792
793   /// \brief Deallocate a node created by getTemporary.
794   ///
795   /// Calls \c replaceAllUsesWith(nullptr) before deleting, so any remaining
796   /// references will be reset.
797   static void deleteTemporary(MDNode *N);
798
799   LLVMContext &getContext() const { return Context.getContext(); }
800
801   /// \brief Replace a specific operand.
802   void replaceOperandWith(unsigned I, Metadata *New);
803
804   /// \brief Check if node is fully resolved.
805   ///
806   /// If \a isTemporary(), this always returns \c false; if \a isDistinct(),
807   /// this always returns \c true.
808   ///
809   /// If \a isUniqued(), returns \c true if this has already dropped RAUW
810   /// support (because all operands are resolved).
811   ///
812   /// As forward declarations are resolved, their containers should get
813   /// resolved automatically.  However, if this (or one of its operands) is
814   /// involved in a cycle, \a resolveCycles() needs to be called explicitly.
815   bool isResolved() const { return !Context.hasReplaceableUses(); }
816
817   bool isUniqued() const { return Storage == Uniqued; }
818   bool isDistinct() const { return Storage == Distinct; }
819   bool isTemporary() const { return Storage == Temporary; }
820
821   /// \brief RAUW a temporary.
822   ///
823   /// \pre \a isTemporary() must be \c true.
824   void replaceAllUsesWith(Metadata *MD) {
825     assert(isTemporary() && "Expected temporary node");
826     assert(!isResolved() && "Expected RAUW support");
827     Context.getReplaceableUses()->replaceAllUsesWith(MD);
828   }
829
830   /// \brief Resolve cycles.
831   ///
832   /// Once all forward declarations have been resolved, force cycles to be
833   /// resolved.
834   ///
835   /// \pre No operands (or operands' operands, etc.) have \a isTemporary().
836   void resolveCycles();
837
838   /// \brief Replace a temporary node with a permanent one.
839   ///
840   /// Try to create a uniqued version of \c N -- in place, if possible -- and
841   /// return it.  If \c N cannot be uniqued, return a distinct node instead.
842   template <class T>
843   static typename std::enable_if<std::is_base_of<MDNode, T>::value, T *>::type
844   replaceWithPermanent(std::unique_ptr<T, TempMDNodeDeleter> N) {
845     return cast<T>(N.release()->replaceWithPermanentImpl());
846   }
847
848   /// \brief Replace a temporary node with a uniqued one.
849   ///
850   /// Create a uniqued version of \c N -- in place, if possible -- and return
851   /// it.  Takes ownership of the temporary node.
852   ///
853   /// \pre N does not self-reference.
854   template <class T>
855   static typename std::enable_if<std::is_base_of<MDNode, T>::value, T *>::type
856   replaceWithUniqued(std::unique_ptr<T, TempMDNodeDeleter> N) {
857     return cast<T>(N.release()->replaceWithUniquedImpl());
858   }
859
860   /// \brief Replace a temporary node with a distinct one.
861   ///
862   /// Create a distinct version of \c N -- in place, if possible -- and return
863   /// it.  Takes ownership of the temporary node.
864   template <class T>
865   static typename std::enable_if<std::is_base_of<MDNode, T>::value, T *>::type
866   replaceWithDistinct(std::unique_ptr<T, TempMDNodeDeleter> N) {
867     return cast<T>(N.release()->replaceWithDistinctImpl());
868   }
869
870 private:
871   MDNode *replaceWithPermanentImpl();
872   MDNode *replaceWithUniquedImpl();
873   MDNode *replaceWithDistinctImpl();
874
875 protected:
876   /// \brief Set an operand.
877   ///
878   /// Sets the operand directly, without worrying about uniquing.
879   void setOperand(unsigned I, Metadata *New);
880
881   void storeDistinctInContext();
882   template <class T, class StoreT>
883   static T *storeImpl(T *N, StorageType Storage, StoreT &Store);
884   template <class T> static T *storeImpl(T *N, StorageType Storage);
885
886 private:
887   void handleChangedOperand(void *Ref, Metadata *New);
888
889   void resolve();
890   void resolveAfterOperandChange(Metadata *Old, Metadata *New);
891   void decrementUnresolvedOperandCount();
892   unsigned countUnresolvedOperands();
893
894   /// \brief Mutate this to be "uniqued".
895   ///
896   /// Mutate this so that \a isUniqued().
897   /// \pre \a isTemporary().
898   /// \pre already added to uniquing set.
899   void makeUniqued();
900
901   /// \brief Mutate this to be "distinct".
902   ///
903   /// Mutate this so that \a isDistinct().
904   /// \pre \a isTemporary().
905   void makeDistinct();
906
907   void deleteAsSubclass();
908   MDNode *uniquify();
909   void eraseFromStore();
910
911   template <class NodeTy> struct HasCachedHash;
912   template <class NodeTy>
913   static void dispatchRecalculateHash(NodeTy *N, std::true_type) {
914     N->recalculateHash();
915   }
916   template <class NodeTy>
917   static void dispatchRecalculateHash(NodeTy *N, std::false_type) {}
918   template <class NodeTy>
919   static void dispatchResetHash(NodeTy *N, std::true_type) {
920     N->setHash(0);
921   }
922   template <class NodeTy>
923   static void dispatchResetHash(NodeTy *N, std::false_type) {}
924
925 public:
926   typedef const MDOperand *op_iterator;
927   typedef iterator_range<op_iterator> op_range;
928
929   op_iterator op_begin() const {
930     return const_cast<MDNode *>(this)->mutable_begin();
931   }
932   op_iterator op_end() const {
933     return const_cast<MDNode *>(this)->mutable_end();
934   }
935   op_range operands() const { return op_range(op_begin(), op_end()); }
936
937   const MDOperand &getOperand(unsigned I) const {
938     assert(I < NumOperands && "Out of range");
939     return op_begin()[I];
940   }
941
942   /// \brief Return number of MDNode operands.
943   unsigned getNumOperands() const { return NumOperands; }
944
945   /// \brief Methods for support type inquiry through isa, cast, and dyn_cast:
946   static bool classof(const Metadata *MD) {
947     switch (MD->getMetadataID()) {
948     default:
949       return false;
950 #define HANDLE_MDNODE_LEAF(CLASS)                                              \
951   case CLASS##Kind:                                                            \
952     return true;
953 #include "llvm/IR/Metadata.def"
954     }
955   }
956
957   /// \brief Check whether MDNode is a vtable access.
958   bool isTBAAVtableAccess() const;
959
960   /// \brief Methods for metadata merging.
961   static MDNode *concatenate(MDNode *A, MDNode *B);
962   static MDNode *intersect(MDNode *A, MDNode *B);
963   static MDNode *getMostGenericTBAA(MDNode *A, MDNode *B);
964   static MDNode *getMostGenericFPMath(MDNode *A, MDNode *B);
965   static MDNode *getMostGenericRange(MDNode *A, MDNode *B);
966   static MDNode *getMostGenericAliasScope(MDNode *A, MDNode *B);
967 };
968
969 /// \brief Tuple of metadata.
970 ///
971 /// This is the simple \a MDNode arbitrary tuple.  Nodes are uniqued by
972 /// default based on their operands.
973 class MDTuple : public MDNode {
974   friend class LLVMContextImpl;
975   friend class MDNode;
976
977   MDTuple(LLVMContext &C, StorageType Storage, unsigned Hash,
978           ArrayRef<Metadata *> Vals)
979       : MDNode(C, MDTupleKind, Storage, Vals) {
980     setHash(Hash);
981   }
982   ~MDTuple() { dropAllReferences(); }
983
984   void setHash(unsigned Hash) { SubclassData32 = Hash; }
985   void recalculateHash();
986
987   static MDTuple *getImpl(LLVMContext &Context, ArrayRef<Metadata *> MDs,
988                           StorageType Storage, bool ShouldCreate = true);
989
990   TempMDTuple cloneImpl() const {
991     return getTemporary(getContext(),
992                         SmallVector<Metadata *, 4>(op_begin(), op_end()));
993   }
994
995 public:
996   /// \brief Get the hash, if any.
997   unsigned getHash() const { return SubclassData32; }
998
999   static MDTuple *get(LLVMContext &Context, ArrayRef<Metadata *> MDs) {
1000     return getImpl(Context, MDs, Uniqued);
1001   }
1002   static MDTuple *getIfExists(LLVMContext &Context, ArrayRef<Metadata *> MDs) {
1003     return getImpl(Context, MDs, Uniqued, /* ShouldCreate */ false);
1004   }
1005
1006   /// \brief Return a distinct node.
1007   ///
1008   /// Return a distinct node -- i.e., a node that is not uniqued.
1009   static MDTuple *getDistinct(LLVMContext &Context, ArrayRef<Metadata *> MDs) {
1010     return getImpl(Context, MDs, Distinct);
1011   }
1012
1013   /// \brief Return a temporary node.
1014   ///
1015   /// For use in constructing cyclic MDNode structures. A temporary MDNode is
1016   /// not uniqued, may be RAUW'd, and must be manually deleted with
1017   /// deleteTemporary.
1018   static TempMDTuple getTemporary(LLVMContext &Context,
1019                                   ArrayRef<Metadata *> MDs) {
1020     return TempMDTuple(getImpl(Context, MDs, Temporary));
1021   }
1022
1023   /// \brief Return a (temporary) clone of this.
1024   TempMDTuple clone() const { return cloneImpl(); }
1025
1026   static bool classof(const Metadata *MD) {
1027     return MD->getMetadataID() == MDTupleKind;
1028   }
1029 };
1030
1031 MDTuple *MDNode::get(LLVMContext &Context, ArrayRef<Metadata *> MDs) {
1032   return MDTuple::get(Context, MDs);
1033 }
1034 MDTuple *MDNode::getIfExists(LLVMContext &Context, ArrayRef<Metadata *> MDs) {
1035   return MDTuple::getIfExists(Context, MDs);
1036 }
1037 MDTuple *MDNode::getDistinct(LLVMContext &Context, ArrayRef<Metadata *> MDs) {
1038   return MDTuple::getDistinct(Context, MDs);
1039 }
1040 TempMDTuple MDNode::getTemporary(LLVMContext &Context,
1041                                  ArrayRef<Metadata *> MDs) {
1042   return MDTuple::getTemporary(Context, MDs);
1043 }
1044
1045 void TempMDNodeDeleter::operator()(MDNode *Node) const {
1046   MDNode::deleteTemporary(Node);
1047 }
1048
1049 /// \brief Typed iterator through MDNode operands.
1050 ///
1051 /// An iterator that transforms an \a MDNode::iterator into an iterator over a
1052 /// particular Metadata subclass.
1053 template <class T>
1054 class TypedMDOperandIterator
1055     : std::iterator<std::input_iterator_tag, T *, std::ptrdiff_t, void, T *> {
1056   MDNode::op_iterator I = nullptr;
1057
1058 public:
1059   TypedMDOperandIterator() = default;
1060   explicit TypedMDOperandIterator(MDNode::op_iterator I) : I(I) {}
1061   T *operator*() const { return cast_or_null<T>(*I); }
1062   TypedMDOperandIterator &operator++() {
1063     ++I;
1064     return *this;
1065   }
1066   TypedMDOperandIterator operator++(int) {
1067     TypedMDOperandIterator Temp(*this);
1068     ++I;
1069     return Temp;
1070   }
1071   bool operator==(const TypedMDOperandIterator &X) const { return I == X.I; }
1072   bool operator!=(const TypedMDOperandIterator &X) const { return I != X.I; }
1073 };
1074
1075 /// \brief Typed, array-like tuple of metadata.
1076 ///
1077 /// This is a wrapper for \a MDTuple that makes it act like an array holding a
1078 /// particular type of metadata.
1079 template <class T> class MDTupleTypedArrayWrapper {
1080   const MDTuple *N = nullptr;
1081
1082 public:
1083   MDTupleTypedArrayWrapper() = default;
1084   MDTupleTypedArrayWrapper(const MDTuple *N) : N(N) {}
1085
1086   template <class U>
1087   MDTupleTypedArrayWrapper(
1088       const MDTupleTypedArrayWrapper<U> &Other,
1089       typename std::enable_if<std::is_convertible<U *, T *>::value>::type * =
1090           nullptr)
1091       : N(Other.get()) {}
1092
1093   template <class U>
1094   explicit MDTupleTypedArrayWrapper(
1095       const MDTupleTypedArrayWrapper<U> &Other,
1096       typename std::enable_if<!std::is_convertible<U *, T *>::value>::type * =
1097           nullptr)
1098       : N(Other.get()) {}
1099
1100   explicit operator bool() const { return get(); }
1101   explicit operator MDTuple *() const { return get(); }
1102
1103   MDTuple *get() const { return const_cast<MDTuple *>(N); }
1104   MDTuple *operator->() const { return get(); }
1105   MDTuple &operator*() const { return *get(); }
1106
1107   // FIXME: Fix callers and remove condition on N.
1108   unsigned size() const { return N ? N->getNumOperands() : 0u; }
1109   T *operator[](unsigned I) const { return cast_or_null<T>(N->getOperand(I)); }
1110
1111   // FIXME: Fix callers and remove condition on N.
1112   typedef TypedMDOperandIterator<T> iterator;
1113   iterator begin() const { return N ? iterator(N->op_begin()) : iterator(); }
1114   iterator end() const { return N ? iterator(N->op_end()) : iterator(); }
1115 };
1116
1117 #define HANDLE_METADATA(CLASS)                                                 \
1118   typedef MDTupleTypedArrayWrapper<CLASS> CLASS##Array;
1119 #include "llvm/IR/Metadata.def"
1120
1121 //===----------------------------------------------------------------------===//
1122 /// \brief A tuple of MDNodes.
1123 ///
1124 /// Despite its name, a NamedMDNode isn't itself an MDNode. NamedMDNodes belong
1125 /// to modules, have names, and contain lists of MDNodes.
1126 ///
1127 /// TODO: Inherit from Metadata.
1128 class NamedMDNode : public ilist_node<NamedMDNode> {
1129   friend class SymbolTableListTraits<NamedMDNode, Module>;
1130   friend struct ilist_traits<NamedMDNode>;
1131   friend class LLVMContextImpl;
1132   friend class Module;
1133   NamedMDNode(const NamedMDNode &) = delete;
1134
1135   std::string Name;
1136   Module *Parent;
1137   void *Operands; // SmallVector<TrackingMDRef, 4>
1138
1139   void setParent(Module *M) { Parent = M; }
1140
1141   explicit NamedMDNode(const Twine &N);
1142
1143   template<class T1, class T2>
1144   class op_iterator_impl :
1145       public std::iterator<std::bidirectional_iterator_tag, T2> {
1146     const NamedMDNode *Node;
1147     unsigned Idx;
1148     op_iterator_impl(const NamedMDNode *N, unsigned i) : Node(N), Idx(i) { }
1149
1150     friend class NamedMDNode;
1151
1152   public:
1153     op_iterator_impl() : Node(nullptr), Idx(0) { }
1154
1155     bool operator==(const op_iterator_impl &o) const { return Idx == o.Idx; }
1156     bool operator!=(const op_iterator_impl &o) const { return Idx != o.Idx; }
1157     op_iterator_impl &operator++() {
1158       ++Idx;
1159       return *this;
1160     }
1161     op_iterator_impl operator++(int) {
1162       op_iterator_impl tmp(*this);
1163       operator++();
1164       return tmp;
1165     }
1166     op_iterator_impl &operator--() {
1167       --Idx;
1168       return *this;
1169     }
1170     op_iterator_impl operator--(int) {
1171       op_iterator_impl tmp(*this);
1172       operator--();
1173       return tmp;
1174     }
1175
1176     T1 operator*() const { return Node->getOperand(Idx); }
1177   };
1178
1179 public:
1180   /// \brief Drop all references and remove the node from parent module.
1181   void eraseFromParent();
1182
1183   /// \brief Remove all uses and clear node vector.
1184   void dropAllReferences();
1185
1186   ~NamedMDNode();
1187
1188   /// \brief Get the module that holds this named metadata collection.
1189   inline Module *getParent() { return Parent; }
1190   inline const Module *getParent() const { return Parent; }
1191
1192   MDNode *getOperand(unsigned i) const;
1193   unsigned getNumOperands() const;
1194   void addOperand(MDNode *M);
1195   void setOperand(unsigned I, MDNode *New);
1196   StringRef getName() const;
1197   void print(raw_ostream &ROS) const;
1198   void dump() const;
1199
1200   // ---------------------------------------------------------------------------
1201   // Operand Iterator interface...
1202   //
1203   typedef op_iterator_impl<MDNode *, MDNode> op_iterator;
1204   op_iterator op_begin() { return op_iterator(this, 0); }
1205   op_iterator op_end()   { return op_iterator(this, getNumOperands()); }
1206
1207   typedef op_iterator_impl<const MDNode *, MDNode> const_op_iterator;
1208   const_op_iterator op_begin() const { return const_op_iterator(this, 0); }
1209   const_op_iterator op_end()   const { return const_op_iterator(this, getNumOperands()); }
1210
1211   inline iterator_range<op_iterator>  operands() {
1212     return iterator_range<op_iterator>(op_begin(), op_end());
1213   }
1214   inline iterator_range<const_op_iterator> operands() const {
1215     return iterator_range<const_op_iterator>(op_begin(), op_end());
1216   }
1217 };
1218
1219 } // end llvm namespace
1220
1221 #endif