Merge branch 'dev' of github.com:khizmax/libcds into dev
[libcds.git] / readme.md
1 CDS C++ library\r
2 ===============\r
3 [![GitHub version](https://badge.fury.io/gh/khizmax%2Flibcds.svg)](http://badge.fury.io/gh/khizmax%2Flibcds)\r
4 [![License](https://img.shields.io/:license-bsd-blue.svg?style=round-square)](https://github.com/khizmax/libcds/blob/master/LICENSE)\r
5 \r
6 <!---\r
7 The build time for lib and hdr-test is exceed the limit of 50 minutes\r
8 [![Build Status](https://travis-ci.org/khizmax/libcds.svg?branch=dev)](https://travis-ci.org/khizmax/libcds)\r
9 -->\r
10 <!---\r
11 The coverity dataset is about 4G of size and about 1G in compressed state so it is a problem to upload it to the coverity server\r
12 [![Coverity Scan Build Status](https://scan.coverity.com/projects/4445/badge.svg)](https://scan.coverity.com/projects/4445)\r
13 -->\r
14 \r
15 The Concurrent Data Structures (CDS) library is a collection of concurrent containers\r
16 that don't require external (manual) synchronization for shared access, and safe memory reclamation (SMR) \r
17 algorithms like [Hazard Pointer](http://en.wikipedia.org/wiki/Hazard_pointer) \r
18 and user-space [RCU](http://en.wikipedia.org/wiki/Read-copy-update). \r
19 CDS is mostly header-only template library. Only SMR core implementation is segregated to .so/.dll file.\r
20 \r
21 The library contains the implementations of the following containers:\r
22   - [lock-free](http://en.wikipedia.org/wiki/Non-blocking_algorithm) stack with optional elimination support\r
23   - several algo for lock-free queue, including classic Michael & Scott algorithm and its derivatives,\r
24     the flat combining queue, the segmented queue.\r
25   - several implementation of unordered set/map - lock-free and fine-grained lock-based\r
26   - [flat-combining] (http://mcg.cs.tau.ac.il/projects/projects/flat-combining) technique\r
27   - lock-free [skip-list](http://en.wikipedia.org/wiki/Skip_list)\r
28   \r
29 Generally, each container has an intrusive and non-intrusive (STL-like) version belonging to \r
30 *cds::intrusive* and *cds::container* namespace respectively.\r
31 \r
32 Version 2.x of the library is written on C++11 and can be compiled by GCC 4.8+, clang 3.3+, Intel C++ 15+, \r
33 and MS VC++ 12 (2013) Update 4.\r
34 \r
35 Download the latest release from http://sourceforge.net/projects/libcds/files/\r
36 \r
37 See online doxygen-generated doc here: http://libcds.sourceforge.net/doc/cds-api/index.html\r
38 \r
39 **Pull request requirements**\r
40 - Pull-request to *master* branch will be unconditionally rejected\r
41 - *integration* branch is intended for pull-request. Usually, *integration* branch is the same as *master*\r
42 - *dev* branch is intended for main developing. Usually, it contains unstable code\r
43 \r
44 [![Project stats](https://www.openhub.net/p/khizmax-libcds/widgets/project_thin_badge.gif)](https://www.openhub.net/p/khizmax-libcds)\r
45 \r
46 References\r
47 ----------\r
48 *Stack*\r
49   - *TreiberStack*: [1986] R. K. Treiber. Systems programming: Coping with parallelism. Technical Report RJ 5118, IBM Almaden Research Center, April 1986.\r
50   - Elimination back-off implementation is based on idea from [2004] Danny Hendler, Nir Shavit, Lena Yerushalmi "A Scalable Lock-free Stack Algorithm"\r
51         [pdf](http://people.csail.mit.edu/shanir/publications/Lock_Free.pdf)\r
52   - *FCStack* - flat-combining wrapper for *std::stack*\r
53         \r
54 *Queue*\r
55   - *BasketQueue*: [2007] Moshe Hoffman, Ori Shalev, Nir Shavit "The Baskets Queue"\r
56         [pdf](http://people.csail.mit.edu/shanir/publications/Baskets%20Queue.pdf)\r
57   - *MSQueue*:\r
58     * [1998] Maged Michael, Michael Scott "Simple, fast, and practical non-blocking and blocking concurrent queue algorithms"\r
59         [pdf](http://www.cs.rochester.edu/~scott/papers/1996_PODC_queues.pdf)\r
60     * [2002] Maged M.Michael "Safe memory reclamation for dynamic lock-free objects using atomic reads and writes"\r
61         [pdf](http://www.research.ibm.com/people/m/michael/podc-2002.pdf)\r
62     * [2003] Maged M.Michael "Hazard Pointers: Safe memory reclamation for lock-free objects"\r
63         [pdf](http://www.research.ibm.com/people/m/michael/ieeetpds-2004.pdf)\r
64   - *RWQueue*: [1998] Maged Michael, Michael Scott "Simple, fast, and practical non-blocking and blocking concurrent queue algorithms"\r
65         [pdf](http://www.cs.rochester.edu/~scott/papers/1996_PODC_queues.pdf)\r
66   - *MoirQueue*: [2000] Simon Doherty, Lindsay Groves, Victor Luchangco, Mark Moir "Formal Verification of a practical lock-free queue algorithm"\r
67         [pdf](http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.87.9954&rep=rep1&type=pdf)\r
68   - *OptimisticQueue*: [2008] Edya Ladan-Mozes, Nir Shavit "An Optimistic Approach to Lock-Free FIFO Queues"\r
69         [pdf](https://people.csail.mit.edu/edya/publications/OptimisticFIFOQueue-journal.pdf)\r
70   - *SegmentedQueue*: [2010] Afek, Korland, Yanovsky "Quasi-Linearizability: relaxed consistency for improved concurrency"\r
71         [pdf](http://mcg.cs.tau.ac.il/papers/opodis2010-quasi.pdf)\r
72   - *FCQueue* - flat-combining wrapper for *std::queue*\r
73   - *TsigasCycleQueue*: [2000] Philippas Tsigas, Yi Zhang "A Simple, Fast and Scalable Non-Blocking Concurrent FIFO Queue for Shared Memory Multiprocessor Systems"\r
74         [pdf](http://www.cse.chalmers.se/~tsigas/papers/latest-spaa01.pdf)\r
75   - *VyukovMPMCCycleQueue* Dmitry Vyukov (see http://www.1024cores.net)\r
76 \r
77 *Deque*\r
78   - flat-combining deque based on *stl::deque*\r
79 \r
80 *Map, set*\r
81   - *MichaelHashMap*: [2002] Maged Michael "High performance dynamic lock-free hash tables and list-based sets"\r
82         [pdf](http://www.research.ibm.com/people/m/michael/spaa-2002.pdf)\r
83   - *SplitOrderedList*: [2003] Ori Shalev, Nir Shavit "Split-Ordered Lists - Lock-free Resizable Hash Tables"\r
84         [pdf](http://people.csail.mit.edu/shanir/publications/Split-Ordered_Lists.pdf)\r
85   - *StripedMap*, *StripedSet*: [2008] Maurice Herlihy, Nir Shavit "The Art of Multiprocessor Programming"\r
86   - *CuckooMap*, *CuckooSet*: [2008] Maurice Herlihy, Nir Shavit "The Art of Multiprocessor Programming"\r
87   - *SkipListMap*, *SkipListSet*: [2008] Maurice Herlihy, Nir Shavit "The Art of Multiprocessor Programming"\r
88         \r
89 *Ordered single-linked list*\r
90   - *LazyList*: [2005] Steve Heller, Maurice Herlihy, Victor Luchangco, Mark Moir, William N. Scherer III, and Nir Shavit "A Lazy Concurrent List-Based Set Algorithm"\r
91         [pdf](http://people.csail.mit.edu/shanir/publications/Lazy_Concurrent.pdf)\r
92   - *MichaelList*: [2002] Maged Michael "High performance dynamic lock-free hash tables and list-based sets"\r
93         [pdf](http://www.research.ibm.com/people/m/michael/spaa-2002.pdf)\r
94 \r
95 *Priority queue*\r
96   - *MSPriorityQueue*: [1996] G.Hunt, M.Michael, S. Parthasarathy, M.Scott "An efficient algorithm for concurrent priority queue heaps"\r
97         [pdf](http://web.cse.ohio-state.edu/dmrl/papers/heap96.pdf)\r
98 \r
99 *Tree*\r
100   - *EllenBinTree*: [2010] F.Ellen, P.Fatourou, E.Ruppert, F.van Breugel "Non-blocking Binary Search Tree"\r
101         [pdf](http://www.cs.vu.nl/~tcs/cm/faith.pdf)\r
102   - *BronsonAVLTreeMap* - lock-based fine-grained AVL-tree implementation: \r
103         [2010] Nathan Bronson, Jared Casper, Hassan Chafi, Kunle Olukotun "A Practical Concurrent Binary Search Tree"\r
104         [pdf](https://ppl.stanford.edu/papers/ppopp207-bronson.pdf)\r
105 \r
106 *SMR*\r
107   - Hazard Pointers\r
108     * [2002] Maged M.Michael "Safe memory reclamation for dynamic lock-free objects using atomic reads and writes" \r
109              [pdf](http://www.research.ibm.com/people/m/michael/podc-2002.pdf)\r
110     * [2003] Maged M.Michael "Hazard Pointers: Safe memory reclamation for lock-free objects" \r
111              [pdf](http://www.research.ibm.com/people/m/michael/ieeetpds-2004.pdf)\r
112     * [2004] Andrei Alexandrescy, Maged Michael "Lock-free Data Structures with Hazard Pointers" \r
113              [pdf](http://www.researchgate.net/profile/Andrei_Alexandrescu/publication/252573326_Lock-Free_Data_Structures_with_Hazard_Pointers/links/0deec529e7804288fe000000.pdf)\r
114   - User-space RCU\r
115     * [2009] M.Desnoyers "Low-Impact Operating System Tracing" PhD Thesis,\r
116              Chapter 6 "User-Level Implementations of Read-Copy Update"\r
117              [pdf](http://www.lttng.org/files/thesis/desnoyers-dissertation-2009-12-v27.pdf)\r
118     * [2011] M.Desnoyers, P.McKenney, A.Stern, M.Dagenias, J.Walpole "User-Level\r
119              Implementations of Read-Copy Update"\r
120              [pdf](http://www.dorsal.polymtl.ca/sites/www.dorsal.polymtl.ca/files/publications/desnoyers-ieee-urcu-submitted.pdf)\r
121 \r
122 *Memory allocation*\r
123   - [2004] M.Michael "Scalable Lock-free Dynamic Memory Allocation"\r
124             [pdf](http://www.research.ibm.com/people/m/michael/pldi-2004.pdf)\r
125 \r
126 *Flat Combining* technique\r
127   - [2010] Hendler, Incze, Shavit and Tzafrir "Flat Combining and the Synchronization-Parallelism Tradeoff"\r
128             [pdf](http://www.cs.bgu.ac.il/~hendlerd/papers/flat-combining.pdf)\r