faiss 0.2.0 → 0.2.4

Sign up to get free protection for your applications and to get access to all the features.
Files changed (215) hide show
  1. checksums.yaml +4 -4
  2. data/CHANGELOG.md +16 -0
  3. data/LICENSE.txt +1 -1
  4. data/README.md +7 -7
  5. data/ext/faiss/extconf.rb +6 -3
  6. data/ext/faiss/numo.hpp +4 -4
  7. data/ext/faiss/utils.cpp +1 -1
  8. data/ext/faiss/utils.h +1 -1
  9. data/lib/faiss/version.rb +1 -1
  10. data/vendor/faiss/faiss/AutoTune.cpp +292 -291
  11. data/vendor/faiss/faiss/AutoTune.h +55 -56
  12. data/vendor/faiss/faiss/Clustering.cpp +365 -194
  13. data/vendor/faiss/faiss/Clustering.h +102 -35
  14. data/vendor/faiss/faiss/IVFlib.cpp +171 -195
  15. data/vendor/faiss/faiss/IVFlib.h +48 -51
  16. data/vendor/faiss/faiss/Index.cpp +85 -103
  17. data/vendor/faiss/faiss/Index.h +54 -48
  18. data/vendor/faiss/faiss/Index2Layer.cpp +126 -224
  19. data/vendor/faiss/faiss/Index2Layer.h +22 -36
  20. data/vendor/faiss/faiss/IndexAdditiveQuantizer.cpp +407 -0
  21. data/vendor/faiss/faiss/IndexAdditiveQuantizer.h +195 -0
  22. data/vendor/faiss/faiss/IndexBinary.cpp +45 -37
  23. data/vendor/faiss/faiss/IndexBinary.h +140 -132
  24. data/vendor/faiss/faiss/IndexBinaryFlat.cpp +73 -53
  25. data/vendor/faiss/faiss/IndexBinaryFlat.h +29 -24
  26. data/vendor/faiss/faiss/IndexBinaryFromFloat.cpp +46 -43
  27. data/vendor/faiss/faiss/IndexBinaryFromFloat.h +16 -15
  28. data/vendor/faiss/faiss/IndexBinaryHNSW.cpp +215 -232
  29. data/vendor/faiss/faiss/IndexBinaryHNSW.h +25 -24
  30. data/vendor/faiss/faiss/IndexBinaryHash.cpp +182 -177
  31. data/vendor/faiss/faiss/IndexBinaryHash.h +41 -34
  32. data/vendor/faiss/faiss/IndexBinaryIVF.cpp +489 -461
  33. data/vendor/faiss/faiss/IndexBinaryIVF.h +97 -68
  34. data/vendor/faiss/faiss/IndexFlat.cpp +115 -176
  35. data/vendor/faiss/faiss/IndexFlat.h +42 -59
  36. data/vendor/faiss/faiss/IndexFlatCodes.cpp +67 -0
  37. data/vendor/faiss/faiss/IndexFlatCodes.h +47 -0
  38. data/vendor/faiss/faiss/IndexHNSW.cpp +372 -348
  39. data/vendor/faiss/faiss/IndexHNSW.h +57 -41
  40. data/vendor/faiss/faiss/IndexIVF.cpp +545 -453
  41. data/vendor/faiss/faiss/IndexIVF.h +169 -118
  42. data/vendor/faiss/faiss/IndexIVFAdditiveQuantizer.cpp +316 -0
  43. data/vendor/faiss/faiss/IndexIVFAdditiveQuantizer.h +121 -0
  44. data/vendor/faiss/faiss/IndexIVFFlat.cpp +247 -252
  45. data/vendor/faiss/faiss/IndexIVFFlat.h +48 -51
  46. data/vendor/faiss/faiss/IndexIVFPQ.cpp +459 -517
  47. data/vendor/faiss/faiss/IndexIVFPQ.h +75 -67
  48. data/vendor/faiss/faiss/IndexIVFPQFastScan.cpp +406 -372
  49. data/vendor/faiss/faiss/IndexIVFPQFastScan.h +82 -57
  50. data/vendor/faiss/faiss/IndexIVFPQR.cpp +104 -102
  51. data/vendor/faiss/faiss/IndexIVFPQR.h +33 -28
  52. data/vendor/faiss/faiss/IndexIVFSpectralHash.cpp +163 -150
  53. data/vendor/faiss/faiss/IndexIVFSpectralHash.h +38 -25
  54. data/vendor/faiss/faiss/IndexLSH.cpp +66 -113
  55. data/vendor/faiss/faiss/IndexLSH.h +20 -38
  56. data/vendor/faiss/faiss/IndexLattice.cpp +42 -56
  57. data/vendor/faiss/faiss/IndexLattice.h +11 -16
  58. data/vendor/faiss/faiss/IndexNNDescent.cpp +229 -0
  59. data/vendor/faiss/faiss/IndexNNDescent.h +72 -0
  60. data/vendor/faiss/faiss/IndexNSG.cpp +301 -0
  61. data/vendor/faiss/faiss/IndexNSG.h +85 -0
  62. data/vendor/faiss/faiss/IndexPQ.cpp +387 -495
  63. data/vendor/faiss/faiss/IndexPQ.h +64 -82
  64. data/vendor/faiss/faiss/IndexPQFastScan.cpp +143 -170
  65. data/vendor/faiss/faiss/IndexPQFastScan.h +46 -32
  66. data/vendor/faiss/faiss/IndexPreTransform.cpp +120 -150
  67. data/vendor/faiss/faiss/IndexPreTransform.h +33 -36
  68. data/vendor/faiss/faiss/IndexRefine.cpp +139 -127
  69. data/vendor/faiss/faiss/IndexRefine.h +32 -23
  70. data/vendor/faiss/faiss/IndexReplicas.cpp +147 -153
  71. data/vendor/faiss/faiss/IndexReplicas.h +62 -56
  72. data/vendor/faiss/faiss/IndexScalarQuantizer.cpp +111 -172
  73. data/vendor/faiss/faiss/IndexScalarQuantizer.h +41 -59
  74. data/vendor/faiss/faiss/IndexShards.cpp +256 -240
  75. data/vendor/faiss/faiss/IndexShards.h +85 -73
  76. data/vendor/faiss/faiss/MatrixStats.cpp +112 -97
  77. data/vendor/faiss/faiss/MatrixStats.h +7 -10
  78. data/vendor/faiss/faiss/MetaIndexes.cpp +135 -157
  79. data/vendor/faiss/faiss/MetaIndexes.h +40 -34
  80. data/vendor/faiss/faiss/MetricType.h +7 -7
  81. data/vendor/faiss/faiss/VectorTransform.cpp +654 -475
  82. data/vendor/faiss/faiss/VectorTransform.h +64 -89
  83. data/vendor/faiss/faiss/clone_index.cpp +78 -73
  84. data/vendor/faiss/faiss/clone_index.h +4 -9
  85. data/vendor/faiss/faiss/gpu/GpuAutoTune.cpp +33 -38
  86. data/vendor/faiss/faiss/gpu/GpuAutoTune.h +11 -9
  87. data/vendor/faiss/faiss/gpu/GpuCloner.cpp +198 -171
  88. data/vendor/faiss/faiss/gpu/GpuCloner.h +53 -35
  89. data/vendor/faiss/faiss/gpu/GpuClonerOptions.cpp +12 -14
  90. data/vendor/faiss/faiss/gpu/GpuClonerOptions.h +27 -25
  91. data/vendor/faiss/faiss/gpu/GpuDistance.h +116 -112
  92. data/vendor/faiss/faiss/gpu/GpuFaissAssert.h +1 -2
  93. data/vendor/faiss/faiss/gpu/GpuIcmEncoder.h +60 -0
  94. data/vendor/faiss/faiss/gpu/GpuIndex.h +134 -137
  95. data/vendor/faiss/faiss/gpu/GpuIndexBinaryFlat.h +76 -73
  96. data/vendor/faiss/faiss/gpu/GpuIndexFlat.h +173 -162
  97. data/vendor/faiss/faiss/gpu/GpuIndexIVF.h +67 -64
  98. data/vendor/faiss/faiss/gpu/GpuIndexIVFFlat.h +89 -86
  99. data/vendor/faiss/faiss/gpu/GpuIndexIVFPQ.h +150 -141
  100. data/vendor/faiss/faiss/gpu/GpuIndexIVFScalarQuantizer.h +101 -103
  101. data/vendor/faiss/faiss/gpu/GpuIndicesOptions.h +17 -16
  102. data/vendor/faiss/faiss/gpu/GpuResources.cpp +116 -128
  103. data/vendor/faiss/faiss/gpu/GpuResources.h +182 -186
  104. data/vendor/faiss/faiss/gpu/StandardGpuResources.cpp +433 -422
  105. data/vendor/faiss/faiss/gpu/StandardGpuResources.h +131 -130
  106. data/vendor/faiss/faiss/gpu/impl/InterleavedCodes.cpp +468 -456
  107. data/vendor/faiss/faiss/gpu/impl/InterleavedCodes.h +25 -19
  108. data/vendor/faiss/faiss/gpu/impl/RemapIndices.cpp +22 -20
  109. data/vendor/faiss/faiss/gpu/impl/RemapIndices.h +9 -8
  110. data/vendor/faiss/faiss/gpu/perf/IndexWrapper-inl.h +39 -44
  111. data/vendor/faiss/faiss/gpu/perf/IndexWrapper.h +16 -14
  112. data/vendor/faiss/faiss/gpu/perf/PerfClustering.cpp +77 -71
  113. data/vendor/faiss/faiss/gpu/perf/PerfIVFPQAdd.cpp +109 -88
  114. data/vendor/faiss/faiss/gpu/perf/WriteIndex.cpp +75 -64
  115. data/vendor/faiss/faiss/gpu/test/TestCodePacking.cpp +230 -215
  116. data/vendor/faiss/faiss/gpu/test/TestGpuIndexBinaryFlat.cpp +80 -86
  117. data/vendor/faiss/faiss/gpu/test/TestGpuIndexFlat.cpp +284 -277
  118. data/vendor/faiss/faiss/gpu/test/TestGpuIndexIVFFlat.cpp +416 -416
  119. data/vendor/faiss/faiss/gpu/test/TestGpuIndexIVFPQ.cpp +611 -517
  120. data/vendor/faiss/faiss/gpu/test/TestGpuIndexIVFScalarQuantizer.cpp +166 -164
  121. data/vendor/faiss/faiss/gpu/test/TestGpuMemoryException.cpp +61 -53
  122. data/vendor/faiss/faiss/gpu/test/TestUtils.cpp +274 -238
  123. data/vendor/faiss/faiss/gpu/test/TestUtils.h +73 -57
  124. data/vendor/faiss/faiss/gpu/test/demo_ivfpq_indexing_gpu.cpp +47 -50
  125. data/vendor/faiss/faiss/gpu/utils/DeviceUtils.h +79 -72
  126. data/vendor/faiss/faiss/gpu/utils/StackDeviceMemory.cpp +140 -146
  127. data/vendor/faiss/faiss/gpu/utils/StackDeviceMemory.h +69 -71
  128. data/vendor/faiss/faiss/gpu/utils/StaticUtils.h +21 -16
  129. data/vendor/faiss/faiss/gpu/utils/Timer.cpp +25 -29
  130. data/vendor/faiss/faiss/gpu/utils/Timer.h +30 -29
  131. data/vendor/faiss/faiss/impl/AdditiveQuantizer.cpp +503 -0
  132. data/vendor/faiss/faiss/impl/AdditiveQuantizer.h +175 -0
  133. data/vendor/faiss/faiss/impl/AuxIndexStructures.cpp +90 -120
  134. data/vendor/faiss/faiss/impl/AuxIndexStructures.h +81 -65
  135. data/vendor/faiss/faiss/impl/FaissAssert.h +73 -58
  136. data/vendor/faiss/faiss/impl/FaissException.cpp +56 -48
  137. data/vendor/faiss/faiss/impl/FaissException.h +41 -29
  138. data/vendor/faiss/faiss/impl/HNSW.cpp +606 -617
  139. data/vendor/faiss/faiss/impl/HNSW.h +179 -200
  140. data/vendor/faiss/faiss/impl/LocalSearchQuantizer.cpp +855 -0
  141. data/vendor/faiss/faiss/impl/LocalSearchQuantizer.h +244 -0
  142. data/vendor/faiss/faiss/impl/NNDescent.cpp +487 -0
  143. data/vendor/faiss/faiss/impl/NNDescent.h +154 -0
  144. data/vendor/faiss/faiss/impl/NSG.cpp +679 -0
  145. data/vendor/faiss/faiss/impl/NSG.h +199 -0
  146. data/vendor/faiss/faiss/impl/PolysemousTraining.cpp +484 -454
  147. data/vendor/faiss/faiss/impl/PolysemousTraining.h +52 -55
  148. data/vendor/faiss/faiss/impl/ProductQuantizer-inl.h +26 -47
  149. data/vendor/faiss/faiss/impl/ProductQuantizer.cpp +469 -459
  150. data/vendor/faiss/faiss/impl/ProductQuantizer.h +76 -87
  151. data/vendor/faiss/faiss/impl/ResidualQuantizer.cpp +758 -0
  152. data/vendor/faiss/faiss/impl/ResidualQuantizer.h +188 -0
  153. data/vendor/faiss/faiss/impl/ResultHandler.h +96 -132
  154. data/vendor/faiss/faiss/impl/ScalarQuantizer.cpp +647 -707
  155. data/vendor/faiss/faiss/impl/ScalarQuantizer.h +48 -46
  156. data/vendor/faiss/faiss/impl/ThreadedIndex-inl.h +129 -131
  157. data/vendor/faiss/faiss/impl/ThreadedIndex.h +61 -55
  158. data/vendor/faiss/faiss/impl/index_read.cpp +631 -480
  159. data/vendor/faiss/faiss/impl/index_write.cpp +547 -407
  160. data/vendor/faiss/faiss/impl/io.cpp +76 -95
  161. data/vendor/faiss/faiss/impl/io.h +31 -41
  162. data/vendor/faiss/faiss/impl/io_macros.h +60 -29
  163. data/vendor/faiss/faiss/impl/kmeans1d.cpp +301 -0
  164. data/vendor/faiss/faiss/impl/kmeans1d.h +48 -0
  165. data/vendor/faiss/faiss/impl/lattice_Zn.cpp +137 -186
  166. data/vendor/faiss/faiss/impl/lattice_Zn.h +40 -51
  167. data/vendor/faiss/faiss/impl/platform_macros.h +29 -8
  168. data/vendor/faiss/faiss/impl/pq4_fast_scan.cpp +77 -124
  169. data/vendor/faiss/faiss/impl/pq4_fast_scan.h +39 -48
  170. data/vendor/faiss/faiss/impl/pq4_fast_scan_search_1.cpp +41 -52
  171. data/vendor/faiss/faiss/impl/pq4_fast_scan_search_qbs.cpp +80 -117
  172. data/vendor/faiss/faiss/impl/simd_result_handlers.h +109 -137
  173. data/vendor/faiss/faiss/index_factory.cpp +619 -397
  174. data/vendor/faiss/faiss/index_factory.h +8 -6
  175. data/vendor/faiss/faiss/index_io.h +23 -26
  176. data/vendor/faiss/faiss/invlists/BlockInvertedLists.cpp +67 -75
  177. data/vendor/faiss/faiss/invlists/BlockInvertedLists.h +22 -24
  178. data/vendor/faiss/faiss/invlists/DirectMap.cpp +96 -112
  179. data/vendor/faiss/faiss/invlists/DirectMap.h +29 -33
  180. data/vendor/faiss/faiss/invlists/InvertedLists.cpp +307 -364
  181. data/vendor/faiss/faiss/invlists/InvertedLists.h +151 -151
  182. data/vendor/faiss/faiss/invlists/InvertedListsIOHook.cpp +29 -34
  183. data/vendor/faiss/faiss/invlists/InvertedListsIOHook.h +17 -18
  184. data/vendor/faiss/faiss/invlists/OnDiskInvertedLists.cpp +257 -293
  185. data/vendor/faiss/faiss/invlists/OnDiskInvertedLists.h +50 -45
  186. data/vendor/faiss/faiss/python/python_callbacks.cpp +23 -26
  187. data/vendor/faiss/faiss/python/python_callbacks.h +9 -16
  188. data/vendor/faiss/faiss/utils/AlignedTable.h +79 -44
  189. data/vendor/faiss/faiss/utils/Heap.cpp +40 -48
  190. data/vendor/faiss/faiss/utils/Heap.h +186 -209
  191. data/vendor/faiss/faiss/utils/WorkerThread.cpp +67 -76
  192. data/vendor/faiss/faiss/utils/WorkerThread.h +32 -33
  193. data/vendor/faiss/faiss/utils/distances.cpp +305 -312
  194. data/vendor/faiss/faiss/utils/distances.h +170 -122
  195. data/vendor/faiss/faiss/utils/distances_simd.cpp +498 -508
  196. data/vendor/faiss/faiss/utils/extra_distances-inl.h +117 -0
  197. data/vendor/faiss/faiss/utils/extra_distances.cpp +113 -232
  198. data/vendor/faiss/faiss/utils/extra_distances.h +30 -29
  199. data/vendor/faiss/faiss/utils/hamming-inl.h +260 -209
  200. data/vendor/faiss/faiss/utils/hamming.cpp +375 -469
  201. data/vendor/faiss/faiss/utils/hamming.h +62 -85
  202. data/vendor/faiss/faiss/utils/ordered_key_value.h +16 -18
  203. data/vendor/faiss/faiss/utils/partitioning.cpp +393 -318
  204. data/vendor/faiss/faiss/utils/partitioning.h +26 -21
  205. data/vendor/faiss/faiss/utils/quantize_lut.cpp +78 -66
  206. data/vendor/faiss/faiss/utils/quantize_lut.h +22 -20
  207. data/vendor/faiss/faiss/utils/random.cpp +39 -63
  208. data/vendor/faiss/faiss/utils/random.h +13 -16
  209. data/vendor/faiss/faiss/utils/simdlib.h +4 -2
  210. data/vendor/faiss/faiss/utils/simdlib_avx2.h +88 -85
  211. data/vendor/faiss/faiss/utils/simdlib_emulated.h +226 -165
  212. data/vendor/faiss/faiss/utils/simdlib_neon.h +832 -0
  213. data/vendor/faiss/faiss/utils/utils.cpp +304 -287
  214. data/vendor/faiss/faiss/utils/utils.h +54 -49
  215. metadata +29 -4
@@ -5,9 +5,8 @@
5
5
  * LICENSE file in the root directory of this source tree.
6
6
  */
7
7
 
8
-
9
- #include <faiss/utils/WorkerThread.h>
10
8
  #include <faiss/impl/FaissAssert.h>
9
+ #include <faiss/utils/WorkerThread.h>
11
10
  #include <exception>
12
11
 
13
12
  namespace faiss {
@@ -15,112 +14,104 @@ namespace faiss {
15
14
  namespace {
16
15
 
17
16
  // Captures any exceptions thrown by the lambda and returns them via the promise
18
- void runCallback(std::function<void()>& fn,
19
- std::promise<bool>& promise) {
20
- try {
21
- fn();
22
- promise.set_value(true);
23
- } catch (...) {
24
- promise.set_exception(std::current_exception());
25
- }
17
+ void runCallback(std::function<void()>& fn, std::promise<bool>& promise) {
18
+ try {
19
+ fn();
20
+ promise.set_value(true);
21
+ } catch (...) {
22
+ promise.set_exception(std::current_exception());
23
+ }
26
24
  }
27
25
 
28
26
  } // namespace
29
27
 
30
- WorkerThread::WorkerThread() :
31
- wantStop_(false) {
32
- startThread();
28
+ WorkerThread::WorkerThread() : wantStop_(false) {
29
+ startThread();
33
30
 
34
- // Make sure that the thread has started before continuing
35
- add([](){}).get();
31
+ // Make sure that the thread has started before continuing
32
+ add([]() {}).get();
36
33
  }
37
34
 
38
35
  WorkerThread::~WorkerThread() {
39
- stop();
40
- waitForThreadExit();
36
+ stop();
37
+ waitForThreadExit();
41
38
  }
42
39
 
43
- void
44
- WorkerThread::startThread() {
45
- thread_ = std::thread([this](){ threadMain(); });
40
+ void WorkerThread::startThread() {
41
+ thread_ = std::thread([this]() { threadMain(); });
46
42
  }
47
43
 
48
- void
49
- WorkerThread::stop() {
50
- std::lock_guard<std::mutex> guard(mutex_);
44
+ void WorkerThread::stop() {
45
+ std::lock_guard<std::mutex> guard(mutex_);
51
46
 
52
- wantStop_ = true;
53
- monitor_.notify_one();
47
+ wantStop_ = true;
48
+ monitor_.notify_one();
54
49
  }
55
50
 
56
- std::future<bool>
57
- WorkerThread::add(std::function<void()> f) {
58
- std::lock_guard<std::mutex> guard(mutex_);
51
+ std::future<bool> WorkerThread::add(std::function<void()> f) {
52
+ std::lock_guard<std::mutex> guard(mutex_);
59
53
 
60
- if (wantStop_) {
61
- // The timer thread has been stopped, or we want to stop; we can't
62
- // schedule anything else
63
- std::promise<bool> p;
64
- auto fut = p.get_future();
54
+ if (wantStop_) {
55
+ // The timer thread has been stopped, or we want to stop; we can't
56
+ // schedule anything else
57
+ std::promise<bool> p;
58
+ auto fut = p.get_future();
65
59
 
66
- // did not execute
67
- p.set_value(false);
68
- return fut;
69
- }
60
+ // did not execute
61
+ p.set_value(false);
62
+ return fut;
63
+ }
70
64
 
71
- auto pr = std::promise<bool>();
72
- auto fut = pr.get_future();
65
+ auto pr = std::promise<bool>();
66
+ auto fut = pr.get_future();
73
67
 
74
- queue_.emplace_back(std::make_pair(std::move(f), std::move(pr)));
68
+ queue_.emplace_back(std::make_pair(std::move(f), std::move(pr)));
75
69
 
76
- // Wake up our thread
77
- monitor_.notify_one();
78
- return fut;
70
+ // Wake up our thread
71
+ monitor_.notify_one();
72
+ return fut;
79
73
  }
80
74
 
81
- void
82
- WorkerThread::threadMain() {
83
- threadLoop();
75
+ void WorkerThread::threadMain() {
76
+ threadLoop();
84
77
 
85
- // Call all pending tasks
86
- FAISS_ASSERT(wantStop_);
78
+ // Call all pending tasks
79
+ FAISS_ASSERT(wantStop_);
87
80
 
88
- // flush all pending operations
89
- for (auto& f : queue_) {
90
- runCallback(f.first, f.second);
91
- }
81
+ // flush all pending operations
82
+ for (auto& f : queue_) {
83
+ runCallback(f.first, f.second);
84
+ }
92
85
  }
93
86
 
94
- void
95
- WorkerThread::threadLoop() {
96
- while (true) {
97
- std::pair<std::function<void()>, std::promise<bool>> data;
87
+ void WorkerThread::threadLoop() {
88
+ while (true) {
89
+ std::pair<std::function<void()>, std::promise<bool>> data;
98
90
 
99
- {
100
- std::unique_lock<std::mutex> lock(mutex_);
91
+ {
92
+ std::unique_lock<std::mutex> lock(mutex_);
101
93
 
102
- while (!wantStop_ && queue_.empty()) {
103
- monitor_.wait(lock);
104
- }
94
+ while (!wantStop_ && queue_.empty()) {
95
+ monitor_.wait(lock);
96
+ }
105
97
 
106
- if (wantStop_) {
107
- return;
108
- }
98
+ if (wantStop_) {
99
+ return;
100
+ }
109
101
 
110
- data = std::move(queue_.front());
111
- queue_.pop_front();
112
- }
102
+ data = std::move(queue_.front());
103
+ queue_.pop_front();
104
+ }
113
105
 
114
- runCallback(data.first, data.second);
115
- }
106
+ runCallback(data.first, data.second);
107
+ }
116
108
  }
117
109
 
118
- void
119
- WorkerThread::waitForThreadExit() {
120
- try {
121
- thread_.join();
122
- } catch (...) {
123
- }
110
+ void WorkerThread::waitForThreadExit() {
111
+ try {
112
+ thread_.join();
113
+ } catch (...) {
114
+ }
124
115
  }
125
116
 
126
- } // namespace
117
+ } // namespace faiss
@@ -5,57 +5,56 @@
5
5
  * LICENSE file in the root directory of this source tree.
6
6
  */
7
7
 
8
-
9
8
  #pragma once
10
9
 
11
10
  #include <condition_variable>
12
- #include <future>
13
11
  #include <deque>
12
+ #include <future>
14
13
  #include <thread>
15
14
 
16
15
  namespace faiss {
17
16
 
18
17
  class WorkerThread {
19
- public:
20
- WorkerThread();
18
+ public:
19
+ WorkerThread();
21
20
 
22
- /// Stops and waits for the worker thread to exit, flushing all
23
- /// pending lambdas
24
- ~WorkerThread();
21
+ /// Stops and waits for the worker thread to exit, flushing all
22
+ /// pending lambdas
23
+ ~WorkerThread();
25
24
 
26
- /// Request that the worker thread stop itself
27
- void stop();
25
+ /// Request that the worker thread stop itself
26
+ void stop();
28
27
 
29
- /// Blocking waits in the current thread for the worker thread to
30
- /// stop
31
- void waitForThreadExit();
28
+ /// Blocking waits in the current thread for the worker thread to
29
+ /// stop
30
+ void waitForThreadExit();
32
31
 
33
- /// Adds a lambda to run on the worker thread; returns a future that
34
- /// can be used to block on its completion.
35
- /// Future status is `true` if the lambda was run in the worker
36
- /// thread; `false` if it was not run, because the worker thread is
37
- /// exiting or has exited.
38
- std::future<bool> add(std::function<void()> f);
32
+ /// Adds a lambda to run on the worker thread; returns a future that
33
+ /// can be used to block on its completion.
34
+ /// Future status is `true` if the lambda was run in the worker
35
+ /// thread; `false` if it was not run, because the worker thread is
36
+ /// exiting or has exited.
37
+ std::future<bool> add(std::function<void()> f);
39
38
 
40
- private:
41
- void startThread();
42
- void threadMain();
43
- void threadLoop();
39
+ private:
40
+ void startThread();
41
+ void threadMain();
42
+ void threadLoop();
44
43
 
45
- /// Thread that all queued lambdas are run on
46
- std::thread thread_;
44
+ /// Thread that all queued lambdas are run on
45
+ std::thread thread_;
47
46
 
48
- /// Mutex for the queue and exit status
49
- std::mutex mutex_;
47
+ /// Mutex for the queue and exit status
48
+ std::mutex mutex_;
50
49
 
51
- /// Monitor for the exit status and the queue
52
- std::condition_variable monitor_;
50
+ /// Monitor for the exit status and the queue
51
+ std::condition_variable monitor_;
53
52
 
54
- /// Whether or not we want the thread to exit
55
- bool wantStop_;
53
+ /// Whether or not we want the thread to exit
54
+ bool wantStop_;
56
55
 
57
- /// Queue of pending lambdas to call
58
- std::deque<std::pair<std::function<void()>, std::promise<bool>>> queue_;
56
+ /// Queue of pending lambdas to call
57
+ std::deque<std::pair<std::function<void()>, std::promise<bool>>> queue_;
59
58
  };
60
59
 
61
- } // namespace
60
+ } // namespace faiss