thread_safe_queue.h 9.7 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338
  1. /*
  2. * (1)这个实现要求构建工具支持C++11的atomic mutex condition_veriable功能。这是C++11的基础特性,一般2011年以后的C++编译器都能支持。 例如,visual studio 2012以上。
  3. (2)这个类的实现中有两处使用了unique_lock而不是lock_guard,这是data_cond.wait所需要的,unique_lock是lock_guard的增强版。
  4. 通过std::move的使用(前提是我们实现的类型T定义了移动构造函数和移动赋值函数),能利用移动语义带来的性能优势。
  5. 使用shared_ptr<T>返回元素,用户无需释放元素的内存。
  6. 原文链接:https://blog.csdn.net/weixin_41855721/article/details/81703818
  7. 增加了一些功能函数,
  8. 补充了注释说明
  9. termination_queue
  10. // 在退出状态下,所有的功能函数不可用,返回false或者null。
  11. // wait_and_pop不会阻塞。让其直接通过,通过后直接return,不允许做其他的。
  12. pop系列函数
  13. //(1)没有调用termination时,每调用一次出队一个元素,直到队列为空本方法阻塞线程。
  14. //(2)在调用了termination后,本方法永不阻塞,如果原本已经处于阻塞状态,解除阻塞状态。
  15. //(3)返回true时,value值有效。返回false时,value值无效。调用了termination且队列为空时返回false.
  16. 注注注注注意了:模板类不支持分离编译。 模板类的实现必须放在头文件
  17. 为了方便阅读和编程规范,依然将声明和实现分开,就像是把cpp文件的代码复制到h文件的尾部。
  18. 如果将实现放到cpp里面,那么就要为cpp文件加 ifndef define endif 防止重定义。
  19. 然后在调用方include包含cpp文件,但是这样不好。
  20. * */
  21. #ifndef LIDARMEASURE_THREAD_SAFE_QUEUE_H
  22. #define LIDARMEASURE_THREAD_SAFE_QUEUE_H
  23. #include <queue>
  24. #include <atomic>
  25. #include <mutex>
  26. #include <condition_variable>
  27. template<class T>
  28. class Thread_safe_queue
  29. {
  30. public:
  31. Thread_safe_queue();
  32. Thread_safe_queue(const Thread_safe_queue& other);
  33. ~Thread_safe_queue();
  34. //(1)没有调用termination时,每调用一次出队一个元素,直到队列为空本方法阻塞线程。
  35. //(2)在调用了termination后,本方法永不阻塞,如果原本已经处于阻塞状态,解除阻塞状态。
  36. //(3)返回true时,value值有效。返回false时,value值无效。调用了termination且队列为空时返回false.
  37. //等待并弹出数据,成功弹出则返回true
  38. // 队列为空则无限等待,termination终止队列,则返回false
  39. bool wait_and_pop(T& value);
  40. //尝试弹出数据,成功弹出则返回true
  41. //队列为空 或者 termination终止队列,返回false
  42. bool try_pop(T& value);
  43. //等待并弹出数据,成功弹出则返回true
  44. // 队列为空则无限等待,termination终止队列,则返回false
  45. std::shared_ptr<T> wait_and_pop();
  46. //尝试弹出数据,成功弹出则返回true
  47. //队列为空 或者 termination终止队列,返回false
  48. std::shared_ptr<T> try_pop();
  49. //插入一项,并唤醒一个线程,
  50. //如果成功插入,则返回true, 失败则返回false
  51. //注:只能唤醒一个线程,防止多线程误判empty()
  52. bool push(T new_value);
  53. //清除队列,只是将队列的实例抛出。T是实例内存,系统自动回收的。
  54. bool clear();
  55. //清除队列,抛出之后还要delete指针。T是动态内存,需要手动回收的。
  56. bool clear_and_delete();
  57. public:
  58. //判空
  59. bool empty();
  60. //获取队列大小
  61. size_t size();
  62. //设置队列为退出状态。并唤醒所有的线程,使其通过wait
  63. // 在退出状态下,所有的功能函数不可用,必须直接返回false或者null。
  64. // wait_and_pop不会阻塞。让其直接通过,通过后直接return,不允许做其他的。
  65. void termination_queue();
  66. //唤醒队列,恢复所有的功能函数。wait_and_pop会继续阻塞。
  67. void wake_queue();
  68. //获取退出状态
  69. bool get_termination_flag();
  70. //判断是否可以直接通过wait, m_data_queue不为空或者m_termination终止时都可以通过等待。
  71. bool is_pass();
  72. protected:
  73. std::mutex m_mutex; //队列的锁
  74. std::queue<std::shared_ptr<T>> m_data_queue; //队列数据,使用智能指针shared_ptr
  75. std::condition_variable m_data_cond; //条件变量
  76. std::atomic<bool> m_termination_flag; //终止标志位
  77. private:
  78. };
  79. template<class T>
  80. Thread_safe_queue<T>::Thread_safe_queue()
  81. {
  82. m_termination_flag = false;
  83. }
  84. template<class T>
  85. Thread_safe_queue<T>::Thread_safe_queue(const Thread_safe_queue& other)
  86. {
  87. std::unique_lock<std::mutex> lock_this(m_mutex);
  88. std::unique_lock<std::mutex> lock_other(other.m_mutex);
  89. m_data_queue = other.data_queue;
  90. m_termination_flag = other.m_termination_flag;
  91. }
  92. template<class T>
  93. Thread_safe_queue<T>::~Thread_safe_queue()
  94. {
  95. //析构时,终止队列,让线程通过等待,方便线程推出。
  96. termination_queue();
  97. }
  98. //(1)没有调用termination时,每调用一次出队一个元素,直到队列为空本方法阻塞线程。
  99. //(2)在调用了termination后,本方法永不阻塞,如果原本已经处于阻塞状态,解除阻塞状态。
  100. //(3)返回true时,value值有效。返回false时,value值无效。调用了termination且队列为空时返回false.
  101. //等待并弹出数据,成功弹出则返回true
  102. // 队列为空则无限等待,termination终止队列,则返回false
  103. template<class T>
  104. bool Thread_safe_queue<T>::wait_and_pop(T& value)
  105. {
  106. if ( m_termination_flag )
  107. {
  108. return false;
  109. }
  110. else
  111. {
  112. std::unique_lock<std::mutex> lk(m_mutex);
  113. //无限等待,一直阻塞,除非有新的数据加入或者终止队列
  114. m_data_cond.wait(lk, [this]
  115. { return ((!m_data_queue.empty()) || m_termination_flag); });
  116. if (m_termination_flag)
  117. {
  118. return false;
  119. }
  120. else
  121. {
  122. value = std::move(*m_data_queue.front());
  123. m_data_queue.pop();
  124. return true;
  125. }
  126. }
  127. }
  128. //尝试弹出数据,成功弹出则返回true
  129. //队列为空 或者 termination终止队列,返回false
  130. template<class T>
  131. bool Thread_safe_queue<T>::try_pop(T& value)
  132. {
  133. if ( m_termination_flag )
  134. {
  135. return false;
  136. }
  137. else
  138. {
  139. std::unique_lock<std::mutex> lk(m_mutex);
  140. if (m_data_queue.empty())
  141. {
  142. return false;
  143. }
  144. else
  145. {
  146. value = std::move(*m_data_queue.front());
  147. m_data_queue.pop();
  148. return true;
  149. }
  150. }
  151. }
  152. //等待并弹出数据,成功弹出则返回true
  153. // 队列为空则无限等待,termination终止队列,则返回false
  154. template<class T>
  155. std::shared_ptr<T> Thread_safe_queue<T>::wait_and_pop()
  156. {
  157. if ( m_termination_flag )
  158. {
  159. return NULL;
  160. }
  161. else
  162. {
  163. std::unique_lock<std::mutex> lk(m_mutex);
  164. //无限等待,一直阻塞,除非有新的数据加入或者终止队列
  165. m_data_cond.wait(lk, [this]
  166. { return ((!m_data_queue.empty()) || m_termination_flag); });
  167. if (m_termination_flag)
  168. {
  169. return NULL;
  170. }
  171. else
  172. {
  173. std::shared_ptr<T> res = m_data_queue.front();
  174. m_data_queue.pop();
  175. return res;
  176. }
  177. }
  178. }
  179. //尝试弹出数据,成功弹出则返回true
  180. //队列为空 或者 termination终止队列,返回false
  181. template<class T>
  182. std::shared_ptr<T> Thread_safe_queue<T>::try_pop()
  183. {
  184. if ( m_termination_flag )
  185. {
  186. return NULL;
  187. }
  188. else
  189. {
  190. std::unique_lock<std::mutex> lk(m_mutex);
  191. if (m_data_queue.empty())
  192. {
  193. return NULL;
  194. }
  195. else
  196. {
  197. std::shared_ptr<T> res = m_data_queue.front();
  198. m_data_queue.pop();
  199. return res;
  200. }
  201. }
  202. }
  203. //插入一项,并唤醒一个线程,
  204. //如果成功插入,则返回true, 失败则返回false
  205. //注:只能唤醒一个线程,防止多线程误判empty()
  206. template<class T>
  207. bool Thread_safe_queue<T>::push(T new_value)
  208. {
  209. if (m_termination_flag)
  210. {
  211. return false;
  212. }
  213. else
  214. {
  215. std::shared_ptr<T> data(std::make_shared<T>(std::move(new_value)));
  216. std::unique_lock<std::mutex> lk(m_mutex);
  217. m_data_queue.push(data);
  218. m_data_cond.notify_one();
  219. return true;
  220. }
  221. }
  222. //清除队列,只是将队列的实例抛出。T是实例内存,系统自动回收的。
  223. template<class T>
  224. bool Thread_safe_queue<T>::clear()
  225. {
  226. std::unique_lock<std::mutex> lk(m_mutex);
  227. while (!m_data_queue.empty())
  228. {
  229. m_data_queue.pop();
  230. }
  231. return true;
  232. }
  233. //清除队列,抛出之后还要delete指针。T是动态内存,需要手动回收的。
  234. template<class T>
  235. bool Thread_safe_queue<T>::clear_and_delete()
  236. {
  237. std::unique_lock<std::mutex> lk(m_mutex);
  238. while (!m_data_queue.empty())
  239. {
  240. T res = NULL;
  241. res = std::move(*m_data_queue.front());
  242. m_data_queue.pop();
  243. if(res != NULL)
  244. {
  245. delete(res);
  246. }
  247. }
  248. return true;
  249. }
  250. //判空
  251. template<class T>
  252. bool Thread_safe_queue<T>::empty()
  253. {
  254. std::unique_lock<std::mutex> lk(m_mutex);
  255. return m_data_queue.empty();
  256. }
  257. //获取队列大小
  258. template<class T>
  259. size_t Thread_safe_queue<T>::size()
  260. {
  261. std::unique_lock<std::mutex> lk(m_mutex);
  262. return m_data_queue.size();
  263. }
  264. //设置队列为退出状态。并唤醒所有的线程,使其通过wait
  265. // 在退出状态下,所有的功能函数不可用,必须直接返回false或者null。
  266. // wait_and_pop不会阻塞。让其直接通过,通过后直接return,不允许做其他的。
  267. template<class T>
  268. void Thread_safe_queue<T>::termination_queue()
  269. {
  270. std::unique_lock<std::mutex> lk(m_mutex);
  271. m_termination_flag = true;
  272. m_data_cond.notify_all();
  273. }
  274. //唤醒队列,恢复所有的功能函数。wait_and_pop会继续阻塞。
  275. template<class T>
  276. void Thread_safe_queue<T>::wake_queue()
  277. {
  278. std::unique_lock<std::mutex> lk(m_mutex);
  279. m_termination_flag = false;
  280. m_data_cond.notify_all();
  281. }
  282. //获取退出状态
  283. template<class T>
  284. bool Thread_safe_queue<T>::get_termination_flag()
  285. {
  286. return m_termination_flag;
  287. }
  288. //判断是否可以直接通过wait, m_data_queue不为空或者m_termination终止时都可以通过等待。
  289. template<class T>
  290. bool Thread_safe_queue<T>::is_pass()
  291. {
  292. return (!m_data_queue.empty() || m_termination_flag);
  293. }
  294. #endif //LIDARMEASURE_THREAD_SAFE_QUEUE_H