thread_safe_list.hpp 10 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312
  1. /*
  2. * (1)这个实现要求构建工具支持C++11的atomic mutex condition_veriable功能。这是C++11的基础特性,一般2011年以后的C++编译器都能支持。 例如,visual studio 2012以上。
  3. (2)这个类的实现中有两处使用了unique_lock而不是lock_guard,这是data_cond.wait所需要的,unique_lock是lock_guard的增强版。
  4. 通过std::move的使用(前提是我们实现的类型T定义了移动构造函数和移动赋值函数),能利用移动语义带来的性能优势。
  5. 使用shared_ptr<T>返回元素,用户无需释放元素的内存。
  6. 原文链接:https://blog.csdn.net/weixin_41855721/article/details/81703818
  7. 增加了一些功能函数,
  8. 补充了注释说明
  9. termination_list
  10. // 在退出状态下,所有的功能函数不可用,返回false或者null。
  11. // wait_and_pop不会阻塞。让其直接通过,通过后直接return,不允许做其他的。
  12. pop系列函数
  13. //(1)没有调用termination时,每调用一次出队一个元素,直到队列为空本方法阻塞线程。
  14. //(2)在调用了termination后,本方法永不阻塞,如果原本已经处于阻塞状态,解除阻塞状态。
  15. //(3)返回true时,value值有效。返回false时,value值无效。调用了termination且队列为空时返回false.
  16. 注注注注注意了:模板类不支持分离编译。 模板类的实现必须放在头文件
  17. 为了方便阅读和编程规范,依然将声明和实现分开,就像是把cpp文件的代码复制到h文件的尾部。
  18. 如果将实现放到cpp里面,那么就要为cpp文件加 ifndef define endif 防止重定义。
  19. 然后在调用方include包含cpp文件,但是这样不好。
  20. thread_safe_queue 就是在 Thread_safe_queue 的基础上修改的,
  21. * */
  22. #ifndef __THREAD_SAFE_LIST_H__
  23. #define __THREAD_SAFE_LIST_H__
  24. #include <list>
  25. #include <atomic>
  26. #include <mutex>
  27. #include <condition_variable>
  28. template<class T>
  29. class Thread_safe_list {
  30. public:
  31. Thread_safe_list();
  32. Thread_safe_list(const Thread_safe_list &other);
  33. ~Thread_safe_list();
  34. //(1)没有调用termination时,每调用一次出队一个元素,直到队列为空本方法阻塞线程。
  35. //(2)在调用了termination后,本方法永不阻塞,如果原本已经处于阻塞状态,解除阻塞状态。
  36. //(3)返回true时,value值有效。返回false时,value值无效。调用了termination且队列为空时返回false.
  37. //等待并弹出数据,成功弹出则返回true
  38. // 队列为空则无限等待,termination终止队列,则返回false
  39. bool wait_and_pop(T &value);
  40. //尝试弹出数据,成功弹出则返回true
  41. //队列为空 或者 termination终止队列,返回false
  42. bool try_pop(T &value);
  43. //等待并弹出数据,成功弹出则返回true
  44. // 队列为空则无限等待,termination终止队列,则返回false
  45. std::shared_ptr<T> wait_and_pop();
  46. //尝试弹出数据,成功弹出则返回true
  47. //队列为空 或者 termination终止队列,返回false
  48. std::shared_ptr<T> try_pop();
  49. //插入一项,并唤醒一个线程,
  50. //如果成功插入,则返回true, 失败则返回false
  51. //注:只能唤醒一个线程,防止多线程误判empty()
  52. bool push(T new_value);
  53. //清除队列,只是将队列的实例抛出。T是实例内存,系统自动回收的。
  54. bool clear();
  55. //清除队列,抛出之后还要delete指针。T是动态内存,需要手动回收的。
  56. bool clear_and_delete();
  57. public:
  58. //判空
  59. bool empty();
  60. //获取队列大小
  61. size_t size();
  62. //设置队列为退出状态。并唤醒所有的线程,使其通过wait
  63. // 在退出状态下,所有的功能函数不可用,必须直接返回false或者null。
  64. // wait_and_pop不会阻塞。让其直接通过,通过后直接return,不允许做其他的。
  65. void termination_list();
  66. //唤醒队列,恢复所有的功能函数。wait_and_pop会继续阻塞。
  67. void wake_list();
  68. //获取退出状态
  69. bool get_termination_flag();
  70. //判断是否可以直接通过wait, m_data_list不为空或者m_termination终止时都可以通过等待。
  71. bool is_pass();
  72. public:
  73. std::mutex m_mutex; //队列的锁
  74. std::list<std::shared_ptr<T>> m_data_list; //队列数据,使用智能指针shared_ptr
  75. std::condition_variable m_data_cond; //条件变量
  76. std::atomic<bool> m_termination_flag; //终止标志位
  77. private:
  78. };
  79. template<class T>
  80. Thread_safe_list<T>::Thread_safe_list() {
  81. m_termination_flag = false;
  82. }
  83. template<class T>
  84. Thread_safe_list<T>::Thread_safe_list(const Thread_safe_list &other) {
  85. std::unique_lock<std::mutex> lock_this(m_mutex);
  86. std::unique_lock<std::mutex> lock_other(other.m_mutex);
  87. m_data_list = other.data_list;
  88. m_termination_flag = other.m_termination_flag;
  89. }
  90. template<class T>
  91. Thread_safe_list<T>::~Thread_safe_list() {
  92. //析构时,终止队列,让线程通过等待,方便线程推出。
  93. termination_list();
  94. }
  95. //(1)没有调用termination时,每调用一次出队一个元素,直到队列为空本方法阻塞线程。
  96. //(2)在调用了termination后,本方法永不阻塞,如果原本已经处于阻塞状态,解除阻塞状态。
  97. //(3)返回true时,value值有效。返回false时,value值无效。调用了termination且队列为空时返回false.
  98. //等待并弹出数据,成功弹出则返回true
  99. // 队列为空则无限等待,termination终止队列,则返回false
  100. template<class T>
  101. bool Thread_safe_list<T>::wait_and_pop(T &value) {
  102. if (m_termination_flag) {
  103. return false;
  104. } else {
  105. std::unique_lock<std::mutex> lk(m_mutex);
  106. //无限等待,一直阻塞,除非有新的数据加入或者终止队列
  107. m_data_cond.wait(lk, [this] { return ((!m_data_list.empty()) || m_termination_flag); });
  108. if (m_termination_flag) {
  109. return false;
  110. } else {
  111. value = std::move(*m_data_list.front());
  112. m_data_list.pop_front();
  113. return true;
  114. }
  115. }
  116. }
  117. //尝试弹出数据,成功弹出则返回true
  118. //队列为空 或者 termination终止队列,返回false
  119. template<class T>
  120. bool Thread_safe_list<T>::try_pop(T &value) {
  121. if (m_termination_flag) {
  122. return false;
  123. } else {
  124. std::unique_lock<std::mutex> lk(m_mutex);
  125. if (m_data_list.empty()) {
  126. return false;
  127. } else {
  128. value = std::move(*m_data_list.front());
  129. m_data_list.pop();
  130. return true;
  131. }
  132. }
  133. }
  134. //等待并弹出数据,成功弹出则返回true
  135. // 队列为空则无限等待,termination终止队列,则返回false
  136. template<class T>
  137. std::shared_ptr<T> Thread_safe_list<T>::wait_and_pop() {
  138. if (m_termination_flag) {
  139. return NULL;
  140. } else {
  141. std::unique_lock<std::mutex> lk(m_mutex);
  142. //无限等待,一直阻塞,除非有新的数据加入或者终止队列
  143. m_data_cond.wait(lk, [this] { return ((!m_data_list.empty()) || m_termination_flag); });
  144. if (m_termination_flag) {
  145. return NULL;
  146. } else {
  147. std::shared_ptr<T> res = m_data_list.front();
  148. m_data_list.pop();
  149. return res;
  150. }
  151. }
  152. }
  153. //尝试弹出数据,成功弹出则返回true
  154. //队列为空 或者 termination终止队列,返回false
  155. template<class T>
  156. std::shared_ptr<T> Thread_safe_list<T>::try_pop() {
  157. if (m_termination_flag) {
  158. return NULL;
  159. } else {
  160. std::unique_lock<std::mutex> lk(m_mutex);
  161. if (m_data_list.empty()) {
  162. return NULL;
  163. } else {
  164. std::shared_ptr<T> res = m_data_list.front();
  165. m_data_list.pop();
  166. return res;
  167. }
  168. }
  169. }
  170. //插入一项,并唤醒一个线程,
  171. //如果成功插入,则返回true, 失败则返回false
  172. //注:只能唤醒一个线程,防止多线程误判empty()
  173. template<class T>
  174. bool Thread_safe_list<T>::push(T new_value) {
  175. if (m_termination_flag) {
  176. return false;
  177. } else {
  178. std::shared_ptr<T> data(std::make_shared<T>(std::move(new_value)));
  179. std::unique_lock<std::mutex> lk(m_mutex);
  180. m_data_list.push_back(data);
  181. m_data_cond.notify_one();
  182. return true;
  183. }
  184. }
  185. //清除队列,只是将队列的实例抛出。T是实例内存,系统自动回收的。
  186. template<class T>
  187. bool Thread_safe_list<T>::clear() {
  188. std::unique_lock<std::mutex> lk(m_mutex);
  189. while (!m_data_list.empty()) {
  190. m_data_list.pop_front();
  191. }
  192. return true;
  193. }
  194. //清除队列,抛出之后还要delete指针。T是动态内存,需要手动回收的。
  195. template<class T>
  196. bool Thread_safe_list<T>::clear_and_delete() {
  197. std::unique_lock<std::mutex> lk(m_mutex);
  198. while (!m_data_list.empty()) {
  199. T res = NULL;
  200. res = std::move(*m_data_list.front());
  201. m_data_list.pop_front();
  202. if (res != NULL) {
  203. delete (res);
  204. }
  205. }
  206. return true;
  207. }
  208. //判空
  209. template<class T>
  210. bool Thread_safe_list<T>::empty() {
  211. std::unique_lock<std::mutex> lk(m_mutex);
  212. return m_data_list.empty();
  213. }
  214. //获取队列大小
  215. template<class T>
  216. size_t Thread_safe_list<T>::size() {
  217. std::unique_lock<std::mutex> lk(m_mutex);
  218. return m_data_list.size();
  219. }
  220. //设置队列为退出状态。并唤醒所有的线程,使其通过wait
  221. // 在退出状态下,所有的功能函数不可用,必须直接返回false或者null。
  222. // wait_and_pop不会阻塞。让其直接通过,通过后直接return,不允许做其他的。
  223. template<class T>
  224. void Thread_safe_list<T>::termination_list() {
  225. std::unique_lock<std::mutex> lk(m_mutex);
  226. m_termination_flag = true;
  227. m_data_cond.notify_all();
  228. }
  229. //唤醒队列,恢复所有的功能函数。wait_and_pop会继续阻塞。
  230. template<class T>
  231. void Thread_safe_list<T>::wake_list() {
  232. std::unique_lock<std::mutex> lk(m_mutex);
  233. m_termination_flag = false;
  234. m_data_cond.notify_all();
  235. }
  236. //获取退出状态
  237. template<class T>
  238. bool Thread_safe_list<T>::get_termination_flag() {
  239. return m_termination_flag;
  240. }
  241. //判断是否可以直接通过wait, m_data_list不为空或者m_termination终止时都可以通过等待。
  242. template<class T>
  243. bool Thread_safe_list<T>::is_pass() {
  244. return (!m_data_list.empty() || m_termination_flag);
  245. }
  246. #endif //__THREAD_SAFE_LIST_H__