基于C++11的100行实现简单线程池
基于C++11的100行实现简单线程池
1 线程池原理
线程池是一种多线程处理形式,处理过程中将任务添加到队列,然后在创建线程后自动启动这些任务。线程池线程都是后台线程。每个线程都使用默认的堆栈大小,以默认的优先级运行,并处于多线程单元中。
线程池组成部分:
线程池管理器:用于创建并管理线程池
工作线程: 线程池中实际执行的线程
任务接口: 尽管线程池大多数情况下是用来支持网络服务器,但是我们将线程执行的任务抽象出来,形成任务接口,从而是的线程池与具体的任务无关。
任务队列:线程池的概念具体到实现则可能是队列,链表之类的数据结构,其中保存执行线程。
2 并发下线程池的最佳数量
如果是CPU密集型应用,则线程池大小设置为N+1;(对于计算密集型的任务,在拥有N个处理器的系统上,当线程池的大小为N+1时,通常能实现最优的效率。(即使当计算密集型的线程偶尔由于缺失故障或者其他原因而暂停时,这个额外的线程也能确保CPU的时钟周期不会被浪费。摘自《Java Concurrency In Practise》)。因为CPU密集型任务使得CPU使用率很高,若开过多的线程数,只能增加上下文切换的次数,因此会带来额外的开销。I
如果是IO密集型应用,则线程池大小设置为2N+1;IO密集型任务可以使用稍大的线程池,一般为2*CPU核心数。IO密集型任务CPU使用率并不高,因此可以让CPU在等待IO的时候去处理别的任务,充分利用CPU时间。
2.1 线程池是否一定比单线程高效?
答案是否定的,比如Redis就是单线程的,但它却非常高效,基本操作都能达到十万量级/s。从线程这个角度来看,部分原因在于:多线程带来线程上下文切换开销,单线程就没有这种开销 锁
当然“Redis很快”更本质的原因在于:
Redis基本都是内存操作,这种情况下单线程可以很高效地利用CPU。而多线程适用场景一般是:存在相当比例的IO和网络操作。
3 线程池设计的C++11的特性
- std::vector
- std::thread
- std::mutex
- std::future
- std::condition_variable
C++代码:
threadpool.h
#pragma once
#include <iostream>
#include <vector>
#include <queue>
#include <mutex>
#include <condition_variable>
#include <stdexcept> const int MAX_THREADS = ; // 线程池阈值 template <typename T>
class threadpool
{
public:
threadpool(int number = ); // 线程池构造函数,传入线程数,默认为1
~threadpool(); // 线程池析构函数
bool append(T* request); // 添加任务到任务队列 private:
static void* worker(void* arg); // 工作线程数组
void run(); // 工作线程的执行函数 private:
std::vector<std::thread> work_threads; // 工作线程
std::queue<T*> task_queues; // 任务队列
std::mutex queue_mutex; // 队列互斥锁
std::condition_variable condition; // 条件变量
bool stop; // 停止标志
}; template <typename T>
threadpool<T>::threadpool(int number) :stop(false)
{
if (number <= || number > MAX_THREADS) // 如果number小于等于0或者大于线程池阈值,抛出异常
throw std::exception(); for (int i = ; i < number; i++)
{
std::cout << "创建第" << i << "个线程" << std::endl;
// 添加worker函数到线程中
work_threads.emplace_back(worker, this); // Q:this是什么作用,为什么没了this会出错?
}
} template <typename T>
inline threadpool<T>::~threadpool()
{
{
std::unique_lock<std::mutex> lock(queue_mutex); // 拿锁
stop = true; // 停止标志置位true
}
condition.notify_all(); // 通知所有工作线程,唤醒后因为stop为true了,所有都会结束
for (auto& ww : work_threads)
ww.join();
} template <typename T>
bool threadpool<T>::append(T* request) // 添加一个新的工作任务到任务队列
{
{
std::unique_lock<std::mutex> lock(queue_mutex);
task_queues.emplace(request); // 将任务添加到任务队列
}
condition.notify_one(); // 发送通知,唤醒某一个工作线程执行任务
return true;
} template <typename T>
void* threadpool<T>::worker(void* arg)
{
threadpool* pool = (threadpool*)arg;
pool->run();
return pool;
} template <typename T>
void threadpool<T>::run()
{
while (!stop)
{
std::unique_lock<std::mutex> lk(queue_mutex); // 拿锁(独占所有权式)
this->condition.wait(lk, [this] {return !this->task_queues.empty(); }); // 等待条件成立
/*
执行条件变量等待的时候,已经拿到了锁(即lock已经拿到锁,没有阻塞)
这里将会unlock释放锁,其他线程可以继续拿锁,但此处仍然阻塞,等待条件成立
一旦收到其他线程notify_*唤醒,则再次lock,然后进行条件判断
当{return !this->task_queues.empty(); }的结果为false将阻塞
条件为true时候解除阻塞。此时lock依然为锁住状态
*/
if (this->task_queues.empty()) // 如果任务队列为空,继续
continue;
else
{
T* request = task_queues.front(); // 取得任务队列首任务
task_queues.pop(); // 从队列中移除
if (request)
request->process(); // 执行任务
}
}
}
main.cpp
#include <iostream>
#include "threadpool.h" class Task
{
public:
void process()
{
static int a = ;
++a;
std::cout << "run......" << a << std::endl;
}
}; int main()
{
threadpool<Task> tp(); while ()
{
std::this_thread::sleep_for(std::chrono::milliseconds()); Task* t = new Task();
tp.append(t);
delete t;
}
}
参考:
https://blog.csdn.net/gcola007/article/details/78750220
https://blog.csdn.net/qq_34417408/article/details/78895573
基于C++11的100行实现简单线程池的更多相关文章
- c++11之100行实现简单线程池
代码从github上拷的,写了一些理解,如有错误请指正 Threadpool.h #ifndef THREAD_POOL_H #define THREAD_POOL_H #include <ve ...
- 【C++11应用】基于C++11及std::thread实现的线程池
目录 基于C++11及std::thread实现的线程池 基于C++11及std::thread实现的线程池 线程池源码: #pragma once #include <functional&g ...
- Linux多线程实践(9) --简单线程池的设计与实现
线程池的技术背景 在面向对象编程中,创建和销毁对象是很费时间的,因为创建一个对象要获取内存资源或者其它更多资源.在Java中更是如此,虚拟机将试图跟踪每一个对象,以便能够在对象销毁后进行垃圾回收.所以 ...
- Linux下简单线程池的实现
大多数的网络服务器,包括Web服务器都具有一个特点,就是单位时间内必须处理数目巨大的连接请求,但是处理时间却是比较短的.在传统的多线程服务器模型中是这样实现的:一旦有个服务请求到达,就创建一个新的服务 ...
- C++11的简单线程池代码阅读
这是一个简单的C++11实现的线程池,代码很简单. 原理就是管理一个任务队列和一个工作线程队列. 工作线程不断的从任务队列取任务,然后执行.如果没有任务就等待新任务的到来.添加新任务的时候先添加到任务 ...
- 基于Linux/C++简单线程池的实现
我们知道Java语言对于多线程的支持十分丰富,JDK本身提供了很多性能优良的库,包括ThreadPoolExecutor和ScheduleThreadPoolExecutor等.C++11中的STL也 ...
- C语言实现简单线程池(转-Newerth)
有时我们会需要大量线程来处理一些相互独立的任务,为了避免频繁的申请释放线程所带来的开销,我们可以使用线程池.下面是一个C语言实现的简单的线程池. 头文件: 1: #ifndef THREAD_POOL ...
- LINUX下的简单线程池
前言 任何一种设计方式的引入都会带来额外的开支,是否使用,取决于能带来多大的好处和能带来多大的坏处,好处与坏处包括程序的性能.代码的可读性.代码的可维护性.程序的开发效率等. 线程池适用场合:任务比较 ...
- Linux简单线程池实现(带源码)
这里给个线程池的实现代码,里面带有个应用小例子,方便学习使用,代码 GCC 编译可用.参照代码看下面介绍的线程池原理跟容易接受,百度云下载链接: http://pan.baidu.com/s/1i3z ...
随机推荐
- 纯css实现表单输入验证
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8&quo ...
- Pytorch Tensor, Variable, 自动求导
2018.4.25,Facebook 推出了 PyTorch 0.4.0 版本,在该版本及之后的版本中,torch.autograd.Variable 和 torch.Tensor 同属一类.更确切地 ...
- beSTORM之网络协议Fuzz入门教程
转载自FreeBuf.COM 本文将以SNMP协议为例介绍如何使用beSTORM进行网络协议Fuzz. 实验环境 Windows 7 X64 (IP:192.168.0.123) beSTORM 3. ...
- windows下exfat无法写入怎么修复?
为了能够实现mac与windows文件共享,把移动硬盘格式化为exfat了,可是在osx中放入文件后,在windows上紧进行读取写入时出现错误,提示使用chkdsk进行修正,下面是修正步骤. 方法/ ...
- springmvc 参数解析绑定原理
handlerMethodArgumentResolver:方法参数解析器接口,这个接口是springmvc参数解析绑定的核心接口.不同的参数类型绑定都是通过实行这个接口来实现.也可以通过实现这个接口 ...
- java -io 读取文件操作
主要分为字节读取和字符读取,字节读取可以一个一个读取和字节数组读取,字符读取同样之,字符读取适合文本读取,字节读取皆可以 这里直接上代码,读取文件的9个小demo package com.io; im ...
- DDE 的知识和使用
在github上下载.net 版本的NDde 开发包 或者在此处下载开发包 MSDN 地址 创建服务器 class BasicDDE:DdeServer { public BasicDDE(strin ...
- JavaSE基础(七)--Java流程控制语句之switch case 语句
Java switch case 语句 switch case 语句判断一个变量与一系列值中某个值是否相等,每个值称为一个分支. 语法 switch case 语句语法格式如下: switch(exp ...
- [转帖]【Oracle】详解Oracle中NLS_LANG变量的使用
[Oracle]详解Oracle中NLS_LANG变量的使用 https://www.cnblogs.com/HDK2016/p/6880560.html NLS_LANG=LANGUAGE_TERR ...
- LeetCode 第 15 场双周赛
1287.有序数组中出现次数超过25%的元素 1288.删除被覆盖区间 1286.字母组合迭代器 1289.下降路径最小和 II 下降和不能只保留原数组中最小的两个,hacked. 1287.有序数组 ...