基于C++11的线程池

背景

在传统的收到任务即创建线程的情况下,我们每收到一个任务,就创建一个线程,执行任务,销毁线程,

我们把这三个过程所用的时间分别记做T1,T2,T3

任务本身所用的时间仅占T2/(T1+T2+T3),这在任务本身所用时间很短的情况下, 效率是很低的

此外,通常操作系统所能创建的线程数量都是有限的,并不能无限制的创建线程。

 

而在线程池中,我们通常会预先创建m个线程,放到空闲容器中,当有任务来临时,线程池会从空闲的线程中挑选一个线程来执行该任务,

在执行完毕后再将其放回空闲容器中

 

C++11

在C++11中,C++对线程提供了一个很高的抽象,并没有很好的提供优先级控制等功能,需要调用std::thread::native_handle(),获取原生线程对象

运行平台特定的操作,但这就丧失了std::thread在不同平台上代码层面的一致性。

所以在项目中实现了对std::thread二次封装,并提供了基本的优先级控制

 

项目概述

项目中有一个主线程,即运行程序时创建的线程可以从用户那里获取任务,还有一个管理线程,用于进行线程池中线程的调度,还有初始化线程池时创建的若干空闲线程,用于执行任务

 

项目中主要有以下几个类:

Task:任务类,内有任务的优先级,和一个纯虚Run方法,我们需要派生Task,将要完成的任务写到Run方法中

MyThread:线程类,封装了C++11的thread,每一个线程可以关联一个Task对象,执行其Run方法

BusyThreadContainer:工作容器类,采用std::list<MyThread*>实现,储存工作状态的线程

IdleThreadContainer:空闲容器类,采用std::vector<MyThread*>实现,储存处于空闲状态的线程

TaskContainer:任务容器类,采用priority_queue<Task*>实现,储存所有用户添加未执行的任务

MyThreadPool:线程池类,用于从用户获取任务,管理任务,实现对线程池中线程的调度

 

类图如下

MainDig

*UserTask为用户自己编写的从Task派生的任务类

 

Task类

复制代码
namespace
{enum  PRIORITY{MIN = 1, NORMAL = 25, MAX = 50};
}class Task
{public:Task(){}void SetPriority(int priority){if (priority>(PRIORITY::MAX)){priority = (PRIORITY::MAX);}else if (priority>(PRIORITY::MAX)){priority = (PRIORITY::MIN);}}    virtual void Run() = 0;
protected:int priority_;
};
复制代码
 

void SetPriority(int priority) :设置线程的优先级,数值在1-50之间,值越大,优先级越高

virtual void run() = 0:线程执行的方法,用户需要重写为自己的方法

 

MyThread类

复制代码
class MyThread
{friend bool operator==(MyThread my1, MyThread my2);friend bool operator!=(MyThread my1, MyThread my2);
public:MyThread(MyThreadPool *pool);void Assign(Task *Task);void Run();void StartThread();int getthreadid();void setisdetach(bool isdetach);    
private:MyThreadPool *mythreadpool_;static int  s_threadnumber;bool isdetach_;Task *task_;int threadid_;std::thread thread_;
};
复制代码

方法:

MyThread(MyThreadPool *pool):构造一个MyThread对象,将自己与指定的线程池相关联起来

void Assign(Task *Task):将一个任务与该线程相关联起来

void Run():调用了Task的Run方法,同时在Task的Run方法结束后将自己从工作容器移回空闲容器

void StartThread():执行线程的Run方法,即执行了Task的Run方法

int getthreadid():获取线程的id号

void setisdetach(bool isdetach):设置线程在运行的时候是join还是detach的

 

BusyThreadContainer类

复制代码
class BusyThreadContainer
{public:BusyThreadContainer();~BusyThreadContainer();void push(MyThread *m);std::list<MyThread*>::size_type size();void erase(MyThread *m);private:std::list<MyThread*> busy_thread_container_;typedef std::list<MyThread*> Container;typedef Container::iterator Iterator;
};
复制代码
 

void push(MyThread *m):将一个线程放入工作容器中

void erase(MyThread *m):删除一个指定的线程

std::list<MyThread*>::size_type size():返回工作容器的大小

 

 

IdleThreadContainer类

复制代码
class IdleThreadContainer
{public:IdleThreadContainer();~IdleThreadContainer();std::vector<MyThread*>::size_type size();void push(MyThread *m);void assign(int n,MyThreadPool* m);    MyThread* top();void pop();void erase(MyThread *m);
private:std::vector<MyThread*> idle_thread_container_;typedef std::vector<MyThread*> Container;typedef Container::iterator Iterator;
};
复制代码

~IdleThreadContainer(); :负责析构空闲容器中的线程

void push(MyThread *m):将一个线程放回空闲容器中

void assign(int n,MyThreadPool* m):创建n个线程与线程池m相关联的线程放入空闲容器中

MyThread* top():返回位于空闲容器顶端的线程

void pop():弹出空闲容器顶端的线程

void erase(MyThread *m):删除一个指定的线程

 

 

 

TaskContainer类

复制代码
class TaskContainer
{
public:TaskContainer();~TaskContainer();void push(Task *);Task* top();void pop();std::priority_queue<Task*>::size_type size();
private:std::priority_queue<Task*> task_container_;
};
复制代码

void push(Task *):将一个任务放入任务容器中

Task* top():返回任务容器顶端的任务

void pop():将任务容器顶端的线程弹出

std::priority_queue<Task*>::size_type size():返回任务容器的大小

 

MyThreadPool类

复制代码
class MyThreadPool
{
public:MyThreadPool(){}MyThreadPool(int number);~MyThreadPool();void AddTask(Task *Task,int priority);void AddIdleThread(int n);void RemoveThreadFromBusy(MyThread *myThread);void Start();void EndMyThreadPool();private:BusyThreadContainer busy_thread_container_;IdleThreadContainer idle_thread_container_;bool issurvive_;TaskContainer task_container_;std::thread thread_this_;std::mutex busy_mutex_;std::mutex idle_mutex_;std::mutex task_mutex_;int number_of_thread_;
};
复制代码

MyThreadPool(int number):构造MyThreadPool,创建包含number个线程的空闲容器

void AddTask(Task *Task,int priority):添加一个优先级为priority的任务到任务容器中

void AddIdleThread(int n):在创建n个空闲线程到空闲容器中

void RemoveThreadFromBusy(MyThread *myThread):将一个线程从工作容器中删除,并移回空闲容器中

void Start():判断是否有空闲线程,如有将任务从从任务容器中提出,放入空闲容器中,等待执行

void EndMyThreadPool():结束线程池的运行

 

派生自Task的MyTask类

复制代码
class MyTask :public Task
{friend bool operator<(MyTask  &lv,MyTask &rv){return lv.priority_ < rv.priority_;}
public:MyTask();~MyTask();virtual void Run();void setdata(int d);
private:int data_;
};
复制代码
复制代码
MyTask::MyTask()
{
}
MyTask::~MyTask()
{
}
void MyTask::setdata(int d)
{data_ = d;
}
void MyTask::Run()
{std::cout << "Hello I am "<<data_ << std::endl;std::this_thread::sleep_for(std::chrono::seconds(1));
}
复制代码

friend bool operator<(MyTask &lv,MyTask &rv) :用于确定任务在任务容器中的位置

Run:自定义的Run方法

void setdata(int d):设置数据

 

关键代码分析:

void MyThread::Run()

void MyThread::Run()
{cout <<"Thread:"<< threadid_ << " run ";task_->Run();mythreadpool_->RemoveThreadFromBusy(this);
}

调用了Task的Run方法,同时在Task的Run方法结束后,通知线程池将自己从工作容器中移回空闲容器

 

void MyThread::StartThread()

复制代码
void MyThread::StartThread()
{thread_ = thread(&MyThread::Run, this);if (isdetach_ == true)thread_.detach();elsethread_.join();
}
复制代码

将MyThread的Run方法与thread_相绑定,this表示类的Run方法的第一个隐含的参数

然后根据isdetach的值,判断是否detach() or join()

 

void MyThreadPool::RemoveThreadFromBusy(MyThread *myThread)

复制代码
void MyThreadPool::RemoveThreadFromBusy(MyThread *myThread)
{busy_mutex_.lock();cout << "Thread:" << myThread->getthreadid()<< " remove from busylist" << endl;busy_thread_container_.erase(myThread);busy_mutex_.unlock();idle_mutex_.lock();idle_thread_container_.push(myThread);idle_mutex_.unlock();
}
复制代码

将一个线程从任务容器中移除,并将其放回空闲容器中,

使用busy_mutex_和idle_mutex_进行加锁和解锁,确保数据的一致性

 

MyThreadPool::MyThreadPool(int number)

复制代码
MyThreadPool::MyThreadPool(int number)
{issurvive_ = true;number_of_thread_ = number;idle_thread_container_.assign(number, this);thread_this_ =thread(&MyThreadPool::Start, this);thread_this_.detach();
}
复制代码

MyThreadPool的构造函数,创建number个空闲线程与空闲容器中,同时创建管理线程thread_this,用于进行线程池中线程的调度

 

void MyThreadPool::Start()

复制代码
void MyThreadPool::Start()
{while (true){if (issurvive_==false){busy_mutex_.lock();if (busy_thread_container_.size()!=0){busy_mutex_.unlock();continue;}busy_mutex_.unlock();break;}idle_mutex_.lock();if (idle_thread_container_.size() == 0){idle_mutex_.unlock();continue;}idle_mutex_.unlock();task_mutex_.lock();if (task_container_.size() == 0){task_mutex_.unlock();continue;}Task *b = task_container_.top();;task_container_.pop();task_mutex_.unlock();idle_mutex_.lock();MyThread *mythread = idle_thread_container_.top();;idle_thread_container_.pop();mythread->Assign(b);idle_mutex_.unlock();busy_mutex_.lock();busy_thread_container_.push(mythread);busy_mutex_.unlock();mythread->StartThread();}
}
复制代码

管理线程对应的Start方法,内有一个死循环,不停的判断任务容器中是否有任务,和是否有空闲线程来执行任务,若有,则将任务从

任务容器中提出,从空闲线程中提取出一个空闲线程与其绑定,执行该任务,同时将该线程从空闲容器移动到工作容器中。

当线程池想要结束运行时,即survive为false时,首先要判断工作容器是否为空,若不为空,则代表还有任务正在被线程执行,线程池不能结束运行

否则可以结束线程池的运行,跳出死循环

 

int main()

复制代码
int main()
{MyThreadPool mythreadPool(10);MyTask j[50];for (int i = 0; i < 50;i++){j[i].setdata(i);}for (int i = 0; i < 50; i++){mythreadPool.AddTask(&j[i],i);}int i;//按100添加一个任务//按-1结束线程池while (true){cin >> i;    if (i == 100){MyTask j;j.setdata(i);mythreadPool.AddTask(&j, i);}if (i == -1){        mythreadPool.EndMyThreadPool();break;}        }system("pause");
}
复制代码

创建了一个含有10个空闲线程的线程池,和50个MyTask任务,并将其放入线程池中等待运行

在循环中,用户输入100可以再添加一个任务到线程池中等待运行,输入-1结束线程池的运行。

运行结果如下

image

 

 

线程池使用后记

线程池并不是万能的,线程池减少了创建与销毁线程本身对任务照成的影响,但如果任务本身的运行时间很长,那么这些开销相当于任务本身执行开销而言是可以忽略的。那么我们也可以

选择“即时创建,即时销毁”的策略

线程池通常适合下面的几个场合:

(1)  单位时间内处理的任务数较多,且每个任务的执行时间较短

(2)  对实时性要求较高的任务,如果接受到任务后在创建线程,再执行任务,可能满足不了实时要求,因此必须采用线程池进行预创建。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/509626.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

集合的工具类

集合操作的工具类: 1):Arrays类: 2):Collections类. Arrays类: 在Collection接口中有一个方法叫toArray把集合转换为Object数组. 把集合转换为数组: Object[] arr 集合对象.toArray(); 数组也可以转换为集合(List集合): public static List asList(T… a) 等价于public …

Docker入门到精通开发指南(一文搞懂)

文章目录安装官方安装文档具体安装步骤1.卸载之前的版本(如果之前未用过忽略该步骤)2.安装相关依赖3.设置docker镜像4.安装docker安装latest版本指定版本安装5.启动docker6.查看docker版本7.运行一个docker hello world8.卸载docker9.配置阿里云镜像加速地址docker常用命令dock…

数据结构实验之串二:字符串匹配

题目描述 给定两个字符串string1和string2&#xff0c;判断string2是否为string1的子串。 输入 输入包含多组数据&#xff0c;每组测试数据包含两行&#xff0c;第一行代表string1&#xff0c;第二行代表string2&#xff0c;string1和string2中保证不出现空格。(string1和strin…

Unicode和Utf-8

很久很久以前&#xff0c;有一群人&#xff0c;他们决定用8个可以开合的晶体管来组合成不同的状态&#xff0c;以表示世界上的万物。他们看到8个开关状态是好的&#xff0c;于是他们把这称为”字节“。再后来&#xff0c;他们又做了一些可以处理这些字节的机器&#xff0c;机器…

如何向Maven中央仓库提交自己的Jar包(发布自己的Jar包到中央仓库)

文章目录注册账号GPG 安装安装生成密钥上传公钥Maven配置上传到Maven仓库修改项目的配置&#xff0c;填写基本信息执行编译命令登录网站配置发布项目中应用遇到的问题解决方法本文将介绍如何将自己的jar包发布至公共的中央仓库&#xff0c;通过maven方式进行引用 注册账号 注册…

数据结构实验之串三:KMP应用

题目描述 有n个小朋友&#xff0c;每个小朋友手里有一些糖块&#xff0c;现在这些小朋友排成一排&#xff0c;编号是由1到n。现在给出m个数&#xff0c;能不能唯一的确定一对值l和r(l < r)&#xff0c;使得这m个数刚好是第l个小朋友到第r个小朋友手里的糖块数&#xff1f;输…

C++读写锁

读写锁实际是一种特殊的自旋锁&#xff0c;它把对共享资源的访问者划分成读者和写者&#xff0c;读者只对共享资源进行读访问&#xff0c;写者则需要对共享资源进行写操作。 读写锁实际是一种特殊的自旋锁&#xff0c;它把对共享资源的访问者划分成读者和写者&#xff0c;读者只…

List和Set以及Map的选用

选用哪一种容器取决于每一种容器的存储特点以及当前业务的需求: List: 单一元素集合. 允许元素重复/记录元素的添加顺序. Set:单一元素集合. 不允许元素重复/不记录元素的添加顺序. 既要不重复,又要保证先后顺序:LinkedHashSet. Map: 双元素集合. 如果存储数据的时候,还得…

FastDFS文件服务器安装

文章目录环境准备使用的系统软件磁盘目录安装libfastcommon安装FastDFS安装fastdfs-nginx-module安装nginx单机部署tracker配置storage配置client测试配置nginx访问分布式部署tracker配置storage配置client测试配置nginx访问启动防火墙trackerstoragenginx检测集群说明配置文件…

学密码学一定得学程序

题目描述 曾经&#xff0c;ZYJ同学非常喜欢密码学。有一天&#xff0c;他发现了一个很长很长的字符串S1。他很好奇那代表着什么&#xff0c;于是神奇的WL给了他另一个字符串S2。但是很不幸的是&#xff0c;WL忘记跟他说是什么意思了。这个时候&#xff0c;ZYJ不得不求助与伟大的…

boost::shared_mutex

前一篇介绍的条件变量可以进行进程间通信&#xff0c;用来实现生产者/消费者模型。今天介绍的共享互斥量用来实现缓冲区读写模型&#xff0c;与生产者/消费者模型不同的地方是&#xff0c;消费者消费产品后&#xff0c;被消费的产品就不存在了&#xff0c;所以消费者线程也要互…

Map集合类

映射的数学解释: 设A、B是两个非空集合&#xff0c;如果存在一个法则f&#xff0c;使得对A中的每个元素a&#xff0c;按法则f&#xff0c;在B中有唯一确定的元素b与之对应&#xff0c;则称f为从A到B的映射&#xff0c;记作f&#xff1a;A→B。 映射关系(两个集合):A集合和B集…

github 国内加速镜像

GitHub 镜像访问 这里提供两个最常用的镜像地址&#xff08;别登录账号&#xff09;&#xff1a; https://github.com.cnpmjs.org https://hub.fastgit.org 也就是说上面的镜像就是一个克隆版的Github&#xff0c;你可以访问上面的镜像网站&#xff0c;网站的内容跟Github是完…

数据结构实验之二叉树二:遍历二叉树

题目描述 已知二叉树的一个按先序遍历输入的字符序列&#xff0c;如abc,,de,g,,f,,, (其中,表示空结点)。请建立二叉树并按中序和后序的方式遍历该二叉树。 输入 连续输入多组数据&#xff0c;每组数据输入一个长度小于50个字符的字符串。 输出 每组输入数据对应输出2行&#x…

Socket select模型

Windows socket select模型开发。 套接字select模型是一种比较常用的IO模型。利用该模型可以使Windows socket应用程序可以同时管理多个套接字。 使用select模型&#xff0c;可以使当执行操作的套接字满足可读可写条件时&#xff0c;给应用程序发送通知。收到这个通知后&#x…

Set实现类性能对比

Set接口的实现类: 共同的特点: 1):都不允许元素重复. 2):都不是线程安全的类. 解决方案:Set s Collections.synchronizedSet(Set对象); HashSet: 不保证元素的先后添加顺序. 底层才有的是哈希表算法,查询效率极高. 判断两个对象是否相等的规则: 1):equals比较为true. …

RSocket协议初识

文章目录前言RSocket是什么&#xff1f;RSocket设计目标是什么&#xff1f;RSocket与其他协议有什么区别&#xff1f;对比Http1.x对比Http2.x对比grpc对比TCP对比WebSocket结论RSocket适用于哪些场景&#xff1f;1、移动设备与服务器的连接。2、微服务场景。3、由于微服务和移动…

HugeGraph Server/Hubble安装使用

文章目录HugeGraph Server1 概述2 依赖2.1 安装JDK-1.83 部署3.1 下载tar包4 安装启动4.1 解压4.2 配置Hbase5 访问Server5.1 服务启动状态校验6 停止Server7 多图配置HugeGraph-Hubble 基于Web的可视化图形界面1.概述2.安装3 使用3.1创建图HugeGraph Server 1 概述 HugeGrap…

Socket模型

两种I/O模式 一.选择模型 二.异步选择 三.事件选择 四.重叠I/O模型 五.完成端口模型 五种I/O模型的比较 两种I/O模式 1、 两种I/O模式 阻塞模式&#xff1a;执行I/O操作完成前会一直进行等待&#xff0c;不会将控制权交给程序。套接字默认为阻塞模式。可以通过多线程技术进行处…