【高级IO】IO多路转接之select

select函数

我们知道IO = 等待 + 拷贝,系统提供select函数来实现多路复用输入/输出模型;select系统调用是用来让我们的程序监视多个文件描述符的状态变化的;程序会停在select这里等待,直到被监视的文件描述符有一个或多个发生了状态改变,才进行拷贝。select是负责等待文件描述符就绪的,文件描述符就绪了才交给下面拷贝

参数:

参数nfds是需要监视的最大的文件描述符值+1

readfds,writefds,exceptfds:

1.分别对应于需要检测的可读文件描述符的集合,可写文件描述符的集合及异常文件描述符的集合,这三个是输入输出型参数

2.

  • 如果你只关心读事件,就设置可读文件描述符的集合,其他为nullptr。
  • 如果你只关心写事件,就设置可写文件描述符的集合,其他为nullptr。依次类推
  • 如果你要同时更新读和写事件,就同时设置可读和可写文件描述符的集合
  • 如果你要先关心读的事件,再关心写的事件,先select读事件,返回后,再select写的事件

参数timeout为结构timeval,用来设置select()的等待时间,输入输出型参数

参数timeout取值:
nullptr:则表示select()没有timeout,select将一直被阻塞,直到某个文件描述符就绪
0:仅检测描述符集合的是否就绪,然后立即返回,并不等待外部事件的发生
特定的时间值:如果在指定的时间段里没有事件发生,select将超时返回

关于timeval结构 

timeval结构用于描述一段时间长度,如果在这个时间内,需要监视的描述符没有事件发生则函数返回,返回值为0

如果设置了,就是输入输出型参数
输入指的是你自己设置的时间,输出指的是剩余的时间
假如你设置了5秒,2秒过后,选择函数就返回了,此时Timeout就是3秒了 

关于fd_set结构 

fd_set是操作系统给我们提供的一种数据类型,本质就是一张位图,使用位图中对应的位来表示要监视的文件描述符。和信号里的sigset_t类型差不多

下面以readfds参数为例,它是输入输出型参数

输入时:用户告诉内核,我给你的一个或者多个fd,你要帮我关心fd上面的读事件,如果读事件就绪了,你要告诉我!

  • 比特位的位置,表示文件描述符编号
  • 比特位的内容,0或1,是否需要内核关心

假如用8个比特位来表示一张位图(只是为了演示,内核里不是这样的)

假如用户要关心文件描述符0,1,2,3上面的读事件,此时输入的位图是0000 1111

输出时:内核告诉用户,用户你让我关心的多个fd中,有哪些已经就绪了,用户你赶紧读取,又以同样的参数输出出来!

  • 比特位的位置,表示文件描述符编号
  • 比特位的内容,0或1,哪些用户关心的fd,上面的读事件已经就绪了!

假如此时2号文件描述符已经就绪,此时输出的位图是0000 0010

总的来说:

这个三个参数设置成输入输出型参数,是让用户<->内核传递fd是否就绪的信息的!、

系统提供了一组操作fd_set的接口, 来比较方便的操作位图

void FD_CLR(int fd, fd_set *set);      // 用来清除描述词组set中相关fd 的位
int  FD_ISSET(int fd, fd_set *set);    // 用来测试描述词组set中相关fd 的位是否为真
void FD_SET(int fd, fd_set *set);      // 用来设置描述词组set中相关fd的位
void FD_ZERO(fd_set *set);             // 用来清除描述词组set的全部位

关于返回值

函数返回值:
执行成功则返回文件描述符就绪的个数
返回0代表已超过timeout时间,还是没有文件描述符就绪
当有错误发生时则返回-1,错误原因存于errno,此时参数readfds,writefds, exceptfds和timeout的
值变成不可预测

socket就绪条件

读就绪

  • socket内核中, 接收缓冲区中的字节数, 大于等于低水位标记SO_RCVLOWAT. 此时可以无阻塞的读该文件描述符, 并且返回值大于0;
  • socket TCP通信中, 对端关闭连接, 此时对该socket读, 则返回0;
  • 监听的socket上有新的连接请求;
  • socket上有未处理的错误;

写就绪

  • socket内核中, 发送缓冲区中的可用字节数(发送缓冲区的空闲位置大小), 大于等于低水位标记
  • SO_SNDLOWAT, 此时可以无阻塞的写, 并且返回值大于0;
  • socket的写操作被关闭(close或者shutdown). 对一个写操作被关闭的socket进行写操作, 会触发SIGPIPE信号;
  • socket使用非阻塞connect连接成功或失败之后;
  • socket上有未读取的错误;

异常就绪(选看)
socket上收到带外数据. 关于带外数据, 和TCP紧急模式相关(回忆TCP协议头中, 有一个紧急指针的字段),你们自己收集相关资料.

select使用示例

其他文件在这      select实例

SelectServer.hpp

#pragma once
#include <iostream>
#include <sys/select.h>
#include <sys/time.h>
#include "Socket.hpp"
#include "log.hpp"using namespace std;
static const uint16_t defaultport = 8080;
static const int fd_num_max = (sizeof(fd_set) * 8); // 我这个云服务器select最多文件描述符是1024个
static const int defaultfd = -1;class SelectServer
{
public:SelectServer(const uint16_t port = defaultport) : _port(port){for (int i = 0; i < fd_num_max; i++){fd_array[i] = defaultfd;}}void Init(){_listensock.Socket();_listensock.Bind(_port);_listensock.Listen();}void Accepter(){uint16_t clientport;string clientip;int fd = _listensock.Accept(&clientport, &clientip);if (fd < 0)return;int i = 0;for (; i < fd_num_max; i++){if (fd_array[i] != defaultfd)continue;elsebreak;}if (i == fd_num_max) // 数组满了,select fd满了{log(Warning, "server is full, close %d now!", fd);close(fd);}else{fd_array[i] = fd;PrintFd();}}void Recver(int fd, int pos){char buffer[1024];ssize_t n = read(fd, buffer, sizeof(buffer) - 1); // 有bug,因为应用层没有定制协议,不一定能读到完整的报文,我们这里不定制先if (n > 0){buffer[n] = 0;cout << "get a messge: " << buffer << endl;}else if (n == 0){log(Info, "client quit, me too, close fd is : %d", fd);close(fd);fd_array[pos] = defaultfd; // 这里本质是从select中移除}else{log(Warning, "recv error: fd is : %d", fd);close(fd);fd_array[pos] = defaultfd; // 这里本质是从select中移除}}void Dispatcher(fd_set &rfds){int listenfd = _listensock.GetFd();for (int i = 0; i < fd_num_max; i++){int fd = fd_array[i];if (fd == defaultfd)continue;if (FD_ISSET(fd, &rfds)){// 就绪的文件描述符if (fd == listenfd) // 如果是listen的fd,就接收连接,添加到数组中{Accepter();}else // 进行网络通信的fd了{Recver(fd, i);}}}}void Start(){int fd = _listensock.GetFd();fd_array[0] = fd;while (1){int maxfd = fd_array[0];fd_set rfds;FD_ZERO(&rfds);for (int i = 0; i < fd_num_max; i++) // 第一次循环,寻找最大文件描述符值,并把fd添加到位图中{if (fd_array[i] == -1)continue;if (fd_array[i] > maxfd){maxfd = fd_array[i];log(Info, "max fd update, max fd is: %d", maxfd);}// 把文件描述符添加进读事件的位图中FD_SET(fd_array[i], &rfds);}// accept?不能直接accept!检测并获取listensock上面的事件,新连接到来,等价于读事件就绪// 这里不能直接accept,因为可能还没有新的连接struct timeval timeout = {2, 0};// 输入输出,可能要进行周期的重复设置// 如果事件就绪,上层不处理,select会一直通知你!// select告诉你就绪了,接下来的一次读取,我们读取fd的时候,不会被阻塞int n = select(maxfd + 1, &rfds, nullptr, nullptr, &timeout);if (n < 0){cerr << "select error" << endl;}else if (n == 0){cout << "time out, timeout: " << timeout.tv_sec << "." << timeout.tv_usec << endl;}else{// 有事件就绪了cout << "get a new link!!!!!" << endl;Dispatcher(rfds); // 给就绪的fd分配任务}}}void PrintFd(){cout << "online fd list: ";for (int i = 0; i < fd_num_max; i++){if (fd_array[i] == defaultfd)continue;cout << fd_array[i] << " ";}cout << endl;}~SelectServer(){}private:Sock _listensock;uint16_t _port;int fd_array[fd_num_max]; // 数组, 用户维护的!
};

select的特点 

可监控的文件描述符个数取决与sizeof(fd_set)的值. 我这边服务器上sizeof(fd_set)=1024,每bit表示一个文件描述符,则我服务器上支持的最大文件描述符是1024.
将fd加入select监控集的同时,还要再使用一个数据结构array保存放到select监控集中的fd

  • 一是用于再select 返回后,array作为源数据和fd_set进行FD_ISSET判断。
  • 二是select返回后会把以前加入的但并无事件发生的fd清空,则每次开始select前都要重新从array取得fd逐一加入(FD_ZERO最先),扫描array的同时取得fd最大值maxfd,用于select的第一个参数。

备注: fd_set的大小可以调整,可能涉及到重新编译内核. 感兴趣的可以自己去收集相关资料.

select缺点

  • 每次调用select, 都需要手动设置fd集合, 从接口使用角度来说也非常不便.
  • 每次调用select,都需要把fd集合从用户态拷贝到内核态,这个开销在fd很多时会很大
  • 同时每次调用select都需要在内核遍历传递进来的所有fd,这个开销在fd很多时也很大
  • select支持的文件描述符数量太小.

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/pingmian/57760.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

植物健康,Spring Boot来助力

3系统分析 3.1可行性分析 通过对本植物健康系统实行的目的初步调查和分析&#xff0c;提出可行性方案并对其一一进行论证。我们在这里主要从技术可行性、经济可行性、操作可行性等方面进行分析。 3.1.1技术可行性 本植物健康系统采用SSM框架&#xff0c;JAVA作为开发语言&#…

钉钉录播抓取视频

爬取钉钉视频 免责声明 此脚本仅供学习参考&#xff0c;切勿违法使用下载他人资源进行售卖&#xff0c;本人不但任何责任! 仓库地址: GItee 源码仓库 执行顺序 poxyM3u8开启代理getM3u8url用于获取m3u8文件userAgent随机请求头downVideo|downVideoThreadTqdm单线程下载和…

【纯血鸿蒙】HarmonyOS和OpenHarmony 的区别

一、开源鸿蒙&#xff08;Open Harmony&#xff09; 鸿蒙系统愿来的设计初衷&#xff0c;就是让所有设备都可以运行一个系统&#xff0c;但是每个设备的运算能力和功能都不同&#xff0c;所以内核的设计上&#xff0c;采用了微内核的设计&#xff0c;除了最基础的功能放在内核…

logback 如何将日志输出到文件

如何作 将日志输出到文件需要使用 RollingFileAppender&#xff0c;该 Appender 必须定义 rollingPolicy &#xff0c;另外 rollingPollicy 下必须定义 fileNamePattern 和 encoder <appender name"fileAppender" class"ch.qos.logback.core.rolling.Rollin…

LLM | 论文精读 | 基于大型语言模型的自主代理综述

论文标题&#xff1a;A Survey on Large Language Model based Autonomous Agents 作者&#xff1a;Lei Wang, Chen Ma, Xueyang Feng, 等 期刊&#xff1a;Frontiers of Computer Science, 2024 DOI&#xff1a;10.1007/s11704-024-40231-1 一、引言 自主代理&#xff08;…

企业自建邮件系统选U-Mail ,功能强大、安全稳定

在现代企业运营中&#xff0c;电子邮件扮演着至关重要的角色&#xff0c;随着企业规模的增长和业务的多样化&#xff0c;传统的租用第三方企业邮箱服务逐渐显现出其局限性。例如&#xff0c;存储空间受限、数据安全风险、缺乏灵活的管理和备份功能&#xff0c;以及无法与其他企…

C++从入门到起飞之——红黑树 全方位剖析!

&#x1f308;个人主页&#xff1a;秋风起&#xff0c;再归来~&#x1f525;系列专栏&#xff1a;C从入门到起飞 &#x1f516;克心守己&#xff0c;律己则安 目录 1. 红⿊树的概念 2. 红⿊树的实现 2.1 构建整体框架 2.2 红黑树的插入 2.3 红黑树的验证 2.4 红黑树…

数据库、数据仓库、数据湖和数据中台有什么区别

很多企业在面对数据存储和管理时不知道如何选择合适的方式&#xff0c;数据库、数据仓库、数据湖和数据中台&#xff0c;这些方式都是什么&#xff1f;有什么样的区别&#xff1f;企业根据其业务类型该选择哪一种&#xff1f;本文就针对这些问题&#xff0c;来探讨下这些方式都…

ASP.NET Core 8.0 中使用 Hangfire 调度 API

在这篇博文中&#xff0c;我们将引导您完成将 Hangfire 集成到 ASP.NET Core NET Core 项目中以安排 API 每天运行的步骤。Hangfire 是一个功能强大的库&#xff0c;可简化 .NET 应用程序中的后台作业处理&#xff0c;使其成为调度任务的绝佳选择。继续阅读以了解如何设置 Hang…

山西农业大学20241025

06-VUE 一. 生命周期1. 概念2. 生命周期的钩子函数 二. 工程化开发和脚手架1. 开发vue的两种方式2. 脚手架 Vue CLI3. 使用步骤4 . 项目目录介绍4.1 项目目录4.2 总结 一. 生命周期 1. 概念 VUE生命周期: 就是vue实例从创建到销毁的整个 生命周期经历了四个阶段: ①创建 ②挂载…

Clickhouse 笔记(一) 单机版安装并将clickhouse-server定义成服务

ClickHouse 是一个高性能的列式数据库管理系统&#xff08;DBMS&#xff09;&#xff0c;主要用于在线分析处理&#xff08;OLAP&#xff09;场景。它由俄罗斯搜索引擎公司 Yandex 开发&#xff0c;并在 2016 年开源。ClickHouse 以其卓越的查询性能和灵活的扩展性而闻名&#…

2-133 基于matlab的粒子群算法PSO优化BP神经网络

基于matlab的粒子群算法PSO优化BP神经网络&#xff0c;BP神经网络算法采用梯度下降算法&#xff0c;以输出误差平方最小为目标&#xff0c;采用误差反向传播&#xff0c;训练网络节点权值和偏置值&#xff0c;得到训练模型。BP神经网络的结构(层数、每层节点个数)较复杂时&…

【linux网络编程】| 网络基础 | 解析IP与Mac地址的区别

前言&#xff1a;本节内容讲解一些网络基础相关的知识点&#xff0c; 不涉及网络代码&#xff01;同样的本节内容是作为前一篇的补充知识点&#xff0c; 前一篇文章地址&#xff1a;【linux网络编程】 | 网络基础Ⅰ| 认识网络-CSDN博客&#xff0c;本篇文章内容较少&#xff0c…

AnaTraf | 全面掌握网络健康状态:全流量的分布式网络性能监测系统

AnaTraf 网络性能监控系统NPM | 全流量回溯分析 | 网络故障排除工具AnaTraf网络流量分析仪是一款基于全流量&#xff0c;能够实时监控网络流量和历史流量回溯分析的网络性能监控与诊断系统&#xff08;NPMD&#xff09;。通过对网络各个关键节点的监测&#xff0c;收集网络性能…

内置数据类型、变量名、字符串、数字及其运算、数字的处理、类型转换

内置数据类型 python中的内置数据类型包括&#xff1a;整数、浮点数、布尔类型&#xff08;以大写字母开头&#xff09;、字符串 变量名 命名变量要见名知意&#xff0c;确保变量名称具有描述性和意义&#xff0c;这样可以使得代码更容易维护&#xff0c;使用_可以使得变量名…

2024.7最新子比主题zibll7.9.2开心版源码+授权教程

授权教程&#xff1a; 1.进入宝塔搭建一个站点 绑定 api.zibll.com 域名 并上传 index.php 文件 2.设置伪静态 3.开启SSL证书&#xff0c;找一个能用的域名证书&#xff0c;将密钥(KEY)和证书(PEM格式)复制进去即可 4.在宝塔文件地址栏中输入 /etc 找到 hosts文件并打开&a…

[Linux][进程间通信] 命名管道

命名管道是一种进程间通信的方式,底层原理与匿名管道极为相似,本质是通过在磁盘上新建一个特殊的文件,然后通过这个文件来进行通信 指令: mkfifo [文件名/路径] 该指令用于创建一个命名管道,可以看到文件的类型是p p 类型 命名管道文件 p文件大小恒为0 可通过echo和cat向其…

JavaEE----多线程(四)----阻塞队列的介绍和初步实现

文章目录 1.阻塞队列1.1作用一&#xff1a;解耦合1.2作用二&#xff1a;削峰填谷1.3系统里面的阻塞队列的使用1.4实现普通队列1.5在普通队列的基础上面实现阻塞队列1.6设计优化1.7实现初步的生产者消费者模型 1.阻塞队列 阻塞队列的最大意义&#xff1a;就是实现“生产者消费者…

SQL 干货 | SQL 半连接

大多数数据库开发人员和管理员都熟悉标准的内、外、左和右连接类型。虽然可以使用 ANSI SQL 编写这些连接类型&#xff0c;但还有一些连接类型是基于关系代数运算符的&#xff0c;在 SQL 中没有语法表示。今天我们将学习一种这样的连接类型&#xff1a;半连接&#xff08;Semi …

后台管理员登录实现--系统篇

我的小系统后台原来就有一个上传图片的功能还夹带个删除图片的功能&#xff0c;还嵌到了一个菜单里面。之前效果如下 那么现在为了加大安全力度&#xff0c;想增加一个登录页面。通过登录再到这个页面。看着貌似很简单&#xff0c;但是听我细细说来&#xff0c;要新增些什么东西…