网络编程-五种IO模型(二)

简介: 网络编程-五种IO模型

三、IO多路复用


非阻塞IO 虽然解决了IO阻塞的问题, 但是不断调动 read 轮询内核是否有数据的方式对CPU的消耗比较高,效率比较低, 需要有一个可以同时处理多个 网络连接IO 并且高效的方式,于是就衍生出了select/poll/epoll的方式


1.SELECT


当用户进程调用了select, 进程将会被阻塞,这个时候select 实际上可以看做对一个 fd集合 进行监听当有数据时便拷贝到 用户进程 中。这边搭配 函数 API 可以加深理解


/*
nfds: 最大的文件描述符+1
readfds: 读集合 传入传出参数
writefds: 写文件描述符集合(传入传出参数)
execptfds: 异常文件描述符集合(传入传出参数)
timeout: NULL--永久阻塞
         0   --不阻塞 立即返回
         >0  --指定事件,事件发生才返回
*/
int select(int nfds, fd_set * readfds, fd_set *writefds, fd_set *exceptfds, struct timeval *timeout);
/*
将fd从set集合中清除
*/
void FD_CLR(int fd, fd_set *set);
/*
判断fd是否在集合中
返回值: 如果fd在set集合中, 返回1, 否则返回0
*/
int FD_ISSET(int fd, fd_set *set);
/*
将fd设置到set集合中
*/
void FD_SET(int fd, fd_set *set);
/*
初始化set集合
*/
void FD_ZERO(fd_set *set);

  使用 select 可以让用户进程在一个线程中同时处理多个 socket 的 IO 请求。它相对于阻塞 IO 把对于数据的读取(read) 分离成了两个系统调用 select() read(), 这样用户注册 socket 跟 数据的 IO处理  不会相互阻塞 , 达到可以处理多个连接的目的, 并且可以跨平台使用。


缺点:


       1, 使用select  需要将 socket 请求 加入 select (读写)集合进行监听,这个步骤需要涉及到用户区到内核区的来回拷贝


       2, select 本质是对 集合的轮询操作, 效率较低(假设 1024 个 fd 全部打开, 但是只有一个有数据,对于select来说 还是要轮询 1024 次)


       3. 最大支持1024个客户端连接(由FD_SETSIZE=1024限制, 这个值可以修改, 但是需要重新编译内核)


2.POLL

     poll与select类似, 区别在于把三个文件描述符的集合(readfds, writefds, exceptfds)变成一个集合  (pollfd )

   

/*
fds: 传入传出参数, 类型是一个结构体数组
fds.fd: 要监控的文件描述符
fds.events: 
  POLLIN---->读事件
  POLLOUT---->写事件
fds.revents: 返回的事件
*/
/*
nfds: 数组实际有效内容的个数
timeout: 超时时间, 单位是毫秒
*/
int poll(struct pollfd *fds, nfds_t nfds, int timeout);

返回值:


  • 成功:返回就绪事件的个数
  • 失败: 返回-1。若timeout=0, poll函数不阻塞,且没有事件发生, 此时返回-1, 并且errno=EAGAIN, 这种情况不应视为错误。

1.当 poll 函数返回时, 有没有事件(读事件 or 写事件)发生需要关注 pollfd.revents


2.pollfd.fd设置为 -1 时 poll不会监控


3.poll可以突破1024(select 最大文件描述符)的限制.在/proc/sys/fs/file-max查看一个进程可以打开的socket描述符上限,如果需要可以修改配置文件: /etc/security/limits.conf,加入如下配置信息, 然后重启终端即可生效


soft和hard分别表示ulimit命令可以修改的最小限制和最大限制


* soft nofile 1024
* hard nofile 100000

3.EPOLL

       EPOLL 是对 文件描述符 的 I/O事件进行统一管理处理, epoll 把哪个 socket发生怎样的I/O事件通过 epoll_wait通知到用户进程, 用户进程也可以把 I/O事件 通过 epoll_ctl 添加到  eventpoll(管理器) 中进行处理。


       eventpoll 内部维护着一个红黑树, 一个双链表, 用户进程调用 epoll_create方法时 ,内核会创建一个eventpoll结构体。用户通过  epoll_ctl 把 socket 添加,删除进内核红黑树中(红黑树的key是fd,val是事件,返回的是事件),当有相应的事件发生时,会把事件添加到双链表中。epoll_wait 会检测双链表中是否有满足条件的事件,有的话就返回。

//创建一个 eventpoll
/*
size: 最大节点数, 此参数在linux 2.6.8已被忽略, 但必须传递一个大于0的数,历史意义,用epoll_create1也行
返回值: 返回一个大于0的文件描述符
*/
int epoll_create(int size);
//将要监听的节点在epoll树上添加, 删除和修改
/*
epfd: eventpoll 文件描述符
op: 
    EPOLL_CTL_ADD: 添加事件节点到树上
    EPOLL_CTL_DEL: 从树上删除事件节点
    EPOLL_CTL_MOD: 修改树上对应的事件节点
fd: 事件节点对应的文件描述符
event: 要操作的事件节点, 是一个结构体
event.events常用的有:
        EPOLLIN: 读事件
        EPOLLOUT: 写事件
        EPOLLERR: 错误事件
        EPOLLET: 边缘触发模式
*/
int epoll_ctl(int epfd, int op, int fd, struct epoll_event *event);
//检测 eventpoll 的双链表中 有没有满足条件的事件
/*
epfd: epoll树根
events: 传出参数, 其实是一个事件结构体数组
maxevents: 数组大小
timeout: -1: 表示永久阻塞; 0: 立即返回; >0: 表示超时等待事件
*/
int epoll_wait(int epfd, struct epoll_event *events, int maxevents, int timeout);


epoll有两种工作模式,ET和LT模式


       水平触发:LT  只要缓冲区中有数据, 就一直通知


       边缘触发:  ET 只会通知一次,下次有数据流入时才会再通知。在此模式下读的时候要循环读,直到读完

相关文章
|
1天前
|
机器学习/深度学习 算法 数据安全/隐私保护
基于BP神经网络的苦瓜生长含水量预测模型matlab仿真
本项目展示了基于BP神经网络的苦瓜生长含水量预测模型,通过温度(T)、风速(v)、模型厚度(h)等输入特征,预测苦瓜的含水量。采用Matlab2022a开发,核心代码附带中文注释及操作视频。模型利用BP神经网络的非线性映射能力,对试验数据进行训练,实现对未知样本含水量变化规律的预测,为干燥过程的理论研究提供支持。
|
2天前
|
开发者
什么是面向网络的IO模型?
【10月更文挑战第6天】什么是面向网络的IO模型?
12 3
|
2天前
|
数据挖掘 开发者
网络IO模型
【10月更文挑战第6天】网络IO模型
11 3
|
23小时前
|
网络协议 前端开发 Java
网络协议与IO模型
网络协议与IO模型
网络协议与IO模型
|
2天前
|
缓存 Java Linux
硬核图解网络IO模型!
硬核图解网络IO模型!
|
3天前
|
SQL 安全 算法
网络安全与信息安全的前沿探索
【10月更文挑战第5天】 在当今信息化社会,网络安全和信息安全已成为至关重要的话题。本文将深入探讨网络安全漏洞、加密技术及安全意识的重要性,旨在为读者提供技术性的见解和实用的建议。通过分析常见的网络攻击手段和防御策略,我们将揭示如何保护个人和企业的数据免受威胁,同时强调每个人都应具备的基本安全意识和最佳实践。
10 1
|
3天前
|
存储 安全 程序员
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
【10月更文挑战第5天】 本文旨在探讨网络安全和信息安全领域的重要方面,包括网络漏洞、加密技术及安全意识。通过深入分析这些关键概念,我们希望提高读者对这些重要领域的理解,并强调在当今数字化世界中保护个人和组织数据的重要性。我们将从网络漏洞的定义及其成因开始,接着介绍常见的加密技术及其应用,最后讨论提升安全意识的方法,以帮助读者更好地保护自己的信息安全。
|
2天前
|
安全 网络安全 数据安全/隐私保护
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
【10月更文挑战第6天】在数字化时代,网络安全和信息安全已成为我们生活中不可或缺的一部分。本文将探讨网络安全漏洞、加密技术和安全意识等方面的内容,以帮助读者更好地了解这些主题,并采取适当的措施保护自己的信息安全。我们将通过代码示例来演示一些常见的安全漏洞,并提供解决方案。最后,我们将强调培养良好的安全意识对于维护个人和组织的信息安全的重要性。
|
1天前
|
SQL 安全 网络安全
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
【10月更文挑战第7天】随着互联网的普及,网络安全问题日益突出。本文将从网络安全漏洞、加密技术、安全意识等方面进行探讨,旨在帮助读者更好地了解网络安全的重要性,提高自身的网络安全防护能力。
|
1天前
|
存储 安全 网络安全
云端盾牌:云计算时代的网络安全守护在数字化浪潮中,云计算以其高效、灵活的特性成为企业转型的加速器。然而,伴随其迅猛发展,网络安全问题亦如影随形,成为悬在每个组织头顶的达摩克利斯之剑。本文旨在探讨云计算服务中的网络安全挑战,分析信息安全的重要性,并提出相应对策,以期为企业构建一道坚实的云端防护网。
在当今这个数据驱动的时代,云计算已成为推动创新与效率的关键力量。它允许用户随时随地访问强大的计算资源,降低了企业的运营成本,加速了产品上市时间。但随之而来的网络威胁也日益猖獗,尤其是对于依赖云服务的企业而言,数据泄露、身份盗用等安全事件频发,不仅造成经济损失,更严重损害品牌信誉。本文深入剖析云计算环境中的安全风险,强调建立健全的信息安全管理机制的重要性,并分享一系列有效策略,旨在帮助企业和个人用户在享受云服务带来的便利的同时,也能构筑起强有力的网络防线。

热门文章

最新文章