0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

信號驅動IO與異步IO的區(qū)別

科技綠洲 ? 來源:Linux開發(fā)架構之路 ? 作者:Linux開發(fā)架構之路 ? 2023-11-08 15:32 ? 次閱讀

一. 談信號驅動IO (對比異步IO來看)

信號驅動IO 對比 異步 IO進行理解

圖片

信號驅動IO: 內核將數據準備好的時候, 使用SIGIO信號通知應用程序進行IO操作

通知應用程序處理IO, 是開始處理IO, 這個時候還是存在阻塞的,將數據從內核態(tài)拷貝進入到用戶態(tài)的過程至少是阻塞住的 (應用程序將數據從內核態(tài)拷貝到用戶態(tài)的過程是阻塞等待的, 和異步IO的區(qū)別) (此處是區(qū)分信號驅動IO和異步IO的關鍵所在)

信號驅動IO, 我們提前在信號集合中設置好IO信號等待, 注冊好對應的IO處理函數 handler,IO數據準備就緒后,會遞交SIGIO信號,通知應用程序中斷然后開始進行對應的IO處理邏輯. 但是通知處理IO的時候存在將數據從 內核空間拷貝到用戶空間的過程,(而異步IO是數據拷貝完成之后內核再通知應用程序直接開始處理, 應用程序直接處理,不需要拷貝數據阻塞等待)

圖片

異步IO: 由內核在數據拷貝完成時, 通知應用程序(而信號驅動是告訴應用程序何時可以開始拷貝數據)

真正的做到了完完全全的非阻塞,發(fā)起aio_read之后應用程序立即可以去做其他的事情了. 調用了aio_read之后會立即進行返回繼續(xù)向下執(zhí)行應用程序,由kernel內核進行等待數據準備,只有當數據準備好了且拷貝到來用戶空間,一切完成后,kernel給應用程序發(fā)送一個signal,告知它read完成了, 沒有任何的阻塞,你直接處理就是

異步IO由于它不會對用戶進程,應用程序產生任何的阻塞,所以他對于高并發(fā)網絡服務器的實現(xiàn)至關緊要.

小結:

  • 任何IO操作都是存在 等待數據準備完成 和 將 數據從內核態(tài)拷貝到用戶態(tài)兩個過程的
  • 兩個過程中等待數據消耗的時間一般遠超于拷貝數據所花費的時間,所以一般我們進行IO的優(yōu)化,都是想辦法盡量降低等待時間
  • 所以信號驅動IO 因為是通知開始處理數據,應用程序需要將數據從內核拷貝進入到用戶態(tài) (數據拷貝阻塞等待) 和異步IO的區(qū)別
  • 異步IO 是完全不存在應用程序的阻塞等待,平時應用程序干自己的事情,當數據完全準備好了 (數據 完成了拷貝 ),直接通知應用程序回調處理數據
  • 所以我們之前介紹的 blocking io non-blocking io io multiplexing (IO多路復用) 本質上都是屬于 synchronous IO (同步IO) 都是存在有阻塞的,有人說不對吧: 哪 non-blocking IO 呢? 非阻塞IO僅僅只是在數據準備階段上來說是非阻塞的,數據沒準備好立馬返回,可是數據拷貝階段還是阻塞住的,所以本質還是同步IO. (大大的狡猾,忘記了阻塞除了準備數據的時候存在,拷貝數據也是阻塞住的)
  • 只有異步IO asynchronous 是完全做到了整個過程非阻塞的 , 當進程發(fā)起IO操作之后,就直接返回再也不必理睬,直kernel 發(fā)送一個信號,告訴進程說IO完成(涵蓋數據拷貝完成), 在這個過程中,是完全避免了阻塞進程了的

UDP + SIGIO信號注冊模擬實現(xiàn)一下信號驅動IO

流程:

1、注冊SIGIO的處理函數 (回調函數)

2、設置該套接口的屬主,通常使用fcntl的F_SETOWN命令設置

fcntl(fd, F_SETOWN, getpid());

3、開啟該套接口的信號驅動I/O,通常使用fcntl的F_SETFL命令打開O_ASYNC標志完成

實現(xiàn)代碼 (簡單的信號驅動服務端)

#include
#include
#include
#include
#include
#include
#include
#include
#include
#include

typedef struct sockaddr SA;

#define BUFFSIZE 512
int sockfd = 0; //定義全局的sockfd

//信號處理
void do_sigio(int signo) {
char buff[512] = {0};
struct sockaddr_in cli_addr;
socklen_t clilen = sizeof(cli_addr);
int rlen = recvfrom(sockfd, buff, 512, 0,
(SA*)&cli_addr, &clilen); //獲取cli_addr, 為后面send做準備

printf("Recvfrom message: %sn", buff);
int slen = sendto(sockfd, buff, rlen, 0, (SA*)&cli_addr, clilen);
}


int main() {
sockfd = socket(AF_INET, SOCK_DGRAM, 0);
if (-1 == sockfd) {
perror("socket");
return 2;
}
signal(SIGIO, do_sigio);//注冊信號處理函數

//確定協(xié)議地址簇
struct sockaddr_in serv_addr;
memset(&serv_addr, 0, sizeof(serv_addr));
serv_addr.sin_family = AF_INET;
serv_addr.sin_port = htons(8080);
serv_addr.sin_addr.s_addr = INADDR_ANY;

//設置套接口屬主
fcntl(sockfd, F_SETOWN, getpid());

//然后設置O_ASYNC 開啟信號驅動IO
int flags = fcntl(sockfd, F_GETFL);
if (-1 == fcntl(sockfd, F_SETFL, flags | O_NONBLOCK | O_ASYNC)) {
return 4;
}

if (-1 == bind(sockfd, (SA*)&serv_addr, sizeof(serv_addr))) {
return 3;
}

while (1) sleep(1);
close(sockfd);

return 0;
}

客戶端代碼:

#include
#include
#include
#include
#include
#include
#include
#include
#include

typedef struct sockaddr SA;
#defien BUFFSIZE 512
int sockfd = 0; //定義全局的listenfd


int main(int argc, char* argv[]) {
if (argc != 3) {
fprintf(stderr, "usage: argv[0]n", argv[0]);
return 1;
}
sockfd = socket(AF_INET, SOCK_DGRAM, 0);
if (-1 == sockfd) {
perror("socket");
return 2;
}

short port = atoi(argv[2]);
const char* ip = argv[1];

//獲取服務器協(xié)議地址簇
struct sockaddr_in serv_addr;
memset(&serv_addr, 0, sizeof(serv_addr));
serv_addr.sin_family = AF_INET;
serv_addr.sin_port = htons(port);

inet_pton(AF_INET, ip, &serv_addr.sin_addr);
//然后就是循環(huán)發(fā)送數據
char buffer[BUFFSIZE];
while (1) {
printf("請說>>: ");
scanf("%s", buffer);
sendto(sockfd, buffer, strlen(buffer), 0
(SA*)&serv_addr, sizeof(serv_addr));
}

return 0;
}

二. 生活的角度理解select poll epoll三種IO多路復用技術的工作模式

生活實例理解select 和 poll 工作原理

先抽象一個具體的場景出來:

假如說有這樣一家餐廳。 一桌餐對應著一個服務員 (生活化IO事件),服務員只是負責服務,這個時候老板需要安排一個 (跑堂伙計 管理收集服務員獲取的服務信息)

select 便是這個跑堂伙計了

由于服務事件的類型可能不盡相同:所以跑堂伙計 開始的時候帶著三個本子,分別記錄不同的事件類型

圖片

select(ionum, rfds, wfds, efds, timeout);

rfds: 讀事件集合 wfds寫事件集合 efds異常事件集合

ionum = maxfd + 1; fds {0, 1, 2, 3, 4 .....} fdsnum = maxfd + 1;

以上是一個生活中的一個小小栗子便于理解 select 工作模式,實際實現(xiàn)存在部分偏差

對應真實情景: select 之后是內核檢測IO事件的發(fā)生,內核輪詢所有的fd,內核重新設置底層的 fd_set :傳入內核的時候 (內核如果知曉fd是否需要監(jiān)視???) FD_SET: 然后內核會對于傳入進去的fd_set 進行重新覆蓋,沒有IO事件發(fā)生的就像FD_CLR一樣 將對應集合位圖 位置上標記為0 有IO事件發(fā)生的就將對應位圖位置標記為1 這樣回到用戶態(tài)之后從新進行輪詢所有的 fd 就可以根據內核從新標記的發(fā)生IO事件的 位 來處理IO (select 內核 用戶態(tài)兩次輪詢) 定時輪詢,效率低下

int poll(struct pollfd *fds, nfds_t nfds, int timeout);

poll的本質還是輪詢。只不過破除了位圖的限制,采取結構體存儲IO事件,將三個本子合成一個本子了,而且破除了位圖限制之后可以使用鏈式結構連接所有事件的結構體,沒有了最大監(jiān)視IO事件的限制了 (位圖的fd_set的話大小是由內核開始確定的,如果修改大小比較麻煩,所以是存在fdnum上的限制的)

poll 雖然理論上是沒有了fdnum的限制了,但是隨著fd的數量上升到一定程度,性能會急劇下降

生活理解epoll工作原理

還是先抽象場景出來:

存在這樣一個小區(qū)的管理,小區(qū)里面很多的用戶都存在寄快遞的需求,每一次需要寄出快遞的時候大家都統(tǒng)一的放入門衛(wèi)室里面

快遞員每一次來收取快遞的時候不再需要挨家挨戶的詢問,收取,而是直接去門衛(wèi)室將所有的快遞放進自己的車子中帶走處理即可 (門衛(wèi)室相當于是readylist,不再需要輪詢所有的IO事件是否發(fā)生,提高了效率)

epoll_wait就是這個快遞員:

epoll_wait(管理的小區(qū), 快遞員存儲快遞包裹的容器, 容器可以容納的快遞數目,定時);

epoll_wait(epfd, events, eventscap, timeout);

epoll_create(size); //早期size標識最大居民數目,現(xiàn)在已經沒有限制了,只有0和1的區(qū)別了, 因為可以進行鏈式存儲,也就沒有容量限制這一說了

epoll_ctl(管理的小區(qū), 小區(qū)居民搬入搬出修改的不同行為,新搬入居民的信息(標識), 描述需要寄出快遞的類型信息 );

epoll_ctl(epfd, op, fd, event); //epfd, epoll句柄,底層是紅黑樹 op:作何操作, fd : IO事件句柄, event:IO事件類型 (功能,向IO事件監(jiān)視的紅黑樹上掛載新的監(jiān)視IO事件,或者是刪除監(jiān)視,或者是修改監(jiān)視事件類型)

epoll對比poll select優(yōu)勢出現(xiàn)小結:

將監(jiān)視IO事件進行提前注冊,掛載在內核的監(jiān)視IO事件紅黑樹上,每一次調用epoll_wait 獲取IO觸發(fā)事件的時候不再需要傳入待檢測IO的事件,接口分離,功能分離,而且內核中采取了使用就緒隊列存儲紅黑樹上發(fā)生的IO事件結點的方式,這樣每一次僅僅需要將就緒隊列從內核中拷貝至用戶空間拿取事件即可。。。

readylist放置觸發(fā)IO事件, 使其不需要輪詢獲知IO觸發(fā)的事件了, 提前注冊掛載監(jiān)視IO事件結點到紅黑樹上,也使得不需要每一次都從新拷貝監(jiān)視事件進入內核空間,降低了拷貝消耗, 正是由于epoll的這兩點優(yōu)勢好處使其成為穩(wěn)定高效的多路復用技術,在高并發(fā)服務器的設計中隨處可見epoll的身影

三. 細談一下epoll的ET和LT

ET : edge tigger邊沿觸發(fā) LT : level tigger水平觸發(fā)

簡單理解一下兩種觸發(fā)模式:

LT : 指的是 內核recv_buffer緩沖區(qū)中存在數據就一直會進行觸發(fā),處理數據, 讀事件一直觸發(fā). 或者是 內核send_buffer緩沖區(qū)沒有滿,就一直觸發(fā)寫事件. 直到寫滿send_buffer

ET : 指的是緩沖區(qū)狀態(tài)發(fā)生變化之后引發(fā)觸發(fā),而且核心關鍵,僅僅只會觸發(fā)一次 (邊沿觸發(fā))

接收緩沖區(qū)recv_buffer 發(fā)生變化,數據從無到有,會觸發(fā)一次讀事件,核心,不論一次是否可以將數據完全處理,都只會觸發(fā)一次

或者發(fā)送緩沖區(qū)send_buffer狀態(tài)發(fā)生變化,也會觸發(fā)寫事件 (核心關鍵還在于觸發(fā)一次)

上述的觸發(fā)都指的是對于 epoll_wait 的觸發(fā).

總結:針對便于理解的讀事件的觸發(fā), recv_buffer來理解, 如果說recv_buffer中有數據,如果是LT 就會不斷地不停地觸發(fā), 如果是ET, 不管數據能不能處理完,都僅僅只會觸發(fā)一次

光說不練是假把式,我們還是來一個實際地案例來解釋一下:


#include
#include
#include
#include
#include
#include
#include
#include
#include


typedef struct sockaddr SA;

int main(int argc, char* argv[]) {

if (argc != 2) {
fprintf(stderr, "usage: %s ", argv[0]);
return 1;
}

int sockfd = socket(AF_INET, SOCK_STREAM, 0);

if (sockfd < 0) {
perror("socket");
return 2;
}

struct sockaddr_in serv_addr;
//確定協(xié)議地址簇

int port = atoi(argv[1]);
memset(&serv_addr, 0, sizeof(serv_addr));
serv_addr.sin_family = AF_INET;
serv_addr.sin_addr.s_addr = INADDR_ANY;

serv_addr.sin_port = htons(port);

if (-1 == bind(sockfd, (SA*)&serv_addr, sizeof(serv_addr))) {
perror("bind");
return 3;
}

if (-1 == listen(sockfd, 5)) {
perror("listen");
return 4;
}

//至此可以開始IO多路復用監(jiān)視IO了

//創(chuàng)建出來內核紅黑樹地根結點(epoll句柄)
int epfd = epoll_create(1);

struct epoll_event ev, evs[512];

//監(jiān)視新的連接到來IO事件
ev.events = EPOLLIN;
ev.data.fd = sockfd;

//將其掛載到紅黑樹上
epoll_ctl(epfd, EPOLL_CTL_ADD, sockfd, &ev);

while (1) {
//epoll_wait(epfd, 存儲觸發(fā)事件地容器傳出參數, 容器大小size, timeout)
int nready = epoll_wait(epfd, evs, 512, -1);
if (nready < -1) {
break; //出錯
}
int i = 0;
for (i = 0; i < nready; ++i) {
//處理各種IO事件, 存在各種封裝形式
if (evs[i].events & EPOLLIN) {
if (evs[i].data.fd == sockfd) {
//新的連接到來
struct sockaddr_in cli_addr;
socklen_t clilen;
int clifd = accept(sockfd, (SA*)&cli_addr, &clilen);
if (clifd < 0) return 5;//出錯了嘛
char str[INET_ADDRSTRLEN] = {0};
//獲取一下信息
printf("recv from %s at %d connectionn", inet_ntop(AF_INET, &cli_addr.sin_addr, str, sizeof(str))
, ntohs(cli_addr.sin_port));

//從新設置一下ev, 將新的監(jiān)視IO事件掛載到紅黑樹上
ev.events = EPOLLIN | EPOLLET;//關鍵哈, EPOLLET使用地是邊沿觸發(fā)
ev.data.fd = clifd;
epoll_ctl(epfd, EPOLL_CTL_ADD, clifd , &ev);
continue;
}
//處理真正地讀事件, 將緩沖區(qū)給小一點,等下才好看見效果
char buff[5] = {0};
int ret = recv(evs[i].data.fd, buff, 5, 0);
if (ret < 0) {
if (errno == EAGAIN || errno == EWOULDBLOCK)
continue;
else {
//出錯了
}
//出錯了將其從內核紅黑樹上移除,避免僵尸結點
ev.events = EPOLLIN;
ev.data.fd = evs[i].data.fd;
epoll_ctl(epfd, EPOLL_CTL_DEL, evs[i].data.fd, &ev);
close(evs[i].data.fd);
} else if (ret == 0) {
printf("%d disconnectionn", evs[i].data.fd);
//斷開連接,從內核紅黑樹中移除監(jiān)視
ev.events = EPOLLIN;
ev.data.fd = evs[i].data.fd;
epoll_ctl(epfd, EPOLL_CTL_DEL, evs[i].data.fd, &ev);
close(evs[i].data.fd); //對端斷開連接

} else {

printf("recv %s, %d Bytesn", buff, ret);
//修改事件類型為寫事件
}

}
if (evs[i].events & EPOLLOUT) {
//此處暫時不寫,僅僅只是測試一下讀即可
}
}
}
return 0;
}

圖片

如上是使用ET地時候點一下地結果,沒有設置非阻塞哈,結果是啥,我發(fā)送了這么一段話,它僅僅只是觸發(fā)了一次,打印了一個Hello, why ? 我故意將緩沖區(qū)設置如此小,緩沖區(qū)狀態(tài)改變,但是最多緩沖區(qū)僅僅存儲5個數據,全發(fā)送了,后面再次循環(huán)過來,不觸發(fā)了我去

如果需要一直觸發(fā)直到recv_buffer內核緩沖區(qū)中沒有數據,咋辦。使用LT水平觸發(fā),如何設置,easy默認就是呀

圖片

我僅僅只是做了如此一個小小改動,默認LT觸發(fā),讓我們康康效果

圖片

點了一次發(fā)送,他就一直觸發(fā),直到recv_buffer中沒了數據

四. 總結本文

  • 本文主要還是進行了IO地理解實戰(zhàn), 信號驅動IO 異步IO究竟區(qū)別在哪里?
  • 異步IO 是完全不存在任何地應用程序掛起等待地, 其他哪些IO多多少少要么數據準備階段要么數據拷貝階段存在掛起等待阻塞
  • 然后就是IO多路復用地生活化理解精進
  • 最終介紹分析了epoll地ET 和 LT問題,這個超級重要好吧。大塊數據使用 LT一次讀,小塊數據使用ET + 循環(huán)讀(設置非阻塞) 出自大佬地結論
  • LT: 水平觸發(fā),recv_buffer內核緩沖區(qū)中存在數據,則讀事件一直不停地觸發(fā)
  • ET : 邊沿觸發(fā),recv_buffer中數據從無到有,狀態(tài)發(fā)生改變地時候進行觸發(fā),且關鍵是僅僅只會觸發(fā)一次,不論你數據是不是一次可以讀完,都只是觸發(fā)一次
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • IO
    IO
    +關注

    關注

    0

    文章

    418

    瀏覽量

    38879
  • 數據
    +關注

    關注

    8

    文章

    6715

    瀏覽量

    88308
  • 服務器
    +關注

    關注

    12

    文章

    8701

    瀏覽量

    84545
  • 應用程序
    +關注

    關注

    37

    文章

    3198

    瀏覽量

    57360
收藏 人收藏

    評論

    相關推薦

    Linux驅動學習筆記:異步IO

    前幾篇介紹了幾種IO模型,今天介紹另一種IO模型——異步IO。
    發(fā)表于 06-12 16:24 ?593次閱讀

    IO與NIO有何區(qū)別

    NON-blocking IO。 那么這套新的IO庫與之前的有何區(qū)別?為什么需要提供這樣一套IO庫呢? IO與NIO Java NIO相比與
    的頭像 發(fā)表于 09-25 11:00 ?702次閱讀
    <b class='flag-5'>IO</b>與NIO有何<b class='flag-5'>區(qū)別</b>

    異步IO是什么

    python 異步ioAsync IO is a concurrent programming design that has received dedicated support
    發(fā)表于 09-06 07:26

    《Linux設備驅動開發(fā)詳解》第9章、Linux設備驅動中的異步通知與異步IO

    《Linux設備驅動開發(fā)詳解》第9章、Linux設備驅動中的異步通知與異步IO
    發(fā)表于 10-27 11:33 ?0次下載
    《Linux設備<b class='flag-5'>驅動</b>開發(fā)詳解》第9章、Linux設備<b class='flag-5'>驅動</b>中的<b class='flag-5'>異步</b>通知與<b class='flag-5'>異步</b><b class='flag-5'>IO</b>

    Linux驅動技術中的異步通知技術

    異步通知的全稱是"信號驅動異步IO",通過"信號"的方式,期望獲取的資源可用時,
    發(fā)表于 05-12 09:24 ?646次閱讀
    Linux<b class='flag-5'>驅動</b>技術中的<b class='flag-5'>異步</b>通知技術

    遠程IO和分布式IO之間的區(qū)別是什么

    人們經常討論遠程IO和分布式IO區(qū)別。然而,有些人認為它們是相同的,術語可以交換,而另一些人認為相反。遠程I/O和分布式I/O有什么區(qū)別?以下是遠程
    發(fā)表于 06-01 17:26 ?1.1w次閱讀

    以太網遠程IO模塊與工控機IO板卡的區(qū)別

    以太網遠程IO模塊與工控機IO板卡的區(qū)別
    發(fā)表于 12-01 14:49 ?3250次閱讀

    一文詳細了解五種IO模型

    五種IO模型包括:阻塞IO、非阻塞IO、IO多路復用、信號驅動
    的頭像 發(fā)表于 02-14 14:38 ?5808次閱讀
    一文詳細了解五種<b class='flag-5'>IO</b>模型

    簡要敘述分布式IO和遠程IO區(qū)別

    遠程IO與分布式IO區(qū)別是什么?讓很多人糊涂,到底什么是遠程IO,什么是分布式IO,網上包括各種聲音,連行內有經驗的老師們也可能把分布式
    的頭像 發(fā)表于 12-29 11:59 ?1.1w次閱讀
    簡要敘述分布式<b class='flag-5'>IO</b>和遠程<b class='flag-5'>IO</b>的<b class='flag-5'>區(qū)別</b>

    單片機IO配置不同速度有啥區(qū)別?

    單片機IO配置不同速度有啥區(qū)別?
    的頭像 發(fā)表于 10-25 16:42 ?563次閱讀
    單片機<b class='flag-5'>IO</b>配置不同速度有啥<b class='flag-5'>區(qū)別</b>?

    多路IO復用模型和異步IO模型介紹

    多路 IO 復用模型 多路 IO 復用,有時也稱為事件驅動 IO。它的基本原理就是有個函數會不斷地輪詢所負責的所有 socket ,當某個 socket有數據到達了,就通知用戶進程。
    的頭像 發(fā)表于 10-08 17:21 ?677次閱讀
    多路<b class='flag-5'>IO</b>復用模型和<b class='flag-5'>異步</b><b class='flag-5'>IO</b>模型介紹

    linux異步io框架iouring應用

    Linux內核5.1支持了新的異步IO框架iouring,由Block IO大神也即Fio作者Jens Axboe開發(fā),意在提供一套公用的網絡和磁盤異步
    的頭像 發(fā)表于 11-08 15:39 ?497次閱讀
    linux<b class='flag-5'>異步</b><b class='flag-5'>io</b>框架iouring應用

    異步IO框架iouring介紹

    前言 Linux內核5.1支持了新的異步IO框架iouring,由Block IO大神也即Fio作者Jens Axboe開發(fā),意在提供一套公用的網絡和磁盤異步
    的頭像 發(fā)表于 11-09 09:30 ?1665次閱讀
    <b class='flag-5'>異步</b><b class='flag-5'>IO</b>框架iouring介紹

    PLC與IO卡之間的區(qū)別

    在工業(yè)自動化系統(tǒng)中扮演著不同的角色,具有不同的功能和應用場景。本文將從定義、功能、結構、應用等多個方面詳細闡述PLC與IO卡之間的區(qū)別
    的頭像 發(fā)表于 06-11 14:42 ?768次閱讀

    遠程IO與分布式IO區(qū)別

    在工業(yè)自動化和控制系統(tǒng)設計中,遠程IO(Input/Output)和分布式IO是兩個重要的概念。它們各自具有獨特的特點和優(yōu)勢,適用于不同的應用場景。本文將詳細探討遠程IO與分布式IO
    的頭像 發(fā)表于 06-15 15:57 ?1413次閱讀