Unix五種IO模型

Unix五種IO模型

  • IO 是主存和外部設(shè)備 ( 硬盤拷邢、終端和網(wǎng)絡(luò)等 ) 拷貝數(shù)據(jù)的過程挨队。 IO 是操作系統(tǒng)的底層功能實(shí)現(xiàn),底層通過 I/O 指令進(jìn)行完成夫椭。

1、阻塞式I/O:blocking IO

  • 在linux中氯庆,默認(rèn)情況下所有的socket都是blocking蹭秋,一個(gè)典型的讀操作流程大概是這樣:

    • step1: 等待數(shù)據(jù)到達(dá)(例如等待網(wǎng)絡(luò)數(shù)據(jù)傳輸完成)。當(dāng)所有等待數(shù)據(jù)到達(dá)時(shí)堤撵,它被復(fù)制到內(nèi)核中的某個(gè)緩沖區(qū)仁讨。
    • step2: 把數(shù)據(jù)從內(nèi)核緩沖區(qū)復(fù)制到應(yīng)用程序緩沖區(qū)。
      [圖片上傳失敗...(image-ac81d1-1550418665511)]
  • 應(yīng)用進(jìn)程(application process) 調(diào)用了recvfrom這個(gè)系統(tǒng)調(diào)用

  • 然后內(nèi)核(kernel)開始了IO的第一個(gè)階段:準(zhǔn)備數(shù)據(jù)实昨。在內(nèi)核準(zhǔn)備數(shù)據(jù)期間洞豁,應(yīng)用進(jìn)程是一直阻塞的。

  • 內(nèi)核準(zhǔn)備好數(shù)據(jù)之后,把數(shù)據(jù)從內(nèi)核copy到應(yīng)用內(nèi)存丈挟。在內(nèi)核copy數(shù)據(jù)期間刁卜,應(yīng)用進(jìn)程依然是一直阻塞的。

  • 內(nèi)核返回結(jié)果礁哄,應(yīng)用進(jìn)程才解除block的狀態(tài)长酗,重新繼續(xù)執(zhí)行

blocking IO的特點(diǎn)就是在IO執(zhí)行的兩個(gè)階段都被block了。

2桐绒、非阻塞式I/O: nonblocking IO

  • linux下夺脾,可以通過設(shè)置socket使其變?yōu)閚on-blocking。當(dāng)對一個(gè)non-blocking socket執(zhí)行讀操作時(shí)茉继,流程是這個(gè)樣子:
    [圖片上傳失敗...(image-b67de6-1550418665511)]
  1. 應(yīng)用進(jìn)程(application process) 調(diào)用了recvfrom這個(gè)系統(tǒng)調(diào)用
  2. 內(nèi)核告訴應(yīng)用進(jìn)程咧叭,數(shù)據(jù)還沒有準(zhǔn)備好
  3. 應(yīng)用進(jìn)程發(fā)現(xiàn)數(shù)據(jù)沒有準(zhǔn)備好,不停的調(diào)用recvfrom這個(gè)系統(tǒng)調(diào)用烁竭,內(nèi)核在數(shù)據(jù)沒有準(zhǔn)備好的情況下不停的告訴應(yīng)用進(jìn)程數(shù)據(jù)沒有準(zhǔn)備好菲茬。
  4. 內(nèi)核準(zhǔn)備數(shù)據(jù)。這個(gè)過程中派撕,應(yīng)用進(jìn)程沒有阻塞婉弹,因?yàn)樗诓煌5恼{(diào)用!
  5. 在應(yīng)用進(jìn)程不停的調(diào)用中终吼,恰好這次內(nèi)核把數(shù)據(jù)準(zhǔn)備好了镀赌,然后內(nèi)核把數(shù)據(jù)copy到應(yīng)用進(jìn)程內(nèi)存。在內(nèi)核copy數(shù)據(jù)期間际跪,應(yīng)用進(jìn)程是一直阻塞的商佛。
  6. 內(nèi)核返回結(jié)果,應(yīng)用進(jìn)程解除block的狀態(tài)姆打,重新繼續(xù)執(zhí)行
  • 當(dāng)用戶進(jìn)程發(fā)出read操作時(shí)良姆,如果kernel中的數(shù)據(jù)還沒有準(zhǔn)備好,那么它并不會(huì)block用戶進(jìn)程幔戏,而是立刻返回一個(gè)error玛追。
  • 從用戶進(jìn)程角度講 ,它發(fā)起一個(gè)read操作后闲延,并不需要等待豹缀,而是馬上就得到了一個(gè)結(jié)果。用戶進(jìn)程判斷結(jié)果是一個(gè)error時(shí)慨代,它就知道數(shù)據(jù)還沒有準(zhǔn)備好邢笙,于是它可以再次 發(fā)送read操作。
  • 一旦kernel中的數(shù)據(jù)準(zhǔn)備好了侍匙,并且又再次收到了用戶進(jìn)程的system call氮惯,那么它馬上就將數(shù)據(jù)拷貝到了用戶內(nèi)存叮雳,然后返回。
    用戶進(jìn)程第一個(gè)階段不是阻塞的,需要不斷的主動(dòng)詢問kernel數(shù)據(jù)好了沒有妇汗;第二個(gè)階段依然總是阻塞的帘不。

3、I/O復(fù)用(select杨箭,poll寞焙,epoll...):IO multiplexing

  • IO復(fù)用同非阻塞IO本質(zhì)一樣,不過利用了新的select系統(tǒng)調(diào)用互婿,由內(nèi)核來負(fù)責(zé)本來是請求進(jìn)程該做的輪詢操作捣郊。看似比非阻塞IO還多了一個(gè)系統(tǒng)調(diào)用開銷慈参,不過因?yàn)榭梢灾С侄嗦稩O呛牲,才算提高了效率。
  • 它的基本原理就是select /epoll這個(gè)function會(huì)不斷的輪詢所負(fù)責(zé)的所有socket驮配,當(dāng)某個(gè)socket有數(shù)據(jù)到達(dá)了娘扩,就通知用戶進(jìn)程。它的流程如圖:
    [圖片上傳失敗...(image-68441e-1550418665511)]
  1. 應(yīng)用進(jìn)程 調(diào)用了select這個(gè)系統(tǒng)調(diào)用
  2. 內(nèi)核開始準(zhǔn)備數(shù)據(jù)壮锻。在內(nèi)核準(zhǔn)備數(shù)據(jù)期間琐旁,應(yīng)用進(jìn)程是一直阻塞的
  3. 內(nèi)核告訴應(yīng)用進(jìn)程數(shù)據(jù)準(zhǔn)備好了
  4. 應(yīng)用進(jìn)程(application process) 調(diào)用了recvfrom這個(gè)系統(tǒng)調(diào)用
  5. 內(nèi)核把數(shù)據(jù)copy到應(yīng)用進(jìn)程內(nèi)存。在內(nèi)核copy數(shù)據(jù)期間猜绣,應(yīng)用進(jìn)程是一直阻塞的
  6. 內(nèi)核返回結(jié)果旋膳,應(yīng)用進(jìn)程解除block的狀態(tài),重新繼續(xù)執(zhí)行
  • 如上圖所示途事,整個(gè)用戶的process其實(shí)是一直被 block的。只不過process是被select這個(gè)函數(shù)block擅羞,而不是被socket IO給block尸变。
  • 當(dāng)用戶進(jìn)程調(diào)用了select,那么整個(gè)進(jìn)程會(huì)被block减俏,而同時(shí)召烂,kernel會(huì)“監(jiān)視”所有select負(fù)責(zé)的socket,當(dāng)任何一個(gè) socket中的數(shù)據(jù)準(zhǔn)備好了娃承,select就會(huì)返回奏夫。這個(gè)時(shí)候用戶進(jìn)程再調(diào)用read操作,將數(shù)據(jù)從kernel拷貝到用戶進(jìn)程历筝。
  • 用select的優(yōu)勢在于它可以同時(shí)處理多個(gè)connection酗昼。
  • select/epoll的優(yōu)勢并不是對于單個(gè)連接能處理得更快,而是在于能處理更多的連接梳猪。 事實(shí)上麻削,如果處理的連接數(shù)不是很高的話,使用 select/epoll的web server不一定比使用multi-threading + blocking IO的web server性能更好,可能延遲還更大呛哟。

4叠荠、信號驅(qū)動(dòng)式I/O(SIGIO):signal driven IO

  • 信號驅(qū)動(dòng)式IO是指讓操作系統(tǒng)內(nèi)核在文件描述符就緒時(shí)發(fā)送信號給用戶進(jìn)程,這樣一來用戶進(jìn)程只要調(diào)用sigaction后就能立即返回扫责,不會(huì)被阻塞榛鼎。當(dāng)操作系統(tǒng)的文件描述符就緒時(shí),會(huì)發(fā)送信號給用戶進(jìn)程鳖孤,用戶進(jìn)程再調(diào)用recvfrom開始IO操作者娱。
    [圖片上傳失敗...(image-f90b02-1550418665511)]
  1. 應(yīng)用進(jìn)程發(fā)起一個(gè)信號,告訴內(nèi)核說我需要什么文件淌铐,然后直接返回
  2. 內(nèi)核準(zhǔn)備數(shù)據(jù)肺然。應(yīng)用進(jìn)程繼續(xù)完成后面的邏輯,不會(huì)阻塞
  3. 內(nèi)核準(zhǔn)備好數(shù)據(jù)腿准,告訴應(yīng)用進(jìn)程來取數(shù)據(jù)
  4. 應(yīng)用進(jìn)程請求取數(shù)據(jù)
  5. 內(nèi)核把數(shù)據(jù)復(fù)制到應(yīng)用進(jìn)程际起。應(yīng)用進(jìn)程阻塞
  6. 返回?cái)?shù)據(jù)
  • 信號驅(qū)動(dòng)式IO模型跟IO復(fù)用模型的區(qū)別,前者操作系統(tǒng)會(huì)主動(dòng)發(fā)消息給用戶進(jìn)程吐葱,后者用戶進(jìn)程還是會(huì)阻塞在多路復(fù)用器上街望。

5、異步I/O(POSIX的aio_系列函數(shù)):asynchronous IO

  • 異步IO模型指的是告訴操作系統(tǒng)內(nèi)核啟動(dòng)某個(gè)操作弟跑,并讓操作系統(tǒng)內(nèi)核在完成整個(gè)操作后通知用戶進(jìn)程灾前。
  • 其與信號驅(qū)動(dòng)式IO的區(qū)別是信號驅(qū)動(dòng)式IO模型是操作系統(tǒng)內(nèi)核通知我們何時(shí)開始一個(gè)IO操作,而異步IO模型是操作系統(tǒng)內(nèi)核通知我們該IO操作何時(shí)完成孟辑。
    [圖片上傳失敗...(image-b61c9-1550418665511)]
  1. 應(yīng)用進(jìn)程發(fā)起一個(gè)信號哎甲,告訴內(nèi)核說我需要什么文件,然后直接返回
  2. 內(nèi)核準(zhǔn)備數(shù)據(jù)饲嗽。應(yīng)用進(jìn)程繼續(xù)完成后面的邏輯炭玫,不會(huì)阻塞
  3. 內(nèi)核把數(shù)據(jù)復(fù)制到應(yīng)用進(jìn)程內(nèi)存。應(yīng)用進(jìn)程不會(huì)阻塞
  4. 返回?cái)?shù)據(jù)
  • 用戶進(jìn)程發(fā)起read操作之后貌虾,立刻就可以開始去做其它的事吞加。
  • 另一方面,從kernel的角度尽狠,當(dāng)它受到一個(gè)asynchronous read之后衔憨,首先它會(huì)立刻返回,所以不會(huì)對用戶進(jìn)程產(chǎn)生任何block袄膏。然后践图,kernel會(huì)等待數(shù)據(jù)準(zhǔn)備完成,然后將數(shù)據(jù)拷貝到用戶內(nèi)存沉馆,當(dāng)這一切都 完成之后平项,kernel會(huì)給用戶進(jìn)程發(fā)送一個(gè)signal赫舒,告訴它read操作完成了。
  • 在這整個(gè)過程中闽瓢,進(jìn)程完全沒有被block接癌。

總結(jié)

blocking I/O nonblocking I/O I/O multiplexing signal driven I/O (SIGIO) asynchronous I/O
數(shù)據(jù)準(zhǔn)備 阻塞 不阻塞 不阻塞 不阻塞 不阻塞
數(shù)據(jù)復(fù)制 阻塞 阻塞 阻塞 阻塞 不阻塞
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市扣讼,隨后出現(xiàn)的幾起案子缺猛,更是在濱河造成了極大的恐慌,老刑警劉巖椭符,帶你破解...
    沈念sama閱讀 207,113評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件荔燎,死亡現(xiàn)場離奇詭異,居然都是意外死亡销钝,警方通過查閱死者的電腦和手機(jī)有咨,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,644評論 2 381
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來蒸健,“玉大人座享,你說我怎么就攤上這事∷朴牵” “怎么了渣叛?”我有些...
    開封第一講書人閱讀 153,340評論 0 344
  • 文/不壞的土叔 我叫張陵,是天一觀的道長盯捌。 經(jīng)常有香客問我淳衙,道長,這世上最難降的妖魔是什么饺著? 我笑而不...
    開封第一講書人閱讀 55,449評論 1 279
  • 正文 為了忘掉前任箫攀,我火速辦了婚禮,結(jié)果婚禮上幼衰,老公的妹妹穿的比我還像新娘靴跛。我一直安慰自己,他們只是感情好塑顺,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,445評論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著俏险,像睡著了一般严拒。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上竖独,一...
    開封第一講書人閱讀 49,166評論 1 284
  • 那天裤唠,我揣著相機(jī)與錄音,去河邊找鬼莹痢。 笑死种蘸,一個(gè)胖子當(dāng)著我的面吹牛墓赴,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播航瞭,決...
    沈念sama閱讀 38,442評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼诫硕,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了刊侯?” 一聲冷哼從身側(cè)響起章办,我...
    開封第一講書人閱讀 37,105評論 0 261
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎滨彻,沒想到半個(gè)月后藕届,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,601評論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡亭饵,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,066評論 2 325
  • 正文 我和宋清朗相戀三年休偶,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片辜羊。...
    茶點(diǎn)故事閱讀 38,161評論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡踏兜,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出只冻,到底是詐尸還是另有隱情庇麦,我是刑警寧澤,帶...
    沈念sama閱讀 33,792評論 4 323
  • 正文 年R本政府宣布喜德,位于F島的核電站山橄,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏舍悯。R本人自食惡果不足惜航棱,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,351評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望萌衬。 院中可真熱鬧饮醇,春花似錦、人聲如沸秕豫。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,352評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽混移。三九已至祠墅,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間歌径,已是汗流浹背毁嗦。 一陣腳步聲響...
    開封第一講書人閱讀 31,584評論 1 261
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留回铛,地道東北人狗准。 一個(gè)月前我還...
    沈念sama閱讀 45,618評論 2 355
  • 正文 我出身青樓克锣,卻偏偏與公主長得像,于是被迫代替她去往敵國和親腔长。 傳聞我的和親對象是個(gè)殘疾皇子袭祟,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,916評論 2 344

推薦閱讀更多精彩內(nèi)容