redis,memcached,nginx網(wǎng)絡(luò)組件

網(wǎng)絡(luò)編程主要關(guān)注3個半事件:連接建立(client連接/連接第三方服務(wù))懒叛;連接斷開,消息達(dá)到耽梅,消息發(fā)送完畢薛窥。

TCP網(wǎng)絡(luò)服務(wù)模型,redis褐墅,nginx拆檬,memcached

1 阻塞,非阻塞區(qū)別:

  • 阻塞io阻塞在哪妥凳? 阻塞在網(wǎng)絡(luò)線程
  • 什么決定阻塞竟贯?fcntl函數(shù)設(shè)置阻塞
  • 具體內(nèi)部差異: 網(wǎng)絡(luò)io分為兩個流程,數(shù)據(jù)準(zhǔn)備階段(網(wǎng)卡拷貝到內(nèi)核空間)逝钥,數(shù)據(jù)拷貝階段(內(nèi)核空間拷貝到用戶空間)屑那,非阻塞是在數(shù)據(jù)準(zhǔn)備階段返回,但是在第二個階段也還是阻塞的艘款。

2 epoll

為何又多路復(fù)用持际?用一個線程檢查多個io事件。

水平觸發(fā):io即可是阻塞也可以是非阻塞
邊沿觸發(fā):只能是非阻塞

流程圖:

在這里插入圖片描述

epoll數(shù)據(jù)結(jié)構(gòu):

struct eventpoll { 
    // ... 
    struct rb_root rbr; // 管理 epoll 監(jiān)聽的事件
    struct list_head rdllist; // 保存著 epoll_wait 返回滿?條件的事件 
     // ...
}; 

struct epitem { 
    // ... 
    struct rb_node rbn; // 紅?樹節(jié)點 
    struct list_head rdllist; // 雙向鏈表節(jié)點 
    struct epoll_filefd ffd; // 事件句柄信息 
    struct eventpoll *ep; // 指向所屬的eventpoll對象 
    struct epoll_event event; // 注冊的事件類型 
    // ...
};  

struct epoll_event { 
    __uint32_t events; 
    epoll_data_t data; // 保存 關(guān)聯(lián)數(shù)據(jù)
};  
typedef union epoll_data { 
    void *ptr; 
    int fd; 
    uint32_t u32; 
    uint64_t u64;
}epoll_data_t;

接口

int epoll_create(int size);

size參數(shù)告訴內(nèi)核這個epoll對象會處理的事件?致數(shù)量哗咆,?不是能夠處理的事件的最?數(shù)蜘欲。在現(xiàn)在linux版本中,這個size參數(shù)已經(jīng)沒有意義了晌柬;返回:epoll對象句柄姥份;之后針對該epoll的操作需要通過該句柄來標(biāo)識該epoll對象;

int epoll_ctl(int epfd, int op, int fd, struct epoll_event* event);

收集 epoll 監(jiān)控的事件中已經(jīng)發(fā)?的事件年碘,如果 epoll 中沒有任何?個事件發(fā)?澈歉,則最多等待 timeout 毫秒后返回。返回:表示當(dāng)前發(fā)?的事件個數(shù)返回0表示本次沒有事件發(fā)?屿衅;返回-1表示出現(xiàn)錯誤埃难,需要檢查errno錯誤碼判斷錯誤類型。
events 這個數(shù)組必須在?戶態(tài)分配內(nèi)存涤久,內(nèi)核負(fù)責(zé)把就緒事件復(fù)制到該數(shù)組中涡尘;maxevents 表示本次可以返回的最?事件數(shù)?,?般設(shè)置為 events 數(shù)組的?度响迂;timeout表示在沒有檢測到事件發(fā)?時最多等待的時間悟衩;如果設(shè)置為0,檢測到rdllist為空?刻返回栓拜;如果設(shè)置為-1座泳,?直等待;

原理圖

在這里插入圖片描述

reactor

定義:
組成:?阻塞的io + io多路復(fù)?幕与;
特征:基于事件循環(huán)挑势,以事件驅(qū)動或者事件回調(diào)的?式來實現(xiàn)業(yè)務(wù)邏輯;
表述:將連接的io處理轉(zhuǎn)化為事件處理啦鸣;

單reactor模型

在這里插入圖片描述

代表:redis 內(nèi)存數(shù)據(jù)庫 操作redis當(dāng)中的數(shù)據(jù)結(jié)構(gòu)
redis 6.0 多線程

單reactor模型 + 任務(wù)隊列 + 線程池

在這里插入圖片描述

代表 skynet

多reactor

在這里插入圖片描述

應(yīng)用: memcached accept(fd, backlog) one eventloop per thread

多進(jìn)程

在這里插入圖片描述

nginx

多reactor + 消息隊列 + 線程池

業(yè)務(wù)場景中比較多 網(wǎng)絡(luò)密集型 + 業(yè)務(wù)密集型

tcp轉(zhuǎn)態(tài)圖

在這里插入圖片描述

epoll處理細(xì)節(jié)

在這里插入圖片描述

個人推薦:
C/C++Linux服務(wù)器開發(fā)/后臺架構(gòu)師學(xué)習(xí)視頻公開課
學(xué)習(xí)資料潮饱、教學(xué)視頻和學(xué)習(xí)路線圖(資料包括C/C++,Linux诫给,golang技術(shù)香拉,Nginx啦扬,ZeroMQ,MySQL凫碌,Redis扑毡,fastdfs,MongoDB盛险,ZK瞄摊,流媒體,CDN苦掘,P2P换帜,K8S,Docker鹤啡,TCP/IP惯驼,協(xié)程,DPDK递瑰,ffmpeg等)跳座,免費分享有需要的可以自行添加學(xué)習(xí)交流群

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市泣矛,隨后出現(xiàn)的幾起案子疲眷,更是在濱河造成了極大的恐慌,老刑警劉巖您朽,帶你破解...
    沈念sama閱讀 206,214評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件狂丝,死亡現(xiàn)場離奇詭異,居然都是意外死亡哗总,警方通過查閱死者的電腦和手機(jī)几颜,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,307評論 2 382
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來讯屈,“玉大人蛋哭,你說我怎么就攤上這事′棠福” “怎么了谆趾?”我有些...
    開封第一講書人閱讀 152,543評論 0 341
  • 文/不壞的土叔 我叫張陵,是天一觀的道長叛本。 經(jīng)常有香客問我沪蓬,道長,這世上最難降的妖魔是什么来候? 我笑而不...
    開封第一講書人閱讀 55,221評論 1 279
  • 正文 為了忘掉前任跷叉,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘云挟。我一直安慰自己梆砸,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 64,224評論 5 371
  • 文/花漫 我一把揭開白布园欣。 她就那樣靜靜地躺著帖世,像睡著了一般。 火紅的嫁衣襯著肌膚如雪俊庇。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,007評論 1 284
  • 那天鸡挠,我揣著相機(jī)與錄音辉饱,去河邊找鬼。 笑死拣展,一個胖子當(dāng)著我的面吹牛彭沼,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播备埃,決...
    沈念sama閱讀 38,313評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼姓惑,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了按脚?” 一聲冷哼從身側(cè)響起于毙,我...
    開封第一講書人閱讀 36,956評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎辅搬,沒想到半個月后唯沮,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,441評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡堪遂,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,925評論 2 323
  • 正文 我和宋清朗相戀三年介蛉,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片溶褪。...
    茶點故事閱讀 38,018評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡币旧,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出猿妈,到底是詐尸還是另有隱情吹菱,我是刑警寧澤,帶...
    沈念sama閱讀 33,685評論 4 322
  • 正文 年R本政府宣布彭则,位于F島的核電站毁葱,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏贰剥。R本人自食惡果不足惜倾剿,卻給世界環(huán)境...
    茶點故事閱讀 39,234評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧前痘,春花似錦凛捏、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,240評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至最欠,卻和暖如春示罗,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背芝硬。 一陣腳步聲響...
    開封第一講書人閱讀 31,464評論 1 261
  • 我被黑心中介騙來泰國打工蚜点, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人拌阴。 一個月前我還...
    沈念sama閱讀 45,467評論 2 352
  • 正文 我出身青樓绍绘,卻偏偏與公主長得像,于是被迫代替她去往敵國和親迟赃。 傳聞我的和親對象是個殘疾皇子陪拘,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,762評論 2 345

推薦閱讀更多精彩內(nèi)容