圖文結(jié)合告訴你址儒,Nginx 為什么快到停不下來芹枷?

Nginx 的進(jìn)程模型

Nginx 服務(wù)器,正常運(yùn)行過程中:

多進(jìn)程:一個 Master 進(jìn)程莲趣、多個 Worker 進(jìn)程

Master 進(jìn)程:管理 Worker 進(jìn)程

對外接口:接收外部的操作(信號)

對內(nèi)轉(zhuǎn)發(fā):根據(jù)外部的操作的不同鸳慈,通過信號管理 Worker

監(jiān)控:監(jiān)控 worker 進(jìn)程的運(yùn)行狀態(tài),worker 進(jìn)程異常終止后喧伞,自動重啟 worker 進(jìn)程

Worker 進(jìn)程:所有 Worker 進(jìn)程都是平等的

實際處理:網(wǎng)絡(luò)請求走芋,由 Worker 進(jìn)程處理;

Worker 進(jìn)程數(shù)量:在 nginx.conf 中配置潘鲫,一般設(shè)置為核心數(shù)翁逞,充分利用 CPU 資源,同時溉仑,避免進(jìn)程數(shù)量過多挖函,避免進(jìn)程競爭 CPU 資源,增加上下文切換的損耗浊竟。

思考:

請求是連接到 Nginx怨喘,Master 進(jìn)程負(fù)責(zé)處理和轉(zhuǎn)發(fā)?

如何選定哪個 Worker 進(jìn)程處理請求逐沙?請求的處理結(jié)果哲思,是否還要經(jīng)過 Master 進(jìn)程?

HTTP 連接建立和請求處理過程

Nginx 啟動時吩案,Master 進(jìn)程棚赔,加載配置文件

Master 進(jìn)程,初始化監(jiān)聽的 socket

Master 進(jìn)程徘郭,fork 出多個 Worker 進(jìn)程

Worker 進(jìn)程靠益,競爭新的連接,獲勝方通過三次握手残揉,建立 Socket 連接胧后,并處理請求

Nginx 高性能、高并發(fā)

Nginx 采用:多進(jìn)程 + 異步非阻塞方式(IO 多路復(fù)用 epoll)

請求的完整過程:

建立連接

讀取請求:解析請求

處理請求

響應(yīng)請求

請求的完整過程抱环,對應(yīng)到底層壳快,就是:讀寫 socket 事件

Nginx 的事件處理模型

request:Nginx 中 http 請求纸巷。

基本的 HTTP Web Server 工作模式:

接收請求:逐行讀取請求行和請求頭,判斷段有請求體后眶痰,讀取請求體

處理請求

返回響應(yīng):根據(jù)處理結(jié)果瘤旨,生成相應(yīng)的 HTTP 請求(響應(yīng)行、響應(yīng)頭竖伯、響應(yīng)體)

Nginx 也是這個套路存哲,整體流程一致。

模塊化體系結(jié)構(gòu)

nginx的模塊根據(jù)其功能基本上可以分為以下幾種類型:

event module: 搭建了獨立于操作系統(tǒng)的事件處理機(jī)制的框架七婴,及提供了各具體事件的處理祟偷。包括ngx_events_module, ngx_event_core_module和ngx_epoll_module等打厘。nginx具體使用何種事件處理模塊修肠,這依賴于具體的操作系統(tǒng)和編譯選項。

phase handler: 此類型的模塊也被直接稱為handler模塊婚惫。主要負(fù)責(zé)處理客戶端請求并產(chǎn)生待響應(yīng)內(nèi)容氛赐,比如ngx_http_static_module模塊,負(fù)責(zé)客戶端的靜態(tài)頁面請求處理并將對應(yīng)的磁盤文件準(zhǔn)備為響應(yīng)內(nèi)容輸出先舷。

output filter: 也稱為filter模塊,主要是負(fù)責(zé)對輸出的內(nèi)容進(jìn)行處理滓侍,可以對輸出進(jìn)行修改蒋川。例如,可以實現(xiàn)對輸出的所有html頁面增加預(yù)定義的footbar一類的工作撩笆,或者對輸出的圖片的URL進(jìn)行替換之類的工作捺球。

upstream: upstream模塊實現(xiàn)反向代理的功能,將真正的請求轉(zhuǎn)發(fā)到后端服務(wù)器上夕冲,并從后端服務(wù)器上讀取響應(yīng)氮兵,發(fā)回客戶端。upstream模塊是一種特殊的handler歹鱼,只不過響應(yīng)內(nèi)容不是真正由自己產(chǎn)生的泣栈,而是從后端服務(wù)器上讀取的。

load-balancer: 負(fù)載均衡模塊弥姻,實現(xiàn)特定的算法南片,在眾多的后端服務(wù)器中,選擇一個服務(wù)器出來作為某個請求的轉(zhuǎn)發(fā)服務(wù)器庭敦。

常見問題剖析

Nginx vs. Apache

網(wǎng)絡(luò) IO 模型:

nginx:IO 多路復(fù)用疼进,epoll(freebsd 上是 kqueue )

高性能

高并發(fā)

占用系統(tǒng)資源少

apache:阻塞 + 多進(jìn)程/多線程

更穩(wěn)定,bug 少

模塊更豐富

場景:

處理多個請求時秧廉,可以采用:IO 多路復(fù)用 或者 阻塞 IO +多線程

IO 多路服用:一個 線程伞广,跟蹤多個 socket 狀態(tài)拣帽,哪個就緒,就讀寫哪個嚼锄;

阻塞 IO + 多線程:每一個請求池充,新建一個服務(wù)線程

思考:IO 多路復(fù)用 和 多線程 的適用場景掸犬?

IO 多路復(fù)用:單個連接的請求處理速度沒有優(yōu)勢,適合 IO 密集型 場景,事件驅(qū)動

大并發(fā)量:只使用一個線程兑巾,處理大量的并發(fā)請求,降低上下文環(huán)境切換損耗施籍,也不需要考慮并發(fā)問題仲吏,相對可以處理更多的請求;

消耗更少的系統(tǒng)資源(不需要線程調(diào)度開銷)

適用于長連接的情況(多線程模式長連接容易造成線程過多正什,造成頻繁調(diào)度)

阻塞IO + 多線程:實現(xiàn)簡單啥纸,可以不依賴系統(tǒng)調(diào)用,適合 CPU 密集型 場景

每個線程婴氮,都需要時間和空間斯棒;

線程數(shù)量增長時,線程調(diào)度開銷指數(shù)增長

Nginx 最大連接數(shù)

基礎(chǔ)背景:

Nginx 是多進(jìn)程模型主经,Worker 進(jìn)程用于處理請求荣暮;

單個進(jìn)程的連接數(shù)(文件描述符 fd),有上限(nofile):ulimit -n

Nginx 上配置單個 worker 進(jìn)程的最大連接數(shù):worker_connections 上限為 nofile

Nginx 上配置 worker 進(jìn)程的數(shù)量:worker_processes

因此罩驻,Nginx 的最大連接數(shù):

Nginx 的最大連接數(shù):Worker 進(jìn)程數(shù)量 x 單個 Worker 進(jìn)程的最大連接數(shù)

上面是 Nginx 作為通用服務(wù)器時穗酥,最大的連接數(shù)

Nginx 作為反向代理服務(wù)器時,能夠服務(wù)的最大連接數(shù):(Worker 進(jìn)程數(shù)量 x 單個 Worker 進(jìn)程的最大連接數(shù))/ 2惠遏。

Nginx 反向代理時砾跃,會建立 Client 的連接和后端 Web Server 的連接,占用 2 個連接

思考:

每打開一個 socket 占用一個 fd

為什么节吮,一個進(jìn)程能夠打開的 fd 數(shù)量有限制抽高?

IO 模型

場景:

處理多個請求時,可以采用:IO 多路復(fù)用 或者 阻塞 IO +多線程

IO 多路復(fù)用:一個 線程透绩,跟蹤多個 socket 狀態(tài)翘骂,哪個就緒,就讀寫哪個渺贤;

阻塞 IO + 多線程:每一個請求雏胃,新建一個服務(wù)線程

思考:IO 多路復(fù)用 和 多線程 的適用場景?

IO 多路復(fù)用:單個連接的請求處理速度沒有優(yōu)勢

大并發(fā)量:只使用一個線程志鞍,處理大量的并發(fā)請求瞭亮,降低上下文環(huán)境切換損耗,也不需要考慮并發(fā)問題固棚,相對可以處理更多的請求统翩;

消耗更少的系統(tǒng)資源(不需要線程調(diào)度開銷)

適用于長連接的情況(多線程模式長連接容易造成線程過多仙蚜,造成頻繁調(diào)度)

阻塞IO + 多線程:實現(xiàn)簡單,可以不依賴系統(tǒng)調(diào)用厂汗。

每個線程委粉,都需要時間和空間;

線程數(shù)量增長時娶桦,線程調(diào)度開銷指數(shù)增長

select/poll 和 epoll 比較

詳細(xì)內(nèi)容贾节,參考:

select poll epoll三者之間的比較

select/poll 系統(tǒng)調(diào)用:

//select系統(tǒng)調(diào)用intselect(intmaxfdp,fd_set*readfds,fd_set*writefds,fd_set*errorfds,structtimeval*timeout);//poll系統(tǒng)調(diào)用intpoll(structpollfdfds[],nfds_tnfds,inttimeout);

select:

查詢 fd_set 中衷畦,是否有就緒的 fd栗涂,可以設(shè)定一個超時時間,當(dāng)有 fd (File descripter) 就緒或超時返回祈争;

fd_set 是一個位集合斤程,大小是在編譯內(nèi)核時的常量,默認(rèn)大小為 1024

特點:

連接數(shù)限制菩混,fd_set 可表示的 fd 數(shù)量太小了忿墅;

線性掃描:判斷 fd 是否就緒,需要遍歷一邊 fd_set沮峡;

數(shù)據(jù)復(fù)制:用戶空間和內(nèi)核空間疚脐,復(fù)制連接就緒狀態(tài)信息

poll:

解決了連接數(shù)限制:

poll 中將 select 中的 fd_set 替換成了一個 pollfd 數(shù)組

解決 fd 數(shù)量過小的問題

數(shù)據(jù)復(fù)制:用戶空間和內(nèi)核空間,復(fù)制連接就緒狀態(tài)信息

epoll:event 事件驅(qū)動

epoll:event 事件驅(qū)動

事件機(jī)制:避免線性掃描

為每個 fd帖烘,注冊一個監(jiān)聽事件

fd 變更為就緒時亮曹,將 fd 添加到就緒鏈表

fd 數(shù)量:無限制(OS 級別的限制,單個進(jìn)程能打開多少個 fd)

select秘症,poll,epoll:

I/O多路復(fù)用的機(jī)制式矫;

I/O多路復(fù)用就通過一種機(jī)制乡摹,可以監(jiān)視多個描述符,一旦某個描述符就緒(一般是讀就緒或者寫就緒)采转,能夠通知程序進(jìn)行相應(yīng)的讀寫操作聪廉。

監(jiān)視多個文件描述符

但select,poll故慈,epoll本質(zhì)上都是同步I/O:

用戶進(jìn)程負(fù)責(zé)讀寫(從內(nèi)核空間拷貝到用戶空間)板熊,讀寫過程中,用戶進(jìn)程是阻塞的察绷;

異步 IO干签,無需用戶進(jìn)程負(fù)責(zé)讀寫,異步IO拆撼,會負(fù)責(zé)從內(nèi)核空間拷貝到用戶空間容劳;

Nginx 的并發(fā)處理能力

關(guān)于 Nginx 的并發(fā)處理能力:

并發(fā)連接數(shù)喘沿,一般優(yōu)化后,峰值能保持在 1~3w 左右竭贩。(內(nèi)存和 CPU 核心數(shù)不同蚜印,會有進(jìn)一步優(yōu)化空間)

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市留量,隨后出現(xiàn)的幾起案子窄赋,更是在濱河造成了極大的恐慌,老刑警劉巖楼熄,帶你破解...
    沈念sama閱讀 216,591評論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件忆绰,死亡現(xiàn)場離奇詭異,居然都是意外死亡孝赫,警方通過查閱死者的電腦和手機(jī)较木,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,448評論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來青柄,“玉大人伐债,你說我怎么就攤上這事≈驴” “怎么了峰锁?”我有些...
    開封第一講書人閱讀 162,823評論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長双戳。 經(jīng)常有香客問我虹蒋,道長,這世上最難降的妖魔是什么飒货? 我笑而不...
    開封第一講書人閱讀 58,204評論 1 292
  • 正文 為了忘掉前任魄衅,我火速辦了婚禮,結(jié)果婚禮上塘辅,老公的妹妹穿的比我還像新娘晃虫。我一直安慰自己,他們只是感情好扣墩,可當(dāng)我...
    茶點故事閱讀 67,228評論 6 388
  • 文/花漫 我一把揭開白布哲银。 她就那樣靜靜地躺著,像睡著了一般呻惕。 火紅的嫁衣襯著肌膚如雪荆责。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,190評論 1 299
  • 那天亚脆,我揣著相機(jī)與錄音做院,去河邊找鬼。 笑死,一個胖子當(dāng)著我的面吹牛山憨,可吹牛的內(nèi)容都是我干的查乒。 我是一名探鬼主播,決...
    沈念sama閱讀 40,078評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼郁竟,長吁一口氣:“原來是場噩夢啊……” “哼玛迄!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起棚亩,我...
    開封第一講書人閱讀 38,923評論 0 274
  • 序言:老撾萬榮一對情侶失蹤蓖议,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后讥蟆,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體勒虾,經(jīng)...
    沈念sama閱讀 45,334評論 1 310
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,550評論 2 333
  • 正文 我和宋清朗相戀三年瘸彤,在試婚紗的時候發(fā)現(xiàn)自己被綠了修然。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,727評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡质况,死狀恐怖愕宋,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情结榄,我是刑警寧澤中贝,帶...
    沈念sama閱讀 35,428評論 5 343
  • 正文 年R本政府宣布,位于F島的核電站臼朗,受9級特大地震影響邻寿,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜视哑,卻給世界環(huán)境...
    茶點故事閱讀 41,022評論 3 326
  • 文/蒙蒙 一绣否、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧挡毅,春花似錦枝秤、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,672評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽丹壕。三九已至庆械,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間菌赖,已是汗流浹背缭乘。 一陣腳步聲響...
    開封第一講書人閱讀 32,826評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留琉用,地道東北人堕绩。 一個月前我還...
    沈念sama閱讀 47,734評論 2 368
  • 正文 我出身青樓策幼,卻偏偏與公主長得像,于是被迫代替她去往敵國和親奴紧。 傳聞我的和親對象是個殘疾皇子特姐,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,619評論 2 354

推薦閱讀更多精彩內(nèi)容

  • Nginx才短短幾年,就拿下了web服務(wù)器大筆江山黍氮,眾所周知唐含,Nginx在處理大并發(fā)靜態(tài)請求方面,效率明顯高于ht...
    松江野人閱讀 1,075評論 0 2
  • 必備的理論基礎(chǔ) 1.操作系統(tǒng)作用: 隱藏丑陋復(fù)雜的硬件接口沫浆,提供良好的抽象接口捷枯。 管理調(diào)度進(jìn)程,并將多個進(jìn)程對硬件...
    drfung閱讀 3,537評論 0 5
  • 什么是Nginx专执? Nginx是一個高性能的HTTP和反向代理服務(wù)器淮捆,也是一個IMAP/POP3/SMTP服務(wù)器N...
    jiangmo閱讀 2,537評論 1 9
  • 去社區(qū)圖書館取網(wǎng)約的書,停在社區(qū)門口的時候本股,發(fā)現(xiàn)前方有一個空車位攀痊,平時這個社區(qū)人很多,車位基本沒空痊末,所以我也不知道...
    百合手工閱讀 906評論 0 0
  • 今天啊凿叠,是自己的絮絮叨叨涩笤。 我們這一生,會遇到好多好多人盒件,有的人從你生命中走過蹬碧,又離開。有的人路過你的生命炒刁,從此不...
    小半星球閱讀 80評論 0 1