web請(qǐng)求過(guò)程分析

web請(qǐng)求過(guò)程分析

大致過(guò)程

首先用戶輸入U(xiǎn)RL網(wǎng)址她君,會(huì)請(qǐng)求DNS對(duì)域名進(jìn)行解析成相應(yīng)的IP地址,然后根據(jù)IP地址空免,在互聯(lián)網(wǎng)上尋找對(duì)應(yīng)的服務(wù)器,向服務(wù)器發(fā)起一個(gè)get請(qǐng)求,服務(wù)器返回對(duì)應(yīng)的數(shù)據(jù)資源祝懂。

當(dāng)然,服務(wù)器可能有很多臺(tái)拘鞋,負(fù)載均衡設(shè)備會(huì)平均分配所有用戶的請(qǐng)求砚蓬,請(qǐng)求的數(shù)據(jù)可能存儲(chǔ)在分布式緩存中或是靜態(tài)文件,或是數(shù)據(jù)庫(kù)里盆色。

當(dāng)數(shù)據(jù)返回瀏覽器灰蛙,瀏覽器解析數(shù)據(jù)發(fā)現(xiàn)還有一些靜態(tài)資源,則又會(huì)發(fā)起HTTP請(qǐng)求隔躲,這些請(qǐng)求很可能在CDN上摩梧,CDN服務(wù)器又會(huì)處理這個(gè)用戶的請(qǐng)求。!


image

HTTP請(qǐng)求:

HTTP請(qǐng)求頭:

請(qǐng)求頭 說(shuō)明
Accept 瀏覽器可接受的MIME類(lèi)型
Accept-Charset 瀏覽器可接受的字符集
Accept-Encoding 瀏覽器能夠進(jìn)行解碼的數(shù)據(jù)編碼方式
Accept-Language 瀏覽器所希望的語(yǔ)言種類(lèi)宣旱,當(dāng)服務(wù)器能夠提供一種以上的語(yǔ)言版本時(shí)要用到
Authorization 授權(quán)信息仅父,通常出現(xiàn)在對(duì)服務(wù)器發(fā)送的WWW-Authenticate頭的應(yīng)答中
Connection 表示是否需要持久連接
Content-Length 表示請(qǐng)求消息正文的長(zhǎng)度
Cookie 這是最重要的請(qǐng)求頭信息之一
From 請(qǐng)求發(fā)送者的email地址,由一些特殊的Web客戶程序使用浑吟,瀏覽器不會(huì)用到它
Host 初始URL中的主機(jī)和端口
If-Modified-Since 只有當(dāng)所請(qǐng)求的內(nèi)容在指定的日期之后又經(jīng)過(guò)修改才返回它笙纤,否則返回304“Not Modified”應(yīng)答
Pragma 指定“no-cache”值表示服務(wù)器必須返回一個(gè)刷新后的文檔,即使它是代理服務(wù)器而且已經(jīng)有了頁(yè)面的本地拷貝
Referer 包含一個(gè)URL组力,用戶從該URL代表的頁(yè)面出發(fā)訪問(wèn)當(dāng)前請(qǐng)求的頁(yè)面
User-Agent 瀏覽器類(lèi)型省容,如果Servlet返回的內(nèi)容與瀏覽器類(lèi)型有關(guān)則該值非常有用
UA-Pixels,UA-Color燎字,UA-OS蓉冈,UA-CPU 由某些版本的IE瀏覽器所發(fā)送的非標(biāo)準(zhǔn)的請(qǐng)求頭,表示屏幕大小轩触、顏色深度寞酿、操作系統(tǒng)和CPU類(lèi)型
響應(yīng)頭 說(shuō)明
Allow 服務(wù)器支持哪些請(qǐng)求方法(如GET、POST等)
Content-Encoding 文檔的編碼(Encode)方法
Content-Length 表示內(nèi)容長(zhǎng)度
Content-Type 表示后面的文檔屬于什么MIME類(lèi)型
Date 當(dāng)前的GMT時(shí)間
Expires 指明應(yīng)該在什么時(shí)候認(rèn)為文檔已經(jīng)過(guò)期脱柱,從而不再緩存它
Last-Modified 文檔的最后改動(dòng)時(shí)間
Location 表示客戶應(yīng)當(dāng)?shù)侥睦锶ヌ崛∥臋n
Refresh 表示瀏覽器應(yīng)該在多少時(shí)間之后刷新文檔伐弹,以秒計(jì)

常用狀態(tài)碼

1**:請(qǐng)求收到,繼續(xù)處理

100——客戶必須繼續(xù)發(fā)出請(qǐng)求

2**:操作成功收到榨为,分析惨好、接受

200——交易成功

3**:完成此請(qǐng)求必須進(jìn)一步處理

302——在其他地址發(fā)現(xiàn)了請(qǐng)求數(shù)據(jù)

4**:請(qǐng)求包含一個(gè)錯(cuò)誤語(yǔ)法或不能完成

400——錯(cuò)誤請(qǐng)求,如語(yǔ)法錯(cuò)誤

403——禁止訪問(wèn)

404——沒(méi)有發(fā)現(xiàn)文件随闺、查詢(xún)或URl

5**:服務(wù)器執(zhí)行一個(gè)完全有效請(qǐng)求失敗

500 - 內(nèi)部服務(wù)器錯(cuò)誤

瀏覽器緩存機(jī)制

cache control

當(dāng)劉拉起頁(yè)面異常日川,通常可能是瀏覽器做了緩存矩乐。如果ctrl+F5重新請(qǐng)求頁(yè)面龄句,則請(qǐng)求到的是最新的頁(yè)面回论。因?yàn)榇藭r(shí)請(qǐng)求會(huì)增加Pragma:no-cache和Cache-Control :no-cache

Expires

瀏覽器在發(fā)出請(qǐng)求之前會(huì)檢查這個(gè)字段,過(guò)期則會(huì)重新發(fā)起請(qǐng)求

Last-Modefied

表示最后修改時(shí)間分歇,瀏覽器再次請(qǐng)求時(shí)在請(qǐng)求頭上加上傀蓉,詢(xún)問(wèn)當(dāng)前緩存是否是最新的,是則不會(huì)傳輸新的數(shù)據(jù)职抡。

DNS域名解析

步驟:(輸入回車(chē)后)

  1. 瀏覽器檢查緩存有沒(méi)有域名對(duì)應(yīng)的IP地址葬燎,如果IP沒(méi)有發(fā)生變化,則直接訪問(wèn)成功缚甩。如果變化了則失敗谱净,因此緩存時(shí)間設(shè)置不能太長(zhǎng)。
  2. 如果瀏覽器緩存中沒(méi)有擅威,則會(huì)查找操作系統(tǒng)緩存紅是否有對(duì)應(yīng)的解析結(jié)果岳遥。
  3. 如果還沒(méi)有,操作系統(tǒng)把域名發(fā)送給LDNS服務(wù)器裕寨,該服務(wù)器一般都會(huì)緩存域名解析結(jié)果,緩存時(shí)間是受域名失效時(shí)間控制派继,緩存空間一般不是影響域名失效的主要因素宾袜。80%的域名解析在這里完成,LDNS承擔(dān)了域名解析的主要工作驾窟。
  4. 如果還沒(méi)有找到庆猫,就去ROOTServer域名服務(wù)器請(qǐng)求解析。
  5. 根域名服務(wù)器返回給本地域名服務(wù)器一個(gè)所查詢(xún)主域名服務(wù)器地址(gTLD server)绅络。gTLD是國(guó)際頂級(jí)域名服務(wù)器月培,全球只有13臺(tái)。
  6. LDNS向gTLD服務(wù)器發(fā)送請(qǐng)求恩急。
  7. gTLD查找并返回域名對(duì)應(yīng)的Name Server域名服務(wù)器地址杉畜。
  8. Name Server根據(jù)映射表,得到IP記錄衷恭,連同一個(gè)TTL值返回給DNS Server域名服務(wù)器此叠。
  9. 返回該域名對(duì)應(yīng)的IP地址和TTL值,LDNS緩存域名和IP随珠,緩存時(shí)間由TTL控制灭袁。
  10. LDNS把結(jié)果返回給用戶,用戶根據(jù)TTL值緩存在本地緩存中窗看。

總結(jié):

瀏覽會(huì)先查找緩存茸歧,未找到則會(huì)查本地的DNS緩存和hosts文件,
未找到則會(huì)調(diào)用DNS服務(wù)显沈,將地址給本地解析服務(wù)器软瞎,解析域名,若未找到則會(huì)向上尋找,一直到到根域名服務(wù)器
根域名服務(wù)器會(huì)頂級(jí)域名尋找頂級(jí)域名服務(wù)器铜涉,將該服務(wù)器IP發(fā)給本地DNS域名解析(根服務(wù)器在頂層智玻,不會(huì)一層層向下尋找,向下找到一層就讓本地DNS自己去找)
例如:根域名服務(wù)器找到.com域服務(wù)器地址IP芙代,將ip發(fā)送給我們的域名解析服務(wù)器吊奢,我們的服務(wù)器再向該ip地址詢(xún)問(wèn),直到找到域名對(duì)應(yīng)的IP地址

幾種域名解析方式

  • A記錄纹烹,A代表的是Address页滚,用來(lái)指定域名對(duì)應(yīng)的IP地址。
  • MX記錄铺呵,表示Mail Exchange,將域名下的郵件服務(wù)器指向自己的Mail Server
  • CNAME記錄裹驰,Canonical Name(別名解析)。一個(gè)ip地址對(duì)應(yīng)多個(gè)域名片挂。
  • NS記錄幻林,為某個(gè)域名指定DNS解析服務(wù)器
    TXT記錄,為某個(gè)主機(jī)名或域名設(shè)置說(shuō)明

CDN架構(gòu)

用戶要訪問(wèn)某個(gè)靜態(tài)文件(如CSS文件)音念,假設(shè)這個(gè)文件域名是cdn.jianshu.com,那么首先要想LDNS發(fā)請(qǐng)求沪饺,經(jīng)過(guò)迭代解析后會(huì)回到這域名的注冊(cè)服務(wù)器去解析,這個(gè)DNS解析服務(wù)器通常會(huì)把它重新CNAME解析到另外一個(gè)域名闷愤,這個(gè)域名最終會(huì)指向CDN全局中的DNS負(fù)載均衡服務(wù)器整葡,再由這個(gè)GTM來(lái)最終分配給訪問(wèn)用戶最近的CDN節(jié)點(diǎn)。

用戶拿到DNS解析結(jié)果讥脐,用戶去CDN節(jié)點(diǎn)訪問(wèn)靜態(tài)文件遭居,如果節(jié)點(diǎn)中所請(qǐng)求的文件不存在, 就會(huì)回到源站去獲取這個(gè)文件旬渠,再返回給用戶俱萍。

負(fù)載均衡

Load Balance:對(duì)工作任務(wù)進(jìn)行平衡、分?jǐn)偟蕉鄠€(gè)操作單元上執(zhí)行告丢,如圖片服務(wù)器鼠次、應(yīng)用服務(wù)器。

鏈路負(fù)載均衡

通過(guò)DNS解析成不同的IP芋齿,用戶根據(jù)IP來(lái)訪問(wèn)不同的目標(biāo)服務(wù)器

集群負(fù)載均衡

  • 硬件負(fù)載均衡
    一主一備腥寇,優(yōu)點(diǎn)是性能非常好,但較為昂貴觅捆,訪問(wèn)量增大到極限時(shí)赦役,不能進(jìn)行動(dòng)態(tài)擴(kuò)容。
  • 軟件負(fù)載均衡
    成本低栅炒,缺點(diǎn)請(qǐng)求要多次經(jīng)過(guò)代理服務(wù)器掂摔,增加網(wǎng)絡(luò)延時(shí)术羔,如圖,LVS和HAProxy對(duì)用戶的HTTp請(qǐng)求中的URL或者Coolie來(lái)進(jìn)行負(fù)載均衡乙漓,發(fā)送給指定訪問(wèn)的機(jī)器级历。

操作系統(tǒng)負(fù)載均衡

利用操作系統(tǒng)級(jí)別的軟中斷或者硬件中斷達(dá)到負(fù)載均衡,如設(shè)置多隊(duì)列網(wǎng)卡
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末叭披,一起剝皮案震驚了整個(gè)濱河市寥殖,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌涩蜘,老刑警劉巖嚼贡,帶你破解...
    沈念sama閱讀 207,248評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異同诫,居然都是意外死亡粤策,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,681評(píng)論 2 381
  • 文/潘曉璐 我一進(jìn)店門(mén)误窖,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)叮盘,“玉大人,你說(shuō)我怎么就攤上這事霹俺∪岷穑” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 153,443評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵吭服,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我蝗罗,道長(zhǎng)艇棕,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 55,475評(píng)論 1 279
  • 正文 為了忘掉前任串塑,我火速辦了婚禮沼琉,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘桩匪。我一直安慰自己打瘪,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,458評(píng)論 5 374
  • 文/花漫 我一把揭開(kāi)白布傻昙。 她就那樣靜靜地躺著闺骚,像睡著了一般。 火紅的嫁衣襯著肌膚如雪妆档。 梳的紋絲不亂的頭發(fā)上僻爽,一...
    開(kāi)封第一講書(shū)人閱讀 49,185評(píng)論 1 284
  • 那天,我揣著相機(jī)與錄音贾惦,去河邊找鬼胸梆。 笑死敦捧,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的碰镜。 我是一名探鬼主播兢卵,決...
    沈念sama閱讀 38,451評(píng)論 3 401
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼绪颖!你這毒婦竟也來(lái)了秽荤?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 37,112評(píng)論 0 261
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤菠发,失蹤者是張志新(化名)和其女友劉穎王滤,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體滓鸠,經(jīng)...
    沈念sama閱讀 43,609評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡雁乡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,083評(píng)論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了糜俗。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片踱稍。...
    茶點(diǎn)故事閱讀 38,163評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖悠抹,靈堂內(nèi)的尸體忽然破棺而出珠月,到底是詐尸還是另有隱情,我是刑警寧澤楔敌,帶...
    沈念sama閱讀 33,803評(píng)論 4 323
  • 正文 年R本政府宣布啤挎,位于F島的核電站,受9級(jí)特大地震影響卵凑,放射性物質(zhì)發(fā)生泄漏庆聘。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,357評(píng)論 3 307
  • 文/蒙蒙 一勺卢、第九天 我趴在偏房一處隱蔽的房頂上張望伙判。 院中可真熱鬧,春花似錦黑忱、人聲如沸宴抚。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,357評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)菇曲。三九已至,卻和暖如春抚吠,著一層夾襖步出監(jiān)牢的瞬間羊娃,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,590評(píng)論 1 261
  • 我被黑心中介騙來(lái)泰國(guó)打工埃跷, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留蕊玷,地道東北人邮利。 一個(gè)月前我還...
    沈念sama閱讀 45,636評(píng)論 2 355
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像垃帅,于是被迫代替她去往敵國(guó)和親延届。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,925評(píng)論 2 344

推薦閱讀更多精彩內(nèi)容