四種常見的POST提交方式的區(qū)別

??前言:最近在寫一個網站的爬蟲的時候模擬了一個請求卻老是得到httpcode 400這個響應箱吕,大家也知道一般這個響應主要是因為客戶端也就是發(fā)送方的接口請求格式有問題跨跨,一開始我直接使用Postman去模擬請求间学,是可以得到數據的淹办,然后我又使用python腳本去模擬請求,卻始終得不到械哟,后來結合之前開發(fā)服務端的經驗疏之,發(fā)現犯了一個很初級的錯誤,沒有注意到content-type的提交POST的方式暇咆,難怪一直出錯锋爪,下面我們來還原一下場景,以及擴展分析一下四種常見的POST提交方式的區(qū)別爸业。

演示:

??我們需要爬的網站模擬的請求如下:


content-type
form data

??因為寫慣了content-typeapplication/json的格式了几缭,所以習以為常的把form-data寫成了Python中的dict格式,結果一直報400的錯誤沃呢,錯誤代碼大致如下:

import requests
headers = {
  "content-type": "application/x-www-form-urlencoded;charset=UTF-8"
}
data = {
  "f.req": xxx,
  "at": xxx
}
requests.post(url=url,headers=headers,data=data)

??之后結合之前做服務端的時候經常被這個content-type搞懵逼的經歷年栓,就看出請求方式的錯誤,于是把代碼改成了這樣薄霜,就完美的收到200的響應了某抓。

import requests
from urllib.parse import urlencode

headers = {
  "content-type": "application/x-www-form-urlencoded;charset=UTF-8"
}
data = {
  "f.req": xxx,
  "at": xxx
}
data = urlencode(data)
requests.post(url=url,headers=headers,data=data)

擴展:

  • application/x-www-form-urlencoded
  • multipart/form-data
  • application/json
  • text/xml
    以上是四種常見的POST提交數據的方式,我們知道惰瓜,HTTP 協(xié)議是以 ASCII 碼傳輸(可參考http介紹)否副,建立在 TCP/IP 協(xié)議之上的應用層規(guī)范。規(guī)范把 HTTP 請求分為三個部分:狀態(tài)行崎坊、請求頭备禀、消息主體。類似于下面這樣
<method> <request-URL> <version>
<headers>
<entity-body>

議規(guī)定 POST 提交的數據必須放在消息主體(entity-body)中奈揍,但協(xié)議并沒有規(guī)定數據必須使用什么編碼方式曲尸。實際上,開發(fā)者完全可以自己決定消息主體的格式男翰,只要最后發(fā)送的 HTTP 請求滿足上面的格式就可以另患。

但是,數據發(fā)送出去蛾绎,還要服務端解析成功才有意義昆箕。一般服務端語言如 php、python 等租冠,以及它們的 framework鹏倘,都內置了自動解析常見數據格式的功能。服務端通常是根據請求頭(headers)中的 Content-Type 字段來獲知請求中的消息主體是用何種方式編碼顽爹,再對主體進行解析纤泵。所以說到 POST 提交數據方案,包含了 Content-Type消息主體編碼方式兩部分话原。下面就正式開始介紹它們夕吻。

1.application/x-www-form-urlencoded

??這應該是最常見的 POST提交數據的方式了诲锹。瀏覽器的原生form 表單,如果不設置enctype屬性涉馅,那么最終就會以 application/x-www-form-urlencoded 方式提交數據归园。請求類似于下面這樣(無關的請求頭在本文中都省略掉了):

POST http://www.example.com HTTP/1.1
Content-Type: application/x-www-form-urlencoded;charset=utf-8
title=test&sub%5B%5D=1&sub%5B%5D=2&sub%5B%5D=3

??首先,Content-Type 被指定為application/x-www-form-urlencoded稚矿;其次庸诱,提交的數據按照 key1=val1&key2=val2 的方式進行編碼,key 和 val 都進行了 URL 轉碼晤揣。大部分服務端語言都對這種方式有很好的支持桥爽。很多時候,我們用 Ajax提交數據時昧识,也是使用這種方式钠四。例如 JQueryQWrap 的 Ajax,Content-Type 默認值都是「application/x-www-form-urlencoded;charset=utf-8」跪楞。

2.multipart/form-data

??這又是一個常見的 POST數據提交的方式缀去。我們使用表單上傳文件時,必須讓 formenctyped 等于這個值甸祭。直接來看一個請求示例:

POST http://www.example.com HTTP/1.1
Content-Type:multipart/form-data; boundary=----WebKitFormBoundaryrGKCBY7qhFd3TrwA
------WebKitFormBoundaryrGKCBY7qhFd3TrwA
Content-Disposition: form-data; name="text"
title
------WebKitFormBoundaryrGKCBY7qhFd3TrwA
Content-Disposition: form-data; name="file"; filename="chrome.png"
Content-Type: image/png
PNG ... content of chrome.png ...
------WebKitFormBoundaryrGKCBY7qhFd3TrwA--

??這個例子稍微復雜點缕碎。首先生成了一個 boundary用于分割不同的字段,為了避免與正文內容重復池户,boundary 很長很復雜咏雌。然后 Content-Type里指明了數據是以 mutipart/form-data 來編碼,本次請求的boundary 是什么內容校焦。消息主體里按照字段個數又分為多個結構類似的部分赊抖,每部分都是以–boundary 開始,緊接著內容描述信息斟湃,然后是回車熏迹,最后是字段具體內容(文本或二進制)檐薯。如果傳輸的是文件凝赛,還要包含文件名和文件類型信息。消息主體最后以 –boundary–標示結束坛缕。關于 mutipart/form-data 的詳細定義墓猎,請前往 rfc1867 查看。這種方式一般用來上傳文件赚楚,各大服務端語言對它也有著良好的支持毙沾。上面提到的這兩種POST 數據的方式,都是瀏覽器原生支持的宠页,而且現階段原生 form 表單也只支持這兩種方式左胞。但是隨著越來越多的 Web 站點寇仓,尤其是 WebApp,全部使用 Ajax進行數據交互之后烤宙,我們完全可以定義新的數據提交方式遍烦,給開發(fā)帶來更多便利。

3.application/json

??application/json 這個 Content-Type作為響應頭大家肯定不陌生躺枕。實際上服猪,現在越來越多的人把它作為請求頭,用來告訴服務端消息主體是序列化后的 JSON 字符串拐云。由于 JSON規(guī)范的流行罢猪,除了低版本 IE 之外的各大瀏覽器都原生支持 JSON.stringify,服務端語言也都有處理 JSON 的函數叉瘩,使用JSON不會遇上什么麻煩膳帕。
??JSON格式支持比鍵值對復雜得多的結構化數據,這一點也很有用薇缅。

POST http://www.example.com HTTP/1.1
Content-Type: application/json;charset=utf-8
{"title":"test","sub":[1,2,3]}

??這種方案备闲,可以方便的提交復雜的結構化數據,特別適合RESTful的接口捅暴。各大抓包工具如Chrome 自帶的開發(fā)者工具恬砂、FirebugFiddler蓬痒,都會以樹形結構展示 JSON數據泻骤,非常友好。

4.text/xml

??它是一種使用 HTTP作為傳輸協(xié)議梧奢,XML 作為編碼方式的遠程調用規(guī)范狱掂。典型的XML-RPC請求是這樣的:

POST http://www.example.com HTTP/1.1
Content-Type: text/xml
<?xml version="1.0"?>
<methodCall>
    <methodName>examples.getStateName</methodName>
    <params>
        <param>
            <value><i4>41</i4></value>
        </param>
    </params>
</methodCall>

??XML-RPC 協(xié)議簡單、功能夠用亲轨,各種語言的實現都有趋惨。比如微信的小程序公眾平臺都是使用它來作為基本的傳輸類型,它的使用也很廣泛惦蚊,如 WordPressXML-RPC Api器虾,搜索引擎的 ping 服務等等。JavaScript 中蹦锋,也有現成的庫支持以這種方式進行數據交互兆沙,能很好的支持已有的 XML-RPC服務。不過莉掂,我個人覺得XML 結構還是過于臃腫葛圃,一般場景用 JSON會更靈活方便。

總結:

??以上就是關于四種POST提交數據的方式的不同了,大家可以仔細結合參考資料好好領會库正。

?著作權歸作者所有,轉載或內容合作請聯系作者
  • 序言:七十年代末曲楚,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子褥符,更是在濱河造成了極大的恐慌洞渤,老刑警劉巖,帶你破解...
    沈念sama閱讀 207,113評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件属瓣,死亡現場離奇詭異载迄,居然都是意外死亡,警方通過查閱死者的電腦和手機抡蛙,發(fā)現死者居然都...
    沈念sama閱讀 88,644評論 2 381
  • 文/潘曉璐 我一進店門护昧,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人粗截,你說我怎么就攤上這事惋耙。” “怎么了熊昌?”我有些...
    開封第一講書人閱讀 153,340評論 0 344
  • 文/不壞的土叔 我叫張陵绽榛,是天一觀的道長。 經常有香客問我婿屹,道長灭美,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 55,449評論 1 279
  • 正文 為了忘掉前任昂利,我火速辦了婚禮届腐,結果婚禮上,老公的妹妹穿的比我還像新娘蜂奸。我一直安慰自己犁苏,他們只是感情好,可當我...
    茶點故事閱讀 64,445評論 5 374
  • 文/花漫 我一把揭開白布扩所。 她就那樣靜靜地躺著围详,像睡著了一般。 火紅的嫁衣襯著肌膚如雪祖屏。 梳的紋絲不亂的頭發(fā)上助赞,一...
    開封第一講書人閱讀 49,166評論 1 284
  • 那天,我揣著相機與錄音赐劣,去河邊找鬼嫉拐。 笑死,一個胖子當著我的面吹牛魁兼,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 38,442評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼咐汞,長吁一口氣:“原來是場噩夢啊……” “哼盖呼!你這毒婦竟也來了?” 一聲冷哼從身側響起化撕,我...
    開封第一講書人閱讀 37,105評論 0 261
  • 序言:老撾萬榮一對情侶失蹤几晤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后植阴,有當地人在樹林里發(fā)現了一具尸體蟹瘾,經...
    沈念sama閱讀 43,601評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 36,066評論 2 325
  • 正文 我和宋清朗相戀三年掠手,在試婚紗的時候發(fā)現自己被綠了憾朴。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,161評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡喷鸽,死狀恐怖众雷,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情做祝,我是刑警寧澤砾省,帶...
    沈念sama閱讀 33,792評論 4 323
  • 正文 年R本政府宣布,位于F島的核電站混槐,受9級特大地震影響编兄,放射性物質發(fā)生泄漏。R本人自食惡果不足惜声登,卻給世界環(huán)境...
    茶點故事閱讀 39,351評論 3 307
  • 文/蒙蒙 一翻诉、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧捌刮,春花似錦碰煌、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,352評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至俄认,卻和暖如春个少,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背眯杏。 一陣腳步聲響...
    開封第一講書人閱讀 31,584評論 1 261
  • 我被黑心中介騙來泰國打工夜焦, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人岂贩。 一個月前我還...
    沈念sama閱讀 45,618評論 2 355
  • 正文 我出身青樓茫经,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子卸伞,可洞房花燭夜當晚...
    茶點故事閱讀 42,916評論 2 344

推薦閱讀更多精彩內容