四個(gè)模塊
請(qǐng)求模塊
status狀態(tài)芽突,200表示成功請(qǐng)求癣猾。header中包括一些請(qǐng)求及服務(wù)器的狀態(tài)
另外可以將request參數(shù)化(為了添加header參數(shù)):
data參數(shù)當(dāng)網(wǎng)站使用post方法提交數(shù)據(jù)時(shí)使用該參數(shù)焕梅。bytes以字節(jié)流形式提交口叙。
運(yùn)行結(jié)果:
cookies保存(免登陸 )澳腹,使用代理(應(yīng)對(duì)反爬蟲)
異常的處理:
URL解析:urlparse
urlunparse:反過程晚唇,將各段拼接起來
urlencode方法將字典結(jié)構(gòu)轉(zhuǎn)化為get請(qǐng)求字符串的結(jié)構(gòu)