需求
- 爬取58同城所有手機(jī)號(hào)碼鏈接,存儲(chǔ)到mongodb
- 讀取mongodb手機(jī)號(hào)碼鏈接掌逛,爬取詳細(xì)信息陨仅,存儲(chǔ)到mongodb
結(jié)果:
代碼:
難點(diǎn):
去掉text中的換行符,tab以及不需要的空格
"price":price.replace("\n","").replace("\t","").replace(" ","")mobilephone_url.find()的類型只是一個(gè)指針類型寓调,無(wú)法直接操作
必須用for info in mobilephone_url.find(): url = info["url"]的方法才能逐個(gè)拿到url的數(shù)值
3