鹽巴有點咸

表單登錄 代碼如下： 模擬知乎表單登錄硫狞，還需要手動輸入驗證碼眷唉。用戶登錄的頁面分為手機和email地址是不同的九串，這里演示的是email的登錄，手機號登錄post的url不同磷账，其...

鹽巴有點咸

最近都沒怎么寫爬蟲峭沦，主要是不知道如何能夠把爬到的數(shù)據(jù)利用起來，今天就貼一個簡單的爬蟲逃糟。 爬取的數(shù)據(jù)不多只有幾千條吼鱼，而且有重復(fù)的部分，缺點多多 绰咽，繼續(xù)學(xué)習(xí)菇肃。

鹽巴有點咸

今天的爬蟲是爬取某網(wǎng)站的所有鏈接，涉及到了MongoDB及其簡單的操作取募，和多線程琐谤，雖然爬取的數(shù)據(jù)簡單，但是能爬取這么多的數(shù)據(jù)玩敏，感覺很激動斗忌。代碼如下：channel_extra...

鹽巴有點咸

今天的爬蟲比較簡單，就不做詳細(xì)介紹旺聚。爬取的是某網(wǎng)站的租房信息织阳。 自己電腦網(wǎng)速太慢一直爬不完，最后使用AWS主機才爬完300多條記錄砰粹。

鹽巴有點咸

今天的爬蟲是爬取某網(wǎng)站的商品信息唧躲，難點在于網(wǎng)頁瀏覽量的爬取，不僅需要偽造Referer碱璃，而且瀏覽量的獲取不能直接抓取弄痹，否則會為0。此項是由js控制的嵌器，如果使用chrome瀏覽...

NILSTARK

python爬蟲連載分享【1】 目標(biāo)：爬取58同城商品的標(biāo)題肛真，地區(qū)，分類爽航，時間毁欣，瀏覽量。 工具：requests,beautifulsoup 涉及問題：瀏覽量的爬取 導(dǎo)入必要...

鹽巴有點咸

今天寫的爬蟲是為了抓去拉鉤網(wǎng)上面的招聘信息岳掐，代碼如下： 思路：在fire-bug下面發(fā)現(xiàn)搜索職業(yè)后會從瀏覽器上傳了幾個參數(shù)到拉勾的服務(wù)器一個是 first ＝true， 一個...

鹽巴有點咸

題目來源： github-Yixiaohan 1.使用python生成200個優(yōu)惠碼 2.任一個英文的純文本文件饭耳，統(tǒng)計其中的單詞出現(xiàn)的個數(shù)串述。 結(jié)果： Counter({'th...

鹽巴有點咸

最近開始學(xué)習(xí)python，這里就作為學(xué)習(xí)記錄寞肖，記錄自己的python之路纲酗。本條爬蟲爬取的是糗事百科的24小時熱門里面的衰腌，作者，內(nèi)容觅赊，以及點贊數(shù)目右蕊。使用的是python3，以及...