最近學(xué)習(xí)Go語言,看了慕課網(wǎng)Google工程師深度講解go語言這門課滓鸠,現(xiàn)在把課程中的爬蟲項(xiàng)目整理出來雁乡,同時(shí)也作為自己學(xué)習(xí)的一個(gè)總結(jié)。本人菜鳥一枚糜俗,如有任何問題踱稍,歡迎大家指正墩弯。
一、環(huán)境準(zhǔn)備
1寞射、go語言安裝
Go安裝包下載網(wǎng)址:https://studygolang.com/dl
選擇對(duì)應(yīng)的版本下載即可
Windows用戶推薦使用msi安裝渔工,簡單方便,而且會(huì)自動(dòng)配置好環(huán)境變量
打開Windows中的命令提示符(cmd.exe)執(zhí)行命令:go version
查看go語言版本
2桥温、環(huán)境配置
然后我們需要設(shè)置Go語言工作空間gopath目錄(Go語言開發(fā)的項(xiàng)目路徑)
Windows 設(shè)置如下引矩,新建一個(gè)環(huán)境變量名稱叫做GOPATH,值為你的工作目錄侵浸,例如GOPATH=D:\Workspace
以上 %GOPATH% 目錄約定有三個(gè)子目錄:
src 存放源代碼(比如:.go .c .h .s等)
pkg 編譯后生成的文件(比如:.a)
bin 編譯后生成的可執(zhí)行文件
bin和pkg目錄可以不創(chuàng)建旺韭,go命令會(huì)自動(dòng)創(chuàng)建(如 go install),只需要?jiǎng)?chuàng)建src目錄即可掏觉。
3区端、Goland安裝與破解
(1)安裝
Goland官網(wǎng):https://www.jetbrains.com/go/
選擇對(duì)應(yīng)版本下載安裝即可
(2)破解
關(guān)于Goland的破解方式網(wǎng)上已經(jīng)又很多文章,可以參考這篇:https://blog.csdn.net/dodod2012/article/details/82589458
二澳腹、項(xiàng)目介紹
本次爬蟲爬取的是珍愛網(wǎng)的用戶信息數(shù)據(jù)织盼,爬取步驟為:
爬蟲算法如下
在下篇博客中,會(huì)實(shí)現(xiàn)一個(gè)單機(jī)版的爬蟲項(xiàng)目酱塔,敬請(qǐng)關(guān)注沥邻。