wget 下載整個網(wǎng)站凄敢,或者特定目錄 - DP. - 博客園
windows wget下載地址
wget抓取整站做本地鏡像 - kaye0110的博客
? ? ? ?- 博客頻道 - CSDN.NET
wget -nH -K -E -d -np -L -r http://flatfull.com/themes/scale/
-np 遞歸下載時不搜索上層目錄
-nH, –no-host-directories 不創(chuàng)建主機目錄
-d, –debug 打印調(diào)試輸出
-L 遞歸時不進入其它主機
-E //將所有text/html文檔以.html擴展名保存
-r 遞歸抓取
-k 抓取之后修正鏈接,適合本地瀏覽
Could not find function xmlCheckVersion in library libxml2. Is libxml2 installed?
解決
easy_install pip
easy_install lxml
pip install module_name
py2exe安裝
下載地址(下載后py2exe存儲在lib目錄)
C:\Anaconda2\Lib\site-packages 或者 C:\Users\Administrator\.windows-build-tools\python27\Lib\site-packages
python沒有注冊問題(僅供參考具體安裝的PYTHON湿痢,我的windos-build-tools又裝了一個PYTHON所以注冊的時候不是用anaconda的路徑涝缝,手動搬遷第三方庫)
安裝第三方庫出現(xiàn) Python version 2.7 required
python2 print>>file,"string" python3 print(string,file=file)
python windows使用工具
科學計算包 Anaconda Python(包含python基礎依賴包,解決windows下依賴包下載問題俊卤,無需安裝python)
myactivity.google.com/myactivity google爬蟲用戶所有活動
python字符串格式尿性
python元組格式化成字符串的問題嫩挤? - SegmentFault
python 工具包
www.runoob.com/python/python-reg-expressions.html re模塊提供正則表達式
www.runoob.com/python/ python 基礎doc
快速上手 request
python MySQLdb 安裝
windows直接下載32位/64位exe
Mac/Linux下載MySQL-python修改site.cfg的mysql-config路徑;setup_posix.py的mysql_config.path
conda install mysql-python
socks模塊
pip install socksipy-branch
[WEB HACKING] Weevely? ???? Stealth Webshell ???(weevely ?? ? ??)h
gevent安裝
gevent 1.1.2 : Python Package Index
mac/Linux安裝 sudo pip install xxx.whl(看好自己的python版本和系統(tǒng)版本)
windows安裝 exe
Scrapy爬蟲反ban的技巧 // Neurohazard
PIL模塊安裝
pip install Pillow
appium
pip install Appium-Python-Client
chardet
pip install chardet
cv2
下載opencv(用于圖像處理)
推薦使用homebrew安裝?
brew install opencv
參考:OpenCV中文網(wǎng)站-論壇 - Powered by Discuz!
scrapy使用
Scrapy爬蟲入門(三)-創(chuàng)建項目 - 為程序員服務
work list:
dht metadata
博主: