本程序基于python3 selenium框架開發(fā)的一套收款賬單監(jiān)控
支持Linux而柑、MAC掏湾、Windows,需要對selenium webdriver有一定了解
運(yùn)行需要google瀏覽器和chromedriver插件驅(qū)動(dòng),而且需要對應(yīng)谷歌瀏覽器版本號贷岸,不然會報(bào)錯(cuò),本源碼的webdriver目錄有對應(yīng)系統(tǒng)的插件磷雇,但是有兩年沒用了偿警,我記得之前應(yīng)該是85.04版本
當(dāng)然也可以自己到 http://npm.taobao.org/mirrors/chromedriver 下載最新版本對應(yīng)最新的google瀏覽器
這是我之前做的一個(gè)項(xiàng)目,跟后端接口結(jié)合而開發(fā)的一套監(jiān)控某寶網(wǎng)頁支付賬單的爬蟲程序,支持多線程多任務(wù)監(jiān)控
里面集成了唯笙。
1.接口接收數(shù)據(jù)
2.掃碼登錄螟蒸,二維碼回傳到前端APP
3.自動(dòng)刷新網(wǎng)頁
4.自動(dòng)下線
5.自動(dòng)上線
6.模擬人工點(diǎn)擊
7.代理IP綁定等技術(shù)要領(lǐng)
使用前請先閱讀 api.py 文件的方法盒使,先跟后端接口結(jié)合,后端分發(fā)任務(wù)給main.py七嫌,然后python會啟動(dòng)一個(gè)監(jiān)聽瀏覽器的窗口和把獲取的數(shù)據(jù)傳輸給后端少办,可分發(fā)多個(gè)任務(wù),最終能開多少個(gè)取決于系統(tǒng)的配置抄瑟。
一般4核心8G的配置可以開40個(gè)窗口凡泣,多了會卡。
下面簡單介紹一下代碼的使用方式和環(huán)境
詳細(xì)的使用還是靠自己閱讀代碼集成接口來運(yùn)行
1.首先安裝google瀏覽器 https://www.google.cn/chrome/
2.安裝python3 https://www.python.org 或可使用PyCharm Community集成IDE開發(fā)工具
3.下載源碼 https://github.com/fsg-herbie/web-pc-monitor
4.安裝依賴包 multiprocessing皮假、selenium
5.修改api.py接口文件把里面的所有接口方法替換和實(shí)現(xiàn)你自己后端的業(yè)務(wù)邏輯
6.閱讀 executes.py 文件的主業(yè)務(wù)邏輯鞋拟,并修改接口返回?cái)?shù)據(jù)
7.根據(jù)系統(tǒng)平臺下載chromedriver到webdriver目錄
8.運(yùn)行main.py
本程序只適用于有一定python基礎(chǔ)的人學(xué)習(xí)使用,小白教程暫時(shí)還沒時(shí)間編寫惹资。
完整程序請關(guān)注我的github
https://github.com/fsg-herbie/web-pc-monitor
免責(zé)聲明
本程序只供爬蟲學(xué)習(xí)研究使用贺纲,嚴(yán)禁用于非法用途,任何不正當(dāng)行為造成的后果與本文無關(guān)褪测。