Python3 selenium在CentOS服務(wù)端運行

原文?https://www.cyberlight.xyz/passage/python3-selenium-linux

最近嘗試在服務(wù)器端運行selenium稻艰,做下此筆記拒逮,其間參考了大量相關(guān)教程浸踩,感謝每一位共享學習記錄的網(wǎng)友虑灰!

由于windows10使用的Chrome濒旦,我繼續(xù)嘗試在CentOS運行娜庇,終于成功!以下是學習記錄:

環(huán)境:CentOS8, Python 3.6.8

一.CentOS上安裝Chrome

請確保身份為root爷恳,進入CentOS終端有缆,然后依次輸入

wget https://dl.google.com/linux/direct/google-chrome-stable_current_x86_64.rpm

yum install -y google-chrome-stable_current_x86_64.rpm

查看Chrome版本

/opt/google/chrome/chrome -version

PS: chrome卸載方法

yum autoremove -y google-chrome

之后,需要解決不能在root下運行chrome的錯誤 温亲。Chrome安裝的根目錄默認在 /opt/google/chrome/ 棚壁。進入CentOS終端,輸入

vi /opt/google/chrome/google-chrome

移動光標到最下面栈虚,按下鍵盤的”i”袖外,將 exec -a “$0” “$HERE/chrome” “$@” 后面加上 –user-data-dir –no-sandbox 。整條命令修改后為

exec -a “$0” “$HERE/chrome” “$@” –user-data-dir –no-sandbox

如圖节芥,將下圖一改為下圖二

接著依次按鍵盤 “esc” + “:” + “wq” 保存并退出

二.安裝Chrome驅(qū)動

一定要根據(jù)Chrome版本號安裝驅(qū)動在刺,由于我的Chrome版本為80.0.3987.132(版本一定要下對逆害,否則Python運行會報錯)头镊。經(jīng)測試,我應(yīng)該下載官網(wǎng)的80.0.3987.16魄幕,而不是80.0.3987.106

電腦進入Chrome驅(qū)動官網(wǎng)https://chromedriver.chromium.org/downloads

鼠標右鍵點擊Linux版本相艇,復(fù)制鏈接。(如纯陨,我的鏈接為https://chromedriver.storage.googleapis.com/80.0.3987.16/chromedriver_linux64.zip

進入Centos坛芽,切換至系統(tǒng)根目錄(注意留储,不是root根目錄)。輸入以下命令切換至Chrome安裝目錄

cd /opt/google/chrome

wget + 上面復(fù)制的鏈接( 如咙轩,我的鏈接為https://chromedriver.storage.googleapis.com/80.0.3987.16/chromedriver_linux64.zip

wget https://chromedriver.storage.googleapis.com/80.0.3987.16/chromedriver_linux64.zip

解壓下載的zip

unzip chromedriver_linux64.zip

此時驅(qū)動已安裝完畢获讳。

三.Python測試

在Linux下創(chuàng)建Python文件






from selenium import webdriver

from selenium.webdriver.chrome.options import Options

chrome_options = Options()

chrome_options.add_argument('--no-sandbox') #讓Chrome在root權(quán)限運行

chrome_options.add_argument('--disable-dev-shm-usage') #不打開圖形界面

chrome_options.add_argument('--headless') #瀏覽器不提供可視化頁面

chrome_options.add_argument('blink-settings=imagesEnabled=false') #不加載圖片, 提升速度

chrome_options.add_argument('--disable-gpu') #谷歌文檔提到需要加上這個屬性來規(guī)避bug

driver = webdriver.Chrome(chrome_options=chrome_options, executable_path='/opt/google/chrome/chromedriver') #Chrome驅(qū)動的位置,此學習記錄中安裝到了Chrome程序根目錄活喊,該路徑為絕對路徑

driver.get('https://www.baidu.com')

content = driver.page_source.encode('utf-8')

print(content)




如返回百度的html源碼丐膝,說明程序運行正常,能盡情在Linux使用selenium爬蟲了

PS: 運行selenium如遇錯誤 error: DevToolsActivePort file doesn’t exist 钾菊,很可能是安裝的Chrome驅(qū)動版本不對帅矗!

評論區(qū)歡迎分享你的學習記錄和解決方法哦

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市煞烫,隨后出現(xiàn)的幾起案子浑此,更是在濱河造成了極大的恐慌,老刑警劉巖滞详,帶你破解...
    沈念sama閱讀 211,561評論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件凛俱,死亡現(xiàn)場離奇詭異,居然都是意外死亡料饥,警方通過查閱死者的電腦和手機最冰,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,218評論 3 385
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來稀火,“玉大人暖哨,你說我怎么就攤上這事』四” “怎么了篇裁?”我有些...
    開封第一講書人閱讀 157,162評論 0 348
  • 文/不壞的土叔 我叫張陵,是天一觀的道長赡若。 經(jīng)常有香客問我达布,道長,這世上最難降的妖魔是什么逾冬? 我笑而不...
    開封第一講書人閱讀 56,470評論 1 283
  • 正文 為了忘掉前任黍聂,我火速辦了婚禮,結(jié)果婚禮上身腻,老公的妹妹穿的比我還像新娘产还。我一直安慰自己,他們只是感情好嘀趟,可當我...
    茶點故事閱讀 65,550評論 6 385
  • 文/花漫 我一把揭開白布脐区。 她就那樣靜靜地躺著,像睡著了一般她按。 火紅的嫁衣襯著肌膚如雪牛隅。 梳的紋絲不亂的頭發(fā)上炕柔,一...
    開封第一講書人閱讀 49,806評論 1 290
  • 那天,我揣著相機與錄音媒佣,去河邊找鬼匕累。 笑死,一個胖子當著我的面吹牛默伍,可吹牛的內(nèi)容都是我干的哩罪。 我是一名探鬼主播,決...
    沈念sama閱讀 38,951評論 3 407
  • 文/蒼蘭香墨 我猛地睜開眼巡验,長吁一口氣:“原來是場噩夢啊……” “哼际插!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起显设,我...
    開封第一講書人閱讀 37,712評論 0 266
  • 序言:老撾萬榮一對情侶失蹤框弛,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后捕捂,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體瑟枫,經(jīng)...
    沈念sama閱讀 44,166評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,510評論 2 327
  • 正文 我和宋清朗相戀三年指攒,在試婚紗的時候發(fā)現(xiàn)自己被綠了慷妙。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,643評論 1 340
  • 序言:一個原本活蹦亂跳的男人離奇死亡允悦,死狀恐怖膝擂,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情隙弛,我是刑警寧澤架馋,帶...
    沈念sama閱讀 34,306評論 4 330
  • 正文 年R本政府宣布,位于F島的核電站全闷,受9級特大地震影響叉寂,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜总珠,卻給世界環(huán)境...
    茶點故事閱讀 39,930評論 3 313
  • 文/蒙蒙 一屏鳍、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧局服,春花似錦钓瞭、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,745評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至搏讶,卻和暖如春佳鳖,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背媒惕。 一陣腳步聲響...
    開封第一講書人閱讀 31,983評論 1 266
  • 我被黑心中介騙來泰國打工系吩, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人妒蔚。 一個月前我還...
    沈念sama閱讀 46,351評論 2 360
  • 正文 我出身青樓穿挨,卻偏偏與公主長得像,于是被迫代替她去往敵國和親肴盏。 傳聞我的和親對象是個殘疾皇子科盛,可洞房花燭夜當晚...
    茶點故事閱讀 43,509評論 2 348