四、selenium常用功能

1醋寝、其常用的功能包括:設置瀏覽器的參數(shù)搞挣、瀏覽器多窗口切換、設置等待時間音羞、文件的上傳與下載囱桨、cookies處理以及frame框架的操作。

常用的設置:瀏覽器的可視化(加快代碼的請求速度)和瀏覽求的請求頭等信息(防反爬蟲機制)

from selenium import webdriver

from selenium.webdriver.chrome.options import Options

url = 'https://movie.douban.com/'

chrome_options = Options()

chrome_options.add_argument('--headless') #--headless表示不顯示瀏覽器的操作過程

chrome_options.add_argument('lang=zh_CN.UTF-8') #設置參數(shù)防反爬蟲

UserAgent = 'Mozilla/5.0 (Windows NT 10.0; WOW64; rv:68.0) Gecko/20100101 Firefox/68.0'

chrome_options.add_argument('UserAgent=' + UserAgent)

driver = webdriver.Chrome(chrome_options=chrome_options) #啟動設置的參數(shù)

driver.maximize_window() #瀏覽器窗口最大化

driver.minimize_window() #瀏覽求窗口最小化

driver.get(url)

print(driver.title)? #獲取網(wǎng)頁標題

print(driver.page_source)? #源碼

2嗅绰、切換窗口來獲取不同信息

from selenium import webdriver

import time

url = 'https://movie.douban.com/'

driver = webdriver.Chrome()

driver.get(url)

js = 'window.open("https://www.sina.com");'

driver.execute_script(js)

current_window = driver.current_window_handle #獲取當前窗口信息

handles = driver.window_handles? ? #獲取打開的窗口信息

time.sleep(2)

driver.switch_to.window(handles[0])? #切換到第一個窗口

time.sleep(2)

driver.switch_to.window(handles[1])? #切換到第二個窗口

3舍肠、設置等待時間讓網(wǎng)頁響應盡量達到同步,保證程序的少出bug窘面。以上用time模塊實現(xiàn)翠语,接下來使用selenium庫提供的方法實現(xiàn),其比time模塊的等待更智能财边。

from selenium import webdriver

from selenium.webdriver.support.wait import WebDriverWait

from selenium.webdriver.common.by import By

from selenium.webdriver.support import expected_conditions

url = 'https://www.baidu.com'

driver = webdriver.Chrome()

driver.get(url)

driver.implicitly_wait(10)? #隱性等待時間肌括,最多10秒

driver.find_element_by_id('kw').send_keys('哈哈')

condition = expected_conditions.visibility_of_element_located((By.ID,'kw'))

#.visibility_of_element_located檢查頁面元素是否可見

#(By.ID,'kw')kw為搜索框?qū)傩裕珺y.ID是使用find_element_by_id定位

WebDriverWait(driver=driver, timeout=10, poll_frequency=0.5).until(condition)??#顯性等待時間

隱性等待時間:在設定時間內(nèi)網(wǎng)頁加載完成即刻自動執(zhí)行下一步 酣难,否則拋出異常谍夭。

顯性等待時間:程序隔一段時間檢測網(wǎng)頁是否加載完成,完成繼續(xù)執(zhí)行憨募,否則繼續(xù)等待直到超時慧库。

4、cookie的添加馋嗜、讀取齐板、刪除操作

from selenium import webdriver

import time

driver = webdriver.Chrome()

driver.get("http://www.exame.com")

time.sleep(2)

driver.add_cookie({'name':'xixi','value':'123456'}) #添加cookie

all_cookie = driver.get_cookies()? #獲取所有cookie

#print(all_cookie)

cookie1 = driver.get_cookie('xixi')#獲取一個cookie

print(cookie1)

driver.delete_cookie('xixi')

#surplus_cookies = driver.get_cookies()

#print(surplus_cookies)

最后編輯于
?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市葛菇,隨后出現(xiàn)的幾起案子甘磨,更是在濱河造成了極大的恐慌,老刑警劉巖眯停,帶你破解...
    沈念sama閱讀 212,599評論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件济舆,死亡現(xiàn)場離奇詭異,居然都是意外死亡莺债,警方通過查閱死者的電腦和手機滋觉,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,629評論 3 385
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來齐邦,“玉大人椎侠,你說我怎么就攤上這事〈肽矗” “怎么了?”我有些...
    開封第一講書人閱讀 158,084評論 0 348
  • 文/不壞的土叔 我叫張陵浅悉,是天一觀的道長。 經(jīng)常有香客問我汹碱,道長荞估,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 56,708評論 1 284
  • 正文 為了忘掉前任,我火速辦了婚禮枷莉,結果婚禮上笤妙,老公的妹妹穿的比我還像新娘。我一直安慰自己蹲盘,他們只是感情好,可當我...
    茶點故事閱讀 65,813評論 6 386
  • 文/花漫 我一把揭開白布铃诬。 她就那樣靜靜地躺著趣席,像睡著了一般醇蝴。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上悠栓,一...
    開封第一講書人閱讀 50,021評論 1 291
  • 那天笙瑟,我揣著相機與錄音癞志,去河邊找鬼。 笑死,一個胖子當著我的面吹牛茅信,可吹牛的內(nèi)容都是我干的墓臭。 我是一名探鬼主播,決...
    沈念sama閱讀 39,120評論 3 410
  • 文/蒼蘭香墨 我猛地睜開眼酌摇,長吁一口氣:“原來是場噩夢啊……” “哼窑多!你這毒婦竟也來了?” 一聲冷哼從身側響起埂息,我...
    開封第一講書人閱讀 37,866評論 0 268
  • 序言:老撾萬榮一對情侶失蹤千康,失蹤者是張志新(化名)和其女友劉穎拾弃,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體豪椿,經(jīng)...
    沈念sama閱讀 44,308評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡砂碉,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,633評論 2 327
  • 正文 我和宋清朗相戀三年增蹭,在試婚紗的時候發(fā)現(xiàn)自己被綠了滋迈。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,768評論 1 341
  • 序言:一個原本活蹦亂跳的男人離奇死亡饼灿,死狀恐怖碍彭,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情庇忌,我是刑警寧澤,帶...
    沈念sama閱讀 34,461評論 4 333
  • 正文 年R本政府宣布疏橄,位于F島的核電站捎迫,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏窄绒。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 40,094評論 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望恼布。 院中可真熱鬧搁宾,春花似錦、人聲如沸爽待。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,850評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至等龙,卻和暖如春蛛砰,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背荠诬。 一陣腳步聲響...
    開封第一講書人閱讀 32,082評論 1 267
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留方椎,地道東北人凌外。 一個月前我還...
    沈念sama閱讀 46,571評論 2 362
  • 正文 我出身青樓康辑,卻偏偏與公主長得像,于是被迫代替她去往敵國和親胸墙。 傳聞我的和親對象是個殘疾皇子按咒,可洞房花燭夜當晚...
    茶點故事閱讀 43,666評論 2 350

推薦閱讀更多精彩內(nèi)容