#　selenium:是一個web的自動化測試工具,可以直接運行在瀏覽器上,
# 但是并不自帶瀏覽器,需要有瀏覽器驅(qū)動,selenium可以根據(jù)我們的    代碼指令
# 讓瀏覽器自動加載頁面,這時得到的頁面源碼是經(jīng)過瀏覽器渲染之    后的,
# 然后我們就可以在頁面源碼中尋找節(jié)點(動態(tài)加載的網(wǎng)頁,模擬登錄)
#pip3 install selenium
from selenium import webdriver
import time
#加載頁面
# driver = webdriver.Firefox(
#     executable_path='/home/ljh/桌面/driver/geckodriver'
# )
# #使用get方法打開頁面
# driver.get('https://www.baidu.com/')
#加載頁面(PhantomJS,無頭瀏覽器)
#warnings.warn('Selenium support for PhantomJS
# has been deprecated, please use headless '
#目前推薦使用谷歌的屋頭瀏覽器
# driver = webdriver.PhantomJS(
#     executable_path='/home/ljh/桌面/driver/phantomjs'
# )
# driver.get('https://www.baidu.com/')
#
# driver.save_screenshot('baidu.png')
# 加載頁面(使用谷歌的瀏覽器驅(qū)動)
#設(shè)置為無頭瀏覽器
# opt = webdriver.ChromeOptions()
# opt.set_headless()
# driver = webdriver.Chrome(
#     options=opt,
#     executable_path='/home/ljh/桌面/driver/chromedriver'
# )
driver = webdriver.Chrome(
    executable_path='/home/ljh/桌面/driver/chromedriver'
)
#設(shè)置頁面的加載時間
driver.set_page_load_timeout(10)
#導(dǎo)入容錯的模塊
from selenium.common import exceptions
try:
    driver.get('https://www.baidu.com/')
except exceptions.TimeoutException as err:
    print(err,'請求超時')
#可以獲得信息
# 獲取頁面源碼(經(jīng)過瀏覽器渲染之后的)
page_html = driver.page_source
with open('baidu.html','w') as file:
    file.write(page_html)
#獲取cookies信息
"""
[
{'domain': 
'.baidu.com', 
'httpOnly': False, 
'path': '/', 
'secure': False, 
'value': '1431_21080_28206_28131_27750_28139_27509', 
'name': 'H_PS_PSSID'}, 
{'domain': '.baidu.com', 'httpOnly': False, 'path': '/', 'expiry':     3693275324.184597, 'secure': False, 'value':     '8C1C72599F01E693A201BA4B33C6DFE0', 'name': 'BIDUPSID'}, {'domain': '.baidu.com', 'httpOnly': False, 'path': '/', 'secure': False, 'value': '0', 'name': 'delPer'}, {'domain': '.baidu.com', 'httpOnly': False, 'path': '/', 'expiry': 3693275324.184649, 'secure': False, 'value': '1545791676', 'name': 'PSTM'}, {'domain': 'www.baidu.com', 'httpOnly': False, 'path': '/', 'expiry': 1546655678, 'secure': False, 'value': '123353', 'name': 'BD_UPN'}, {'domain': 'www.baidu.com', 'httpOnly': False, 'path': '/', 'secure': False, 'value': '0', 'name': 'BD_HOME'}, {'domain': '.baidu.com', 'httpOnly': False, 'path': '/', 'expiry': 3693275324.18448, 'secure': False, 'value': '8C1C72599F01E693A201BA4B33C6DFE0:FG=1', 'name': 'BAIDUID'}]
"""
  #獲取所有的cookies值
cookies = driver.get_cookies()
#獲取某一個cookies值
driver.get_cookie('BD_UPN')
cookies_dict = {cookie['name']:cookie['value'] for cookie in cookies}
print(cookies)
print(cookies_dict)
#刪除cookie
# driver.delete_cookie('BD_UPN')
# #刪除所有的cookies
# driver.delete_all_cookies()
# #添加cookies
# #cookie_dict(字典,存放的cookies信息)
# driver.add_cookie()
#獲取當(dāng)前加載的頁面url地址
cur_url = driver.current_url
print(cur_url)
#獲取當(dāng)前使用的瀏覽器的名稱
name = driver.name
print(name)
#定位和操作節(jié)點(標(biāo)簽)
"""
driver.find_element_by_xpath():根據(jù)xpath路徑定位標(biāo)簽(找單個)
driver.find_elements_by_xpath()根據(jù)xpath路徑定位標(biāo)簽(找所有)
driver.find_element_by_css_selector():根據(jù)css選擇器定位標(biāo)簽
driver.find_element_by_link_text():根據(jù)標(biāo)簽文本內(nèi)容(完整)定位
driver.find_element_by_partial_link_text():根據(jù)標(biāo)簽文本內(nèi)容(局部)定位
driver.find_element_by_id():根據(jù)id屬性尋找節(jié)點
driver.find_element_by_class_name():根據(jù)class屬性尋找節(jié)點
"""
#找到節(jié)點,并輸入內(nèi)容
driver.find_element_by_id('kw').send_keys('隔壁老王')
#清空輸入框
driver.find_element_by_id('kw').clear()
time.sleep(2)
driver.find_element_by_id('kw').send_keys('隔壁老趙')
#找到按鈕,模擬點擊
driver.find_element_by_id('su').click()
#保存屏幕的截圖
driver.save_screenshot('baiduyixia.png')
# #前進(jìn)后退
# time.sleep(2)
# #后退
# driver.back()
#
# time.sleep(2)
# #前進(jìn)
# driver.forward()
#設(shè)置頁面等待
#因為selenium加載頁面和瀏覽器一樣都需要時間,
#特別是動態(tài)頁面,如果在頁面加載出來之前,尋找節(jié)點會報異常
#所以這是需要設(shè)置頁面等待
time.sleep(3)
#設(shè)置隱士等待
#是指定特定的時間,如果沒有出現(xiàn)我們尋找的節(jié)點,
#隱士等待將會等待一段時間繼續(xù)查找
driver.implicitly_wait(10)
#設(shè)置顯示等待
#指定一個最長等待時間,直到某一條件成立繼續(xù)執(zhí)行,
#如果在指定時間內(nèi)沒有滿足條件（沒有找到節(jié)點）,
#這時就會拋出異常
#導(dǎo)入By,根據(jù)某個條件查找節(jié)點
from selenium.webdriver.common.by import By
#WebDriverWait設(shè)置等待時間
from selenium.webdriver.support.ui import WebDriverWait
#expected_conditions設(shè)置等待條件
from selenium.webdriver.support import expected_conditions
#driver, timeout
a_element = WebDriverWait(driver,10).until(
    expected_conditions.presence_of_element_located((By.CLASS_NAME,'n'))
)
print(a_element.text)
#獲取節(jié)點的文本和屬性
#.get_attribute('href'):獲取標(biāo)簽的屬性值
#Message: no such element: Unable to locate element 沒有找到對應(yīng)的節(jié)點
try:
href =   driver.find_element_by_xpath('//h3[@class="t"]/a').get_attribute('href')
#.text獲取標(biāo)簽的文本
title = driver.find_element_by_xpath('//h3[@class="t"]/a').text
print(href,title)
except exceptions.NoSuchElementException as err:
      print('沒有找到節(jié)點')
#隱藏所有圖片execute_script執(zhí)行js語句
imgs = driver.find_elements_by_xpath('//img')
for img in imgs:
    driver.execute_script('$(arguments[0]).fadeOut()', img)
#### 向下滾動到頁面底部
driver.execute_script('window.scrollTo(0,document.body.scrollHeight)'        )
#關(guān)閉操作
#關(guān)閉當(dāng)前所在的窗口
# driver.close()
# #退出瀏覽器
# driver.quit()