selenium用法詳解

selenium主要是用來做自動化測試，支持多種瀏覽器，爬蟲中主要用來解決JavaScript渲染問題。

模擬瀏覽器進行網(wǎng)頁加載，當requests,urllib無法正常獲取網(wǎng)頁內(nèi)容的時候

一、聲明瀏覽器對象

注意點一，Python文件名或者包名不要命名為selenium，會導(dǎo)致無法導(dǎo)入

from selenium import webdriver

#webdriver可以認為是瀏覽器的驅(qū)動器，要驅(qū)動瀏覽器必須用到webdriver，支持多種瀏覽器，這里以Chrome為例

browser = webdriver.Chrome()

二、訪問頁面并獲取網(wǎng)頁html

from selenium import webdriver

browser = webdriver.Chrome()

browser.get('https://www.taobao.com')

print(browser.page_source)#browser.page_source是獲取網(wǎng)頁的全部html

browser.close()

三、查找元素

單個元素

from selenium import webdriver

browser = webdriver.Chrome()

browser.get('https://www.taobao.com')

input_first = browser.find_element_by_id('q')

input_second = browser.find_element_by_css_selector('#q')

input_third = browser.find_element_by_xpath('//*[@id="q"]')

print(input_first,input_second,input_third)

browser.close()

常用的查找方法

find_element_by_name

find_element_by_xpath

find_element_by_link_text

find_element_by_partial_link_text

find_element_by_tag_name

find_element_by_class_name

find_element_by_css_selector

也可以使用通用的方法

from selenium import webdriver

from selenium.webdriver.common.by import By

browser = webdriver.Chrome()

browser.get('https://www.taobao.com')

input_first = browser.find_element(BY.ID,'q')#第一個參數(shù)傳入名稱，第二個傳入具體的參數(shù)

print(input_first)

browser.close()

多個元素，elements多個s

input_first = browser.find_elements_by_id('q')

四、元素交互操作-搜索框傳入關(guān)鍵詞進行自動搜索

from selenium import webdriver

import time

browser = webdriver.Chrome()

browser.get('https://www.taobao.com')

input = browser.find_element_by_id('q')#找到搜索框

input.send_keys('iPhone')#傳送入關(guān)鍵詞

time.sleep(5)

input.clear()#清空搜索框

input.send_keys('男士內(nèi)褲')

button = browser.find_element_by_class_name('btn-search')#找到搜索按鈕

button.click()

更多操作: http://selenium-python.readthedocs.io/api.html#module-selenium.webdriver.remote.webelement#可以有屬性、截圖等等

五、交互動作，驅(qū)動瀏覽器進行動作，模擬拖拽動作，將動作附加到動作鏈中串行執(zhí)行

from selenium import webdriver

from selenium.webdriver import ActionChains#引入動作鏈

browser = webdriver.Chrome()

url = 'http://www.runoob.com/try/try.php?filename=jqueryui-api-droppable'

browser.get(url)

browser.switch_to.frame('iframeResult')#切換到iframeResult框架

source = browser.find_element_by_css_selector('#draggable')#找到被拖拽對象

target = browser.find_element_by_css_selector('#droppable')#找到目標

actions = ActionChains(browser)#聲明actions對象

actions.drag_and_drop(source, target)

actions.perform()#執(zhí)行動作

更多操作: http://selenium-python.readthedocs.io/api.html#module-selenium.webdriver.common.action_chains

六、執(zhí)行JavaScript

有些動作可能沒有提供api，比如進度條下拉，這時，我們可以通過代碼執(zhí)行JavaScript

from selenium import webdriver

browser = webdriver.Chrome()

browser.get('https://www.zhihu.com/explore')

browser.execute_script('window.scrollTo(0, document.body.scrollHeight)')

browser.execute_script('alert("To Bottom")')

七、獲取元素信息

獲取屬性

from selenium import webdriver

from selenium.webdriver import ActionChains

browser = webdriver.Chrome()

url = 'https://www.zhihu.com/explore'

browser.get(url)

logo = browser.find_element_by_id('zh-top-link-logo')#獲取網(wǎng)站logo

print(logo)

print(logo.get_attribute('class'))

browser.close()

獲取文本值

from selenium import webdriver

browser = webdriver.Chrome()

url = 'https://www.zhihu.com/explore'

browser.get(url)

input = browser.find_element_by_class_name('zu-top-add-question')

print(input.text)#input.text文本值

browser.close()

# 獲取Id，位置，標簽名，大小

from selenium import webdriver

browser = webdriver.Chrome()

url = 'https://www.zhihu.com/explore'

browser.get(url)

input = browser.find_element_by_class_name('zu-top-add-question')

print(input.id)#獲取id

print(input.location)#獲取位置

print(input.tag_name)#獲取標簽名

print(input.size)#獲取大小

browser.close()

八、Frame操作

frame相當于獨立的網(wǎng)頁，如果在父類網(wǎng)frame查找子類的，則必須切換到子類的frame，子類如果查找父類也需要先切換

from selenium import webdriver

from selenium.common.exceptions import NoSuchElementException

browser = webdriver.Chrome()

url = 'http://www.runoob.com/try/try.php?filename=jqueryui-api-droppable'

browser.get(url)

browser.switch_to.frame('iframeResult')

source = browser.find_element_by_css_selector('#draggable')

print(source)

try:

? ? logo = browser.find_element_by_class_name('logo')

except NoSuchElementException:

? ? print('NO LOGO')

browser.switch_to.parent_frame()

logo = browser.find_element_by_class_name('logo')

print(logo)

print(logo.text)

九、等待

隱式等待

當使用了隱式等待執(zhí)行測試的時候，如果 WebDriver沒有在 DOM中找到元素，將繼續(xù)等待，超出設(shè)定時間后則拋出找不到元素的異常,

換句話說，當查找元素或元素并沒有立即出現(xiàn)的時候，隱式等待將等待一段時間再查找 DOM，默認的時間是0

from selenium import webdriver

browser = webdriver.Chrome()

browser.implicitly_wait(10)#等待十秒加載不出來就會拋出異常，10秒內(nèi)加載出來正常返回

browser.get('https://www.zhihu.com/explore')

input = browser.find_element_by_class_name('zu-top-add-question')

print(input)

顯式等待

指定一個等待條件，和一個最長等待時間，程序會判斷在等待時間內(nèi)條件是否滿足，如果滿足則返回，如果不滿足會繼續(xù)等待，超過時間就會拋出異常

from selenium import webdriver

from selenium.webdriver.common.by import By

from selenium.webdriver.support.ui import WebDriverWait

from selenium.webdriver.support import expected_conditions as EC

browser = webdriver.Chrome()

browser.get('https://www.taobao.com/')

wait = WebDriverWait(browser, 10)

input = wait.until(EC.presence_of_element_located((By.ID, 'q')))

button = wait.until(EC.element_to_be_clickable((By.CSS_SELECTOR, '.btn-search')))

print(input, button)

title_is 標題是某內(nèi)容

title_contains 標題包含某內(nèi)容

presence_of_element_located 元素加載出，傳入定位元組，如(By.ID, 'p')

visibility_of_element_located 元素可見，傳入定位元組

visibility_of 可見，傳入元素對象

presence_of_all_elements_located 所有元素加載出

text_to_be_present_in_element 某個元素文本包含某文字

text_to_be_present_in_element_value 某個元素值包含某文字

frame_to_be_available_and_switch_to_it frame加載并切換

invisibility_of_element_located 元素不可見

element_to_be_clickable 元素可點擊

staleness_of 判斷一個元素是否仍在DOM，可判斷頁面是否已經(jīng)刷新

element_to_be_selected 元素可選擇，傳元素對象

element_located_to_be_selected 元素可選擇，傳入定位元組

element_selection_state_to_be 傳入元素對象以及狀態(tài)，相等返回True，否則返回False

element_located_selection_state_to_be 傳入定位元組以及狀態(tài)，相等返回True，否則返回False

alert_is_present 是否出現(xiàn)Alert

詳細內(nèi)容：http://selenium-python.readthedocs.io/api.html#module-selenium.webdriver.support.expected_conditions

十一、前進后退-實現(xiàn)瀏覽器的前進后退以瀏覽不同的網(wǎng)頁

import time

from selenium import webdriver

browser = webdriver.Chrome()

browser.get('https://www.baidu.com/')

browser.get('https://www.taobao.com/')

browser.get('https://www.python.org/')

browser.back()

time.sleep(1)

browser.forward()

browser.close()

十二、Cookies

from selenium import webdriver

browser = webdriver.Chrome()

browser.get('https://www.zhihu.com/explore')

print(browser.get_cookies())

browser.add_cookie({'name': 'name', 'domain': 'www.zhihu.com', 'value': 'germey'})

print(browser.get_cookies())

browser.delete_all_cookies()

print(browser.get_cookies())

選項卡管理 增加瀏覽器窗口

import time

from selenium import webdriver

browser = webdriver.Chrome()

browser.get('https://www.baidu.com')

browser.execute_script('window.open()')

print(browser.window_handles)

browser.switch_to_window(browser.window_handles[1])

browser.get('https://www.taobao.com')

time.sleep(1)

browser.switch_to_window(browser.window_handles[0])

browser.get('http://www.fishc.com')

十三、異常處理

from selenium import webdriver

browser = webdriver.Chrome()

browser.get('https://www.baidu.com')

browser.find_element_by_id('hello')

from selenium import webdriver

from selenium.common.exceptions import TimeoutException, NoSuchElementException

browser = webdriver.Chrome()

try:

? ? browser.get('https://www.baidu.com')

except TimeoutException:

? ? print('Time Out')

try:

? ? browser.find_element_by_id('hello')

except NoSuchElementException:

? ? print('No Element')

finally:

? ? browser.close()

# 詳細文檔：http://selenium-python.readthedocs.io/api.html#module-selenium.common.exceptions

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成，瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點，簡書系信息發(fā)布平臺，僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • selenium用法詳解 selenium主要是用來做自動化測試，支持多種瀏覽器，爬蟲中主要用來解決JavaScr...
    陳_CHEN_陳閱讀 4,028評論 1贊 5
  • # Selenium # # 自動化測試工具，致辭多種瀏覽器 # 爬蟲中主要用來解決JavaScript渲染的問題...
    拾柒丶_8257閱讀 426評論 0贊 0
  • 摘要: 之前用Selenium做UI自動化測試從初學(xué)到熟練碰到過很多問題，這里就不一一細說了，所以把最基本的操作都...
    Vicky_習慣做唯一閱讀 11,645評論 1贊 23
  • 阿良在我剛發(fā)的說說下評論： 微信頭像換得那么快，你一定沒對象吧！ 記得你戀愛那會，頭像幾個月都沒換過，和他分開之后...
    李翊軒言閱讀 1,965評論 1贊 2
  • 月兒（小說）續(xù) 馬車載著三個不同心思的人，顛簸在坑凹不平的路面上，一路向北駛向他們的目的地。 傍晚...
    任科峰閱讀 166評論 0贊 0

友情鏈接更多精彩內(nèi)容