環(huán)境配置

1、selenium安裝：
sudo pip install selenium

2、瀏覽器驅(qū)動(dòng)安裝（我用的是chrome瀏覽器）
brew install chromedriver

3、以我的簡(jiǎn)書(shū)首頁(yè)網(wǎng)址為例：http://www.itdecent.cn/u/5b771dd604fd
腳本示例：

from time import sleep
from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.common.action_chains import ActionChains
from selenium.webdriver.common.by import By
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.support.wait import WebDriverWait

driver = webdriver.Chrome()
driver.implicitly_wait(10)
driver.maximize_window()
driver.get("http://www.itdecent.cn/u/5b771dd604fd")

firstTitle = driver.find_element_by_xpath('//*[@id="note-9068615"]/div/a')
print firstTitle.text

輸出結(jié)果如下：

選取第一篇文章標(biāo)題

若想獲取當(dāng)前頁(yè)所有文章的標(biāo)題：

titles = driver.find_elements(By.XPATH, '//a[@class="title"]')
for title in titles:
    print title.text

當(dāng)前展示頁(yè)