Python爬蟲入門

正式上手,本文章吸取了一些其他簡友的思想。
本次內(nèi)容:很多網(wǎng)絡小說都始發(fā)于起點中文網(wǎng),大部分小說特別是一些比較火的小說看的時候都需要付費。既然有收費,那就一定有盜版免費的小說出現(xiàn),而有些網(wǎng)站(盜版小說)只能在線觀看,不能下載,本次內(nèi)容就是將只能觀看不能下載的小說爬下來。

下面列出本次爬取得網(wǎng)站以及書的內(nèi)容。
小說網(wǎng)站-筆趣看:URL:http://www.biqukan.com/

筆趣看是一個盜版小說網(wǎng)站,這里有很多起點中文網(wǎng)的小說,該網(wǎng)站小說的更新速度稍滯后于起點中文網(wǎng)正版小說的更新速度。并且該網(wǎng)站只支持在線瀏覽,不支持小說打包下載。因此,本次實戰(zhàn)就是從該網(wǎng)站爬取并保存一本名為《一念永恒》的小說,該小說是耳根正在連載中的一部玄幻小說。PS:本實例僅為交流學習,支持耳根大大,請上起點中文網(wǎng)訂閱。

下面是本次爬取得代碼:

from bs4 import BeautifulSoup
import requests


if __name__ == '__main__':
    target = 'https://www.biqukan.com/1_1094/5403177.html'
    req = requests.get(url=target)
    html = req.text
    bf = BeautifulSoup(html)
    texts = bf.find_all('div',class_='showtxt')
    print(texts)

ps:本次爬起貌似沒有成功。立個flag,下周之內(nèi),一定爬取成功,并更改此次代碼。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容