11篇文章 · 5539字 · 2人關注
-
Python爬蟲（九）通過txt/Excel保存爬蟲數(shù)據(jù)
通過前面的學習，你應該已經(jīng)知道怎么提取到爬蟲數(shù)據(jù)了。但是提取數(shù)據(jù)之后，我們應該講數(shù)據(jù)保存起來，或者進一步應用起來，爬蟲才有意義。爬蟲最常用的數(shù)據(jù)...
-
Python爬蟲（八）數(shù)據(jù)處理方法之Xpath在學習本小節(jié)的知識之前，對于Xpath的語法最好有一個簡單的了解。如果不是很了解的，可以看一下我的另一篇文章Xpath之爬蟲常用方法總結。 爬蟲...
-
Python爬蟲（七）數(shù)據(jù)處理方法之JSON什么是JSON JSON 指的是 JavaScript 對象表示法（JavaScript Object Notation），是輕量級的文本數(shù)據(jù)交...
-
Python爬蟲之json.loads()、json.load()、json.dump()以及json.dumps()的區(qū)別json.dumps()，用于數(shù)據(jù)類型的轉換json.dumps()用于將dict類型的數(shù)據(jù)轉成str，因為如果直接將dict類型的數(shù)據(jù)寫入js...
-
Python爬蟲（六）cookie相關的請求處理
之前的文章中講到，有很多網(wǎng)站為了防止爬蟲程序爬網(wǎng)站造成網(wǎng)站癱瘓，所以我們的程序在模擬瀏覽器訪問這些網(wǎng)站時，需要攜帶一些headers頭部信息才能...
-
Python爬蟲（五）timeout以及retrying的使用timeout參數(shù)的使用 在某些網(wǎng)絡情況不好或者服務器端異常的情況會出現(xiàn)請求慢或者請求異常的情況，這個時候我們需要給請求設置一個超時時間，而不是...
-
Python爬蟲（四）發(fā)送帶Headers的請求如果你嘗試了我在Python爬蟲（二）Requests庫題中講述的response方式，發(fā)現(xiàn)有可能會獲取不到網(wǎng)頁源碼（登陸知乎一定可以獲取不到）...
-
Python爬蟲（三）Requests庫什么是Requests Requests是用python語言基于urllib編寫的，采用的是Apache2 Licensed開源協(xié)議的HTTP庫...
-
Python爬蟲（二）Request請求與響應HTTP和HTTPS HTTP是互聯(lián)網(wǎng)上應用最為廣泛的一種網(wǎng)絡協(xié)議，是一個客戶端和服務器端請求和應答的標準（TCP），用于從WWW服務器傳輸超文...
