疫情爆發(fā)以來,在家呆了快一個(gè)月了,原以為能在家宅的很好,現(xiàn)在也閑不住了,今天打算做蛋糕。為什么要做蛋糕呢,其實(shí)是因?yàn)樽蛱煳覌屧诰W(wǎng)上看到別人做蛋糕...
1.要重構(gòu)下載函數(shù),建立一個(gè)類,用來下載,并記錄下載數(shù)據(jù)。下次下載時(shí)還要判斷是否已經(jīng)下載過了。 所以需要一個(gè)下載類Downloader類,和一個(gè)...
對(duì)網(wǎng)頁(yè)信息的抓取。 一.常用的用是re,BeautifulSoup以及l(fā)xml。其中re,lxml速度快。 re比較復(fù)雜,當(dāng)頁(yè)面發(fā)生變化時(shí)正則表...
遍歷下載網(wǎng)站群————link_crawler能夠想到的方法有:1.通過網(wǎng)站地圖 2.通過網(wǎng)站的url特點(diǎn)3.像普通用戶一樣追蹤鏈接。由于1、2...
一.下載網(wǎng)頁(yè)1.版本1.0: 2.不簡(jiǎn)潔,不直觀所以有了升級(jí)版本1.1: 3.當(dāng)獲取網(wǎng)頁(yè)時(shí)有錯(cuò)誤時(shí),防止崩潰版本2.0: 4.一般有兩種錯(cuò)誤碼4...
一.BeautifulSoup是一個(gè)類,用來處理html文件有很多方法,實(shí)例化需要傳入兩個(gè)參數(shù),一個(gè)是html文件,一個(gè)是'html.parse...
基礎(chǔ)知識(shí): 1.url(Uniform Resource Locator):叫做統(tǒng)一資源定位符,是互聯(lián)網(wǎng)上標(biāo)準(zhǔn)資源的地址,俗稱“網(wǎng)址”。 2.在...
前面已經(jīng)完成了虛擬機(jī)的安裝,沒安裝的話可以參考之前寫的《kali虛擬機(jī)安裝》 完成安裝后還有很多事做, 1.安裝vmware tools,方便主...
解決方案 1.重新安裝kali虛擬機(jī) 安裝之前,首先配置虛擬網(wǎng)絡(luò)編輯器 對(duì)vmnet0選擇橋接模式(若沒有找到,要用管理員身份運(yùn)行,window...