發(fā)簡(jiǎn)信
IP屬地：浙江
-
Python學(xué)習(xí) <一> Python基礎(chǔ)
變量賦值 <1>賦值操作符 =Python語(yǔ)言中，等號(hào)（=）是主要的賦值操作符。<2>增量賦值x += 1 (不支持x++)<3>多重賦值x =...
-
除了39歲的清華教授顏寧，候選院士大多都是多少歲的呢？這兩天中國(guó)科學(xué)院公布了 2017年中國(guó)科學(xué)院院士增選初步候選人名單，在157名候選人名單中最吸引人注意的是39歲清華大學(xué)教授、生物學(xué)家顏寧。 這...
-
scrapy閱讀筆記(一):創(chuàng)建spider，繼承scrapy.Spider
最近打算深入學(xué)習(xí) scrapy 然后整理了一些官方文檔以及爬蟲源碼的相關(guān)筆記寫在這供自己和大家一起參考 我們創(chuàng)建一個(gè)爬蟲后首先是要繼承scrap...
-
CentOS7.0 （Linux）快速配置Scrapy爬蟲開發(fā)環(huán)境
由于專門為黑蘋果買的SSD容量很低，用來跑數(shù)據(jù)明顯不現(xiàn)實(shí)。所以把機(jī)房的主機(jī)裝上CentOS 用來跑數(shù)據(jù)，執(zhí)行的最小化安裝，沒有圖形化界面，從U盤...
-
CentOS 7.0 （Linux）下配置frp進(jìn)行內(nèi)網(wǎng)穿透機(jī)房有很多閑置的主機(jī)，再想到網(wǎng)上的云主機(jī)那么貴，配置容量還那么低，還不如自己配置下，看能不能通過公網(wǎng)連接到學(xué)校內(nèi)網(wǎng)的主機(jī)，試了后感覺不錯(cuò)可以，只...
-
CentOS 7.0 出現(xiàn)network is unreachable 或者 Cannot find a valid baseurl for repo的問題配置好的CentOS稱為Client的 連接的設(shè)備稱為 PCPC和服務(wù)器是在同一個(gè)機(jī)房，不過為了不頻繁的走動(dòng)還是用SSH吧。 用SSH登錄Cli...
-
（Mac下）安裝CentOS7.0針對(duì)于Mac用戶的提示 Mac下的Unix環(huán)境已經(jīng)很好了 如果不是特殊原因 不推薦在Mac上面再裝CentOS裝了CentOS 后如果不能正常開...
-
python爬蟲回顧<五>：利用XPath爬取指定網(wǎng)頁(yè)的標(biāo)題以及文本在爬取了政府工作報(bào)告以后，一項(xiàng)新的任務(wù)又出現(xiàn)了，我們需要人民日?qǐng)?bào)社論的標(biāo)題以及社論文章進(jìn)行分析。與上幾次不同的是這次我們運(yùn)用的方法是XPath加...
-
python爬蟲回顧<四>處理分頁(yè)，不同時(shí)期網(wǎng)站排版不同的兼容問題，以及文件歸類（分文件夾保存）上篇的爬蟲回顧其實(shí)已經(jīng)把爬蟲基本上都做好了，但是我覺得一個(gè)個(gè)復(fù)制年度匯編地址也很麻煩，要從03年粘貼到16年，如果我能夠再來一次循環(huán)就好了。并且...