對我而方，今天是一個應(yīng)當(dāng)圈一個的日子。努力了十幾天，終于完成了第一張社會網(wǎng)絡(luò)分析圖。 心得：圖只是一種顯示工具。讀圖雖然方便，但是，圖依賴的仍然是數(shù)據(jù)。作為專業(yè)人士，在沒有圖...
發(fā)簡信
IP屬地：河南
-
今天終于做了一張圖2019-04-10 -
Python下的selenium和Chromedriver安裝2019-03-09
在嘗試了用scrapy爬條法司網(wǎng)站上的雙邊條約后，我發(fā)現(xiàn)，這個網(wǎng)站的爛結(jié)構(gòu)讓我吃夠了苦。在網(wǎng)站上有個表格，表中列出了中國與其他國家簽訂的104個雙邊條約，可是我試了幾次，只下...
-
這幾天空閑時反復(fù)地練習(xí)得雨帝的文章，出現(xiàn)了一系的錯誤，列出，供參與。在學(xué)習(xí)時，建議那些和我一樣沒有受過系統(tǒng)編程訓(xùn)練的同道們，一定要做些手工作業(yè)。針對一個網(wǎng)站，不借助參與資料，親手碼出程序，在調(diào)試中找出自己的錯誤，這樣雖然笨些，但適合我這樣的笨人。
SCRAPY解----草譯一篇得雨帝（Gotrained）的講義，供參考2019-03-04
文章原文地址：https://python.gotrained.com/scrapy-tutorial-web-scraping-craigslist/ 爬的目標(biāo)網(wǎng)站；Cra...
-
Scrapy之“rule”用法2019-03-06
在用crawl創(chuàng)建的crawlerspider中，rule是個很重要的內(nèi)容。這個模板提供了一個包含變量rules的parse()方法，以方便我們完成鏈接列表的提取。其基本結(jié)構(gòu)...
-
Scrapy之LinkExtractor2019-03-06
如何取得列表頁中的內(nèi)容鏈接呢？方法有很多，但LE應(yīng)當(dāng)是最簡單的一個了。使用這個工具之前，先引入。 注意，linkextractors是個復(fù)數(shù)。然后在程序中就可以使用了。先用L...
-
linkextractors
爬蟲課堂（二十二）|使用LinkExtractor提取鏈接
在爬取一個網(wǎng)站時，要爬取的數(shù)據(jù)通常不全是在一個頁面上，每個頁面包含一部分?jǐn)?shù)據(jù)以及到其他頁面的鏈接。比如前面講到的獲取簡書文章信息，在列表頁只能獲取到文章標(biāo)題、文章URL及文章...
-
SCRAPY解----草譯一篇得雨帝（Gotrained）的講義，供參考2019-03-04
文章原文地址：https://python.gotrained.com/scrapy-tutorial-web-scraping-craigslist/ 爬的目標(biāo)網(wǎng)站；Cra...
-
readline()后的字符拼接2019-02-28
readline()讀取了一個TXT文本的行，當(dāng)我們想在行的首尾加上其他字符串時會發(fā)現(xiàn)，尾部的字符串另起了一行。怎么解決這個問題呢？原因是什么？readline命令在每行后加...
-
Window下Scrapy的安裝2019-02-28
一直是在李牛下學(xué)習(xí)如何蟲子飼養(yǎng)技術(shù)，后來為了方便，把蘋果空氣本上也裝了。但是，這幾天不知為何，李牛無線網(wǎng)卡網(wǎng)速不穩(wěn)定，又不想扯網(wǎng)線，所以想在瘟斗上也裝一個。在安裝過程中，遇到...
-
SCRAPY的四大金鋼2019-02-26
就目前學(xué)到的這點(diǎn)知識，先做個總結(jié)，飼養(yǎng)蟲子得有四大金鋼：settings.py，items.py，pipelines.py以及spider文件夾里的那些你自己可起起名字的蟲子...
-
MAC下的Python3環(huán)境設(shè)置
瘟斗下和李牛環(huán)境下，Py的設(shè)置很簡單。手中有人Mac Air，也想做個派孫環(huán)境，方便學(xué)習(xí)。 安裝派孫，很容易的，到Py的官網(wǎng)，下個Mac安裝包，下一步，下一步... Idle...
-
心若在夢就在！
