發(fā)簡信
IP屬地：浙江
-
web網(wǎng)頁前端-HTML
1.web的標(biāo)準(zhǔn)三層結(jié)構(gòu) 結(jié)構(gòu)（html）：用于對網(wǎng)頁元素進(jìn)行整理和分類-- 好比人的身體 表現(xiàn)（css）：用于...
-
機(jī)器學(xué)習(xí)一.機(jī)器學(xué)習(xí)開發(fā)流程 1.獲取數(shù)據(jù) （公司本身就有，合作過來的數(shù)據(jù)，購買的數(shù)據(jù)） 2.數(shù)據(jù)的基本處理：pd去處理（缺失值，合并表。。。） 3.特...
-
特征工程scikit-learn庫介紹 一.特征抽取的API都在sklearn.feature_extraction中 1.字典數(shù)據(jù)的特征抽取 ...
-
Scrapy-RedisScrapy-Redis在scrapy的基礎(chǔ)上實(shí)現(xiàn)了更多，更強(qiáng)大的功能，具體體現(xiàn)在：request去重，爬蟲持久化，和輕松實(shí)現(xiàn)分布式
-
scrapyScrapy是一個為了爬取網(wǎng)站數(shù)據(jù)，提取結(jié)構(gòu)性數(shù)據(jù)而編寫的應(yīng)用框架，我們只需要寫少量的代碼，就能夠快速的抓取 Scrapy 使用了Twisted...
-
關(guān)于爬蟲中遇到驗(yàn)證碼的處理方法
url不變，驗(yàn)證碼不變 請求驗(yàn)證碼的地址，獲取響應(yīng)，識別 url不變，驗(yàn)證碼會變 思路：對方服務(wù)器返回驗(yàn)證碼的時候，回和每個用戶...
-
Selenium和PhantomJS
Selenium Selenium是一個Web的自動化測試工具，最初為網(wǎng)站自動化測試而開發(fā)的，Selenium可以直接運(yùn)行在瀏覽器上，它支持所有...
-
個人實(shí)現(xiàn)爬蟲思路的心得
1.準(zhǔn)備url 準(zhǔn)備start_url 1.url地址規(guī)律不明顯，總數(shù)不確定 2.通...
-
數(shù)據(jù)提取
數(shù)據(jù)提取的定義 數(shù)據(jù)提取就是從的響應(yīng)中提取我們想要的數(shù)據(jù)的過程 數(shù)據(jù)分類 1.非結(jié)構(gòu)化數(shù)據(jù)：html等 處理方法：正則表達(dá)式，xpath 2.結(jié)...