Linux常用命令 查看系統(tǒng)信息常用命令 常用命令-關(guān)機(jī)或重啟命令 命令前結(jié)構(gòu)
IP屬地：上海
-
python基礎(chǔ)一
變量及類型 類型: Numbers(數(shù)字): int(有符號(hào)整型) long(長(zhǎng)整型) float(浮點(diǎn)型) complex(復(fù)數(shù)) Boolean(布爾): Ture Fa...
-
Scrapy-Redis分布式爬蟲(chóng)組件
Scrapy-Redis分布式爬蟲(chóng)組件 Scrapy是一個(gè)框架，他本身是不支持分布式的。如果我們想要做分布式的爬蟲(chóng)，就需要借助一個(gè)組件叫做Scrapy-Redis，這個(gè)組件正...
-
Scrapy框架架構(gòu)
Scrapy框架架構(gòu) Scrapy框架介紹： 寫(xiě)一個(gè)爬蟲(chóng)，需要做很多的事情。比如：發(fā)送網(wǎng)絡(luò)請(qǐng)求、數(shù)據(jù)解析、數(shù)據(jù)存儲(chǔ)、反反爬蟲(chóng)機(jī)制（更換ip代理、設(shè)置請(qǐng)求頭等）、異步請(qǐng)求等。這...
-
Django中的Ajax
一、原生Ajax 二、Jquery中的Ajax 1、$.ajax()：type為POST時(shí)，表示發(fā)送數(shù)據(jù)，type為GET時(shí)，表示接收數(shù)據(jù) 2、$.post()：發(fā)送數(shù)據(jù) 3...
-
Ubuntu18.04配置及美化Ubuntu18.04已經(jīng)發(fā)布，它以Gnome為圖形桌面環(huán)境，適當(dāng)?shù)呐渲每梢宰屗兊酶烙^一些。 建議在安裝的時(shí)候選最小安裝，一些不用的軟件就不會(huì)安裝了，當(dāng)然需要用的軟件就要...
-
Python 3 入門(mén)，最全面的基礎(chǔ)看這篇就夠了！
基礎(chǔ)語(yǔ)法 運(yùn)行 Python 交互式解釋器 在命令行窗口執(zhí)行python后，進(jìn)入 Python 的交互式解釋器。 exit()或Ctrl + D組合鍵退出交互式解釋器。 命令...
-
圖形驗(yàn)證碼識(shí)別技術(shù)
圖形驗(yàn)證碼識(shí)別技術(shù)： 阻礙我們爬蟲(chóng)的。有時(shí)候正是在登錄或者請(qǐng)求一些數(shù)據(jù)時(shí)候的圖形驗(yàn)證碼。因此這里我們講解一種能將圖片翻譯成文字的技術(shù)。將圖片翻譯成文字一般被成為光學(xué)文字識(shí)別（...
-
多線程爬蟲(chóng)
多線程爬蟲(chóng) 有些時(shí)候，比如下載圖片，因?yàn)橄螺d圖片是一個(gè)耗時(shí)的操作。如果采用之前那種同步的方式下載。那效率肯會(huì)特別慢。這時(shí)候我們就可以考慮使用多線程的方式來(lái)下載圖片。 多線程介...
-
動(dòng)態(tài)網(wǎng)頁(yè)數(shù)據(jù)抓取
動(dòng)態(tài)網(wǎng)頁(yè)數(shù)據(jù)抓取 什么是AJAX： AJAX（Asynchronouse JavaScript And XML）異步JavaScript和XML。過(guò)在后臺(tái)與服務(wù)器進(jìn)行少量數(shù)據(jù)...
-
json文件處理和 csv文件處理
json文件處理： 什么是json： JSON(JavaScript Object Notation, JS 對(duì)象標(biāo)記) 是一種輕量級(jí)的數(shù)據(jù)交換格式。它基于 ECMAScri...
-
正則表達(dá)式和re模塊
正則表達(dá)式和re模塊： 什么是正則表達(dá)式： 通俗理解：按照一定的規(guī)則，從某個(gè)字符串中匹配出想要的數(shù)據(jù)。這個(gè)規(guī)則就是正則表達(dá)式。標(biāo)準(zhǔn)答案：https://baike.baidu...
-
Python爬蟲(chóng)面試總結(jié)
1. 寫(xiě)一個(gè)郵箱地址的正則表達(dá)式？ 2. 談一談你對(duì) Selenium 和 PhantomJS 了解 Selenium 是一個(gè)Web 的自動(dòng)化測(cè)試工具，可以根據(jù)我們的指令，讓...
-
BeautifulSoup4庫(kù)
BeautifulSoup4庫(kù) 和 lxml 一樣，Beautiful Soup 也是一個(gè)HTML/XML的解析器，主要的功能也是如何解析和提取 HTML/XML 數(shù)據(jù)。lx...
