我們知道爬蟲(chóng)是 IO 密集型任務(wù)，比如如果我們使用 requests 庫(kù)來(lái)爬取某個(gè)站點(diǎn)的話(huà)，發(fā)出一個(gè)請(qǐng)求之后，程序必須要等待網(wǎng)站返回響應(yīng)之后才能接著運(yùn)行，而在等待響應(yīng)的過(guò)...
發(fā)簡(jiǎn)信
IP屬地：廣東
-
使用aiohttp+MongoDB完成異步爬蟲(chóng) -
工作累積的最常用 Shell 命令合集及使用技巧本文主要分享如下三部分內(nèi)容： ·需要熟悉掌握 Linux； ·需要了解一些 Shell 基礎(chǔ)，介紹一些常見(jiàn)的 Shell 命令合集； ·需要了解 TCP 三次握手原理，結(jié)合 ...
-
rm -rf 誤刪數(shù)據(jù)，如何進(jìn)行磁盤(pán)數(shù)據(jù)恢復(fù)在工作中，我們知道一些操作命令危險(xiǎn)性很高，如： rm -rf，它會(huì)造成數(shù)據(jù)的誤刪除。如果萬(wàn)一出現(xiàn)這樣情況導(dǎo)致數(shù)據(jù)誤刪除時(shí)，我們應(yīng)該如何對(duì)數(shù)據(jù)進(jìn)行恢復(fù)呢？ 刪除數(shù)據(jù)的兩種場(chǎng)景 ...
-
Apache和Nginx的區(qū)別
Nginx 輕量級(jí)，采用 C 進(jìn)行編寫(xiě)，同樣的 web 服務(wù)，會(huì)占用更少的內(nèi)存及資源 抗并發(fā)，nginx 以 epoll and kqueue 作為開(kāi)發(fā)模型，處理請(qǐng)求是異步非...
-
7種前端自動(dòng)化測(cè)試框架，到底誰(shuí)是No.1轉(zhuǎn)自公眾號(hào)文章：https://mp.weixin.qq.com/s/frY16XCv_8lKXSTLv_NBmA[https://mp.weixin.qq.com/s/fr...
-
【星云測(cè)試】精準(zhǔn)測(cè)試白皮書(shū)v3.0－2019最新版
精準(zhǔn)測(cè)試誕生的背景 現(xiàn)代社會(huì)是建立在各種以計(jì)算機(jī)為基石的軟件技術(shù)基礎(chǔ)之上的。隨著日新月異的需求變化，軟件系統(tǒng)越來(lái)越復(fù)雜。很多人覺(jué)得軟件開(kāi)發(fā)才是重要環(huán)節(jié)，但實(shí)際上，無(wú)法對(duì)大型軟...
-
selenium執(zhí)行JavaScript腳本
一、前言 1.selenium能夠執(zhí)行js腳本，這使得selenium擁有更為強(qiáng)大的能力。既然能執(zhí)行js，那么js能做的事情，selenium應(yīng)該大部分都能做。 2.直接使用...
