什么是Spider
Spider翻譯成中文是蜘蛛的意思,如果我們把互聯(lián)網(wǎng)比喻成一個蜘蛛網(wǎng)的話,spider就是在互聯(lián)網(wǎng)上的蜘蛛,從網(wǎng)站上的某一頁開始,讀取網(wǎng)頁上的內(nèi)容,找到在網(wǎng)頁上其它鏈接的地址,尋找下一個網(wǎng)頁...。有了spider,我們就可以隨意抓取互聯(lián)網(wǎng)上任何我們感興趣的東西了。
首先要理解什么是URL
就當(dāng)大家都理解了
Spider翻譯成中文是蜘蛛的意思,如果我們把互聯(lián)網(wǎng)比喻成一個蜘蛛網(wǎng)的話,spider就是在互聯(lián)網(wǎng)上的蜘蛛,從網(wǎng)站上的某一頁開始,讀取網(wǎng)頁上的內(nèi)容,找到在網(wǎng)頁上其它鏈接的地址,尋找下一個網(wǎng)頁...。有了spider,我們就可以隨意抓取互聯(lián)網(wǎng)上任何我們感興趣的東西了。
就當(dāng)大家都理解了