之前給大家分享如何用excel爬取網(wǎng)站數(shù)據(jù),有人說我還要裝個excel,而且office是收費的,有沒有可以推薦我們小白用戶的方法呢?

今天我就給大家介紹一個方法,你的電腦只需要有一個瀏覽器即可,今天我們給大家分享一個數(shù)據(jù)爬取的網(wǎng)站造數(shù),我用了快半年,基本上網(wǎng)站稍微復雜一些的,我就會用他去爬取數(shù)據(jù),他具有可視化操作界面。
我們今天就抓取京東購物網(wǎng)站的筆記本商品列表頁,作為案例分享給大家。

Step1我們把網(wǎng)址放進網(wǎng)站里,點擊開始爬取

Step2鼠標選中想爬取的數(shù)據(jù),我選中商品詳情頁,價格,商品標題,評分數(shù)量,以及商品標簽等,點擊完成創(chuàng)建。

Step3 點擊立即執(zhí)行,網(wǎng)站就開始爬取你想要的數(shù)據(jù)

Step4,爬取完成后,你可以選擇在線預覽,也可以選擇下載到本地


這個時候有的同學會問我如果爬取數(shù)據(jù)有分頁怎么辦,這個也可以解決。
首先你在京東商品列表中,多點擊幾次下一頁,發(fā)現(xiàn)網(wǎng)址的規(guī)律“?page=頁數(shù)”;

然后在爬取網(wǎng)址設(shè)置選擇網(wǎng)址生成規(guī)則

整個爬取工作就完成了,是不是很容易哈。下次分享給大家如果有的網(wǎng)站需要登錄才能爬取數(shù)據(jù)的解決方法?