爬蟲應(yīng)用示例--puppeteer數(shù)據(jù)抓取的實(shí)現(xiàn)方法(續(xù)1)

本文介紹《爬蟲應(yīng)用示例--puppeteer數(shù)據(jù)抓取的實(shí)現(xiàn)方法》中涉及到的puppeteer組件如何安裝,以及相關(guān)的坑。

一、puppeteer介紹

Puppeteer 是一個(gè)node庫(kù),內(nèi)含了一個(gè)chrome瀏覽器,以及一組用來(lái)操縱Chrome的API。

相關(guān)資料:
1、github:https://github.com/puppeteer/puppeteer
2、中文資料:http://www.puppeteerjs.com/
3、API:https://chromedevtools.github.io/devtools-protocol/

安裝方式:

1、方式一完整安裝,包含chrome瀏覽器+API,npm i puppeteer【本文采用這種安裝方式,因?yàn)轫?xiàng)目需要瀏覽器自動(dòng)化的遠(yuǎn)程數(shù)據(jù)自動(dòng)化抓取】
2、方式二精簡(jiǎn)安裝,只包含api,npm i puppeteer-core

二、puppeteer安裝

npm install puppeteer@1.8.0? --unsafe-perm=true --allow-root

說明:
1、以上語(yǔ)句執(zhí)行一次如果出錯(cuò),則可以再執(zhí)行1到2次試試
2、也可以嘗試用cnpm安裝試試
3、總之要執(zhí)行后,出現(xiàn)以上結(jié)果則說明安裝成功

三、安裝過程中的幾個(gè)坑

試過如下幾種安裝方式:
1、npm install puppeteer --save
2、npm install puppeteer --unsafe-perm=true --allow-root
3、npm install puppeteer --ignore-scripts
4、cnpm install puppeteer –save
5、cnpm install puppeteer --unsafe-perm=true --allow-root

其結(jié)果都是出現(xiàn)“Failed to set up Chromium r901912! Set "PUPPETEER_SKIP_DOWNLOAD" env variable to skip download.”的錯(cuò)誤,安裝失敗。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容