爬蟲(chóng)應(yīng)用示例--puppeteer數(shù)據(jù)抓取的實(shí)現(xiàn)方法(續(xù)1)

本文介紹《爬蟲(chóng)應(yīng)用示例--puppeteer數(shù)據(jù)抓取的實(shí)現(xiàn)方法》中涉及到的puppeteer組件如何安裝,以及相關(guān)的坑。

一、puppeteer介紹

Puppeteer 是一個(gè)node庫(kù),內(nèi)含了一個(gè)chrome瀏覽器,以及一組用來(lái)操縱Chrome的API。

相關(guān)資料:
1、github:https://github.com/puppeteer/puppeteer
2、中文資料:http://www.puppeteerjs.com/
3、API:https://chromedevtools.github.io/devtools-protocol/

安裝方式:

1、方式一完整安裝,包含chrome瀏覽器+API,npm i puppeteer【本文采用這種安裝方式,因?yàn)轫?xiàng)目需要瀏覽器自動(dòng)化的遠(yuǎn)程數(shù)據(jù)自動(dòng)化抓取】
2、方式二精簡(jiǎn)安裝,只包含api,npm i puppeteer-core

二、puppeteer安裝

npm install puppeteer@1.8.0? --unsafe-perm=true --allow-root

說(shuō)明:
1、以上語(yǔ)句執(zhí)行一次如果出錯(cuò),則可以再執(zhí)行1到2次試試
2、也可以嘗試用cnpm安裝試試
3、總之要執(zhí)行后,出現(xiàn)以上結(jié)果則說(shuō)明安裝成功

三、安裝過(guò)程中的幾個(gè)坑

試過(guò)如下幾種安裝方式:
1、npm install puppeteer --save
2、npm install puppeteer --unsafe-perm=true --allow-root
3、npm install puppeteer --ignore-scripts
4、cnpm install puppeteer –save
5、cnpm install puppeteer --unsafe-perm=true --allow-root

其結(jié)果都是出現(xiàn)“Failed to set up Chromium r901912! Set "PUPPETEER_SKIP_DOWNLOAD" env variable to skip download.”的錯(cuò)誤,安裝失敗。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

推薦閱讀更多精彩內(nèi)容