本文介紹《爬蟲(chóng)應(yīng)用示例--puppeteer數(shù)據(jù)抓取的實(shí)現(xiàn)方法》中涉及到的puppeteer組件如何安裝,以及相關(guān)的坑。
一、puppeteer介紹
Puppeteer 是一個(gè)node庫(kù),內(nèi)含了一個(gè)chrome瀏覽器,以及一組用來(lái)操縱Chrome的API。
相關(guān)資料:
1、github:https://github.com/puppeteer/puppeteer
2、中文資料:http://www.puppeteerjs.com/
3、API:https://chromedevtools.github.io/devtools-protocol/
安裝方式:
1、方式一完整安裝,包含chrome瀏覽器+API,npm i puppeteer【本文采用這種安裝方式,因?yàn)轫?xiàng)目需要瀏覽器自動(dòng)化的遠(yuǎn)程數(shù)據(jù)自動(dòng)化抓取】
2、方式二精簡(jiǎn)安裝,只包含api,npm i puppeteer-core
二、puppeteer安裝
npm install puppeteer@1.8.0? --unsafe-perm=true --allow-root
說(shuō)明:
1、以上語(yǔ)句執(zhí)行一次如果出錯(cuò),則可以再執(zhí)行1到2次試試
2、也可以嘗試用cnpm安裝試試
3、總之要執(zhí)行后,出現(xiàn)以上結(jié)果則說(shuō)明安裝成功
三、安裝過(guò)程中的幾個(gè)坑
試過(guò)如下幾種安裝方式:
1、npm install puppeteer --save
2、npm install puppeteer --unsafe-perm=true --allow-root
3、npm install puppeteer --ignore-scripts
4、cnpm install puppeteer –save
5、cnpm install puppeteer --unsafe-perm=true --allow-root
其結(jié)果都是出現(xiàn)“Failed to set up Chromium r901912! Set "PUPPETEER_SKIP_DOWNLOAD" env variable to skip download.”的錯(cuò)誤,安裝失敗。