在window环境你可能遇不到问题,测试的时候肯定会很顺利,当你部署到线上的时候,这才是你噩梦开始的第一步,今天我把踩到的坑都记录这里,便于大家学习。前期准备工作node环境之类的在这里不在详述。
因为网络原因,国内安装 puppeteer
的时候会报网络超时。这里使用 puppeteer
之后使用手动下载的 Chrome
进行操作。思路很简单,安装一个不带浏览器的 puppeteer
,再使用的时候将浏览器地址指向一个可执行的 Chrome
浏览器文件。
# 忽略Chromium安装
npm install puppeteer --ignore-scripts --save
# 下载一个Chromium放到指定位置
# linux: 'https://storage.googleapis.com/chromium-browser-snapshots/Linux_x64/%d/chrome-linux.zip',
# mac: 'https://storage.googleapis.com/chromium-browser-snapshots/Mac/%d/chrome-mac.zip',
# win32: 'https://storage.googleapis.com/chromium-browser-snapshots/Win/%d/chrome-win32.zip',
# win64: 'https://storage.googleapis.com/chromium-browser-snapshots/Win_x64/%d/chrome-win32.zip',
# 下载时将%d替换为具体编号,编号可以在node_modules/puppeteer/package.json中puppeteer.chromium_revision获得。拼接好链接后直接在浏览器就可以直接下载了(当然,你得科学上网才可以)。
# 下载后上传到服务器,存储位置为node_modules/puppeteer/.local-chromium/linux-%d,.local-chromium/linux-%d文件夹需要自己创建,同样将%d替换为具体编号。将下载的Chromium压缩包上传到该位置后解压。
# "puppeteer": "^2.0.0",
# https://storage.googleapis.com/chromium-browser-snapshots/Linux_x64/706915/chrome-linux.zip
centos7上要想puppeteer能正常运行,必须安装相关的依赖
#如果是内网,需要设置yum配置文件
#修改此配置文件/etc/yum.repos.d/centos7.repo
#依赖库
yum install pango.x86_64 libXcomposite.x86_64 libXcursor.x86_64 libXdamage.x86_64 libXext.x86_64 libXi.x86_64 libXtst.x86_64 cups-libs.x86_64 libXScrnSaver.x86_64 libXrandr.x86_64 GConf2.x86_64 alsa-lib.x86_64 atk.x86_64 gtk3.x86_64 nss.x86_64 -y
#字体
yum install ipa-gothic-fonts xorg-x11-fonts-100dpi xorg-x11-fonts-75dpi xorg-x11-utils xorg-x11-fonts-cyrillic xorg-x11-fonts-Type1 xorg-x11-fonts-misc -y
权限问题:
Error: spawn /home/card-spider/node_modules/puppeteer/.local-chromium/linux-706915/chrome-linux/chrome EACCES
at Process.ChildProcess._handle.onexit (internal/child_process.js:232:19)
at onErrorNT (internal/child_process.js:407:16)
at process._tickCallback (internal/process/next_tick.js:63:19)
Emitted 'error' event at:
at Process.ChildProcess._handle.onexit (internal/child_process.js:238:12)
at onErrorNT (internal/child_process.js:407:16)
at process._tickCallback (internal/process/next_tick.js:63:19)
npm ERR! code ELIFECYCLE
解决方案:
sudo chmod -R 777 /node_modules/puppeteer/.local-chromium/linux-706915/chrome-linux/chrome
如果还遇到别的问题,说明你的代码有问题,请参考我的代码,绝对让你没有问题