linux安装puppeteer

在安装puppeteer过程中遇到一些错误，记录一下 首先可能遇到node install.js错误，可以使用一下命令参数安装puppeteer `npm i --save puppeteer --ignore-scripts` 或者先执行一下命令再安装puppeteer ` npm config...

Node.js抓取网站，GBK，GB2312中文乱码解决办法

问题引入 async function getHtml(){ let res = await axios.get(publicPath+"/pic/") console.log(res) } 如上代码，axios默认是以utf8的方式去解码html 由于原网页的编码方式是`gb2312` 控制台打印中...

Node.js爬虫之使用puppeteer爬取百度图片

本文通过puppeteer实现对百度图片的抓取，这里简单介绍下puppeteer puppeteer可以使我们编写一套代码控制浏览器动作，“你可以在浏览器中手动执行的绝大多数操作都可以使用 Puppeteer 来完成” 因此Puppeteer常用于测...

Node.js爬虫之使用cheerio爬取图片

引入 在[上一篇文章](https://www.zihanzy.com/articles/212)我们利用Node.js实现了一个基本的爬虫，但是要写很长的正则--实在太累了而且需要对正则绝对熟悉。 在写前端我们都知道jQuery能方便帮我我们进行各种DOM操...

Node.js爬虫之爬取1905电影网

我们主要爬取这个页面 https://www.1905.com/vod/list/n_1/o3p1.html  我们爬取类型板块的...