Docker+Puppeteer抓取动态页面,很方便很省心
1 · 发布于 2020-11-06 06:31:33
问题
爬虫怎样抓取动态页面?例如电商网站的价格,销量
常规解决方案
安装firefox selenium python
问题
1 安装麻烦,配置麻烦
2 本地配置好了,不方便部署到服务器
3 效率低下
解决
Docker+Puppeteer(Chrome headless node API)
https://hub.docker.com/r/alekzonder/puppeteer
https://hub.docker.com/r/zenato/puppeteer-renderer
0条评论