在开发爬虫时有的会用到pyppeteer模块,有的用的requests模块。请问这两个模块区别是什么,什么分别什么时候用什么模块。谢谢
2条回答 默认 最新
CSDN专家-HGJ 2021-04-13 10:40关注简单地说,就是pyppeteer模块是用无头浏览器对有js渲染的页面进行处理和数据获取,类似的还有requests-html,一般用于数据动态加载页面,需要chromium支持,而requests 一般可以用于对静态页面请求。
解决 无用评论 打赏 举报
在开发爬虫时有的会用到pyppeteer模块,有的用的requests模块。请问这两个模块区别是什么,什么分别什么时候用什么模块。谢谢
简单地说,就是pyppeteer模块是用无头浏览器对有js渲染的页面进行处理和数据获取,类似的还有requests-html,一般用于数据动态加载页面,需要chromium支持,而requests 一般可以用于对静态页面请求。