想爬取瀑布流布局里的大量数据,但是有api限制,并且网页无法获取交互信息,有什么解决办法吗?
2条回答 默认 最新
- CSDN专家-showbo 2022-01-20 21:05关注
瀑布流一般是通过接口加载数据,直接请求接口获取数据就行了。只要是浏览器访问能加载出来的一般都可以获取到,只是难易程度不一样而已。
比如有一些js生成的签名,如果js压缩过很难分析签名生成过程,可以考虑用selenium来采集。
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏 举报
瀑布流一般是通过接口加载数据,直接请求接口获取数据就行了。只要是浏览器访问能加载出来的一般都可以获取到,只是难易程度不一样而已。
比如有一些js生成的签名,如果js压缩过很难分析签名生成过程,可以考虑用selenium来采集。