TheHide
2017-05-08 06:16 阅读 2.4k

python 自动获取网页异步包请求(ajax数据)

10

浏览器中请求
其实就是想快速的抓评论,如果用selenium + phantomjs 也可以抓到评论,但是太慢了。

如果能自动拿到这些包信息或者链接的话,就可以分析了,有什么方法吗??

  • 点赞
  • 写回答
  • 关注问题
  • 收藏
  • 复制链接分享

3条回答 默认 最新

  • iamoyjj 欧阳嘉 2017-05-08 06:13

    多个进程并发不就快了吗

    点赞 评论 复制链接分享
  • oyljerry oyljerry 2017-05-08 06:32

    主要就是要分析ajax的请求返回等,看有没有办法找到能够直接返回数据的URL等。

    点赞 评论 复制链接分享
  • showbo GoCityPass新加坡曼谷通票 2017-05-08 06:32

    直接请求ajax接口获取数据,你模拟浏览器就得等待资源加载完毕,这个肯定是慢的了

    点赞 评论 复制链接分享

相关推荐