淡尝三年梦 2018-11-15 04:03 采纳率: 0%
浏览 1237

python爬取亚马逊评论页内容太大 导致加载很慢 能不能在获取到html时就抓取?

py2.7
requests
BeautifulSoup
scrapinghub
我使用了http代理
代理都是美国的
平均响应时长30s
目标是亚马逊的评论页

  • 写回答

1条回答 默认 最新

  • lyhsdy 2018-11-17 04:02
    关注
    评论

报告相同问题?

悬赏问题

  • ¥100 有人会搭建GPT-J-6B框架吗?有偿
  • ¥15 求差集那个函数有问题,有无佬可以解决
  • ¥15 【提问】基于Invest的水源涵养
  • ¥20 微信网友居然可以通过vx号找到我绑的手机号
  • ¥15 寻一个支付宝扫码远程授权登录的软件助手app
  • ¥15 解riccati方程组
  • ¥15 display:none;样式在嵌套结构中的已设置了display样式的元素上不起作用?
  • ¥15 使用rabbitMQ 消息队列作为url源进行多线程爬取时,总有几个url没有处理的问题。
  • ¥15 Ubuntu在安装序列比对软件STAR时出现报错如何解决
  • ¥50 树莓派安卓APK系统签名