lyxleo 2019-07-20 15:01 采纳率: 0%
浏览 954

用Python爬取长期发送请求和返回的网页

我是指什么呢?是指你打开一个网页之后,这个网页每隔一段时间就会给你发送一个文件,我并不太了解Python如何针对这种网页进行爬取,因为他是不停的向浏览器发送信息,如何让Python持续接收从服务器发来的新请求?

  • 写回答

1条回答 默认 最新

  • threenewbee 2019-07-20 15:36
    关注

    不知道你说的是什么,是服务器主动推送还是客户端不断轮询。前者需要用websocket建立连接获取数据,或者你的程序定时去get就好。

    另外建议你用webdrive,也就是用浏览器的内核去访问网页,获取数据,这样对于比较复杂的网页,可以写起来比较简单

    评论

报告相同问题?

悬赏问题

  • ¥15 程序不包含适用于入口点的静态Main方法
  • ¥15 素材场景中光线烘焙后灯光失效
  • ¥15 请教一下各位,为什么我这个没有实现模拟点击
  • ¥15 执行 virtuoso 命令后,界面没有,cadence 启动不起来
  • ¥50 comfyui下连接animatediff节点生成视频质量非常差的原因
  • ¥20 有关区间dp的问题求解
  • ¥15 多电路系统共用电源的串扰问题
  • ¥15 slam rangenet++配置
  • ¥15 有没有研究水声通信方面的帮我改俩matlab代码
  • ¥15 ubuntu子系统密码忘记