prog_cxy 2018-03-30 07:12 采纳率: 0%
浏览 4839
已结题

关于近期抓取天眼查的问题

目前公司观察了下天眼查,说是准备在天眼查上抓取一小部分数据,让我调研一下,本来我就想这以selenium方法进行抓取,虽然慢一些,但是比较稳妥,毕竟天眼查的反爬还是比较厉害,但是当我利用selenium+chrome进行抓取的时候我发现网页上的真实数据竟然用selenium获取不下来:
图片说明

我以为可能js里面会有,或者接口中有,但是都没有发现,那位大神来指点一下。

  • 写回答

2条回答 默认 最新

  • yujiabian 2018-03-30 07:39
    关注

    添加参数 --ignore-ssl-errors=true --ssl-protocol=any 就好了

    评论

报告相同问题?

悬赏问题

  • ¥100 有人会搭建GPT-J-6B框架吗?有偿
  • ¥15 求差集那个函数有问题,有无佬可以解决
  • ¥15 【提问】基于Invest的水源涵养
  • ¥20 微信网友居然可以通过vx号找到我绑的手机号
  • ¥15 寻一个支付宝扫码远程授权登录的软件助手app
  • ¥15 解riccati方程组
  • ¥15 display:none;样式在嵌套结构中的已设置了display样式的元素上不起作用?
  • ¥15 使用rabbitMQ 消息队列作为url源进行多线程爬取时,总有几个url没有处理的问题。
  • ¥15 Ubuntu在安装序列比对软件STAR时出现报错如何解决
  • ¥50 树莓派安卓APK系统签名