a1023182899
Ordinary programmer
采纳率50%
2021-02-26 11:08

pyspider支持用代理爬取https链接吗?

如京东  https://www.jd.com/

 

  • 点赞
  • 写回答
  • 关注问题
  • 收藏
  • 复制链接分享
  • 邀请回答

1条回答

  • hjue 多鱼的夏天 2月前

    可以设置validate_cert=false,这样可以不验证证书 

    self.crawl('http://www.example.org/', validate_cert=False)

     

     

    具体说明可以看一下文档

    https://docs.pyspider.org/en/latest/apis/self.crawl/

    点赞 评论 复制链接分享