woaiyibao
woaiyibao
采纳率64.3%
2019-04-26 16:05

python爬虫 爬虫的网站源码不齐全怎么办

已采纳

http://192.168.101.213:7027/swagger-ui.html#/26631209343164929702

用f12打开看到的源码
和用beautifulsoup get到的源码不一样 没法进行爬取

  • 点赞
  • 写回答
  • 关注问题
  • 收藏
  • 复制链接分享
  • 邀请回答

1条回答

  • rubikchen 502203305 2年前

    现在都是动态网页,你爬取到的只是一个基本框架而已。
    你可以用f12 然后检测一下http请求,基本上获取到的都是第一个请求。
    后面的数据都是通过js修改后的网页。
    交互式的。所以要想做复杂爬虫,还得了解web,js,css,xpath,还有http等等。
    最开始还是找一些静态网页做实验吧。

    点赞 评论 复制链接分享

为你推荐