python爬虫 爬虫的网站源码不齐全怎么办

Question

http://192.168.101.213:7027/swagger-ui.html#/26631209343164929702

用f12打开看到的源码
和用beautifulsoup get到的源码不一样 没法进行爬取

Answer 1

现在都是动态网页,你爬取到的只是一个基本框架而已。
你可以用f12 然后检测一下http请求，基本上获取到的都是第一个请求。
后面的数据都是通过js修改后的网页。
交互式的。所以要想做复杂爬虫，还得了解web，js，css，xpath，还有http等等。
最开始还是找一些静态网页做实验吧。