现在都是动态网页,你爬取到的只是一个基本框架而已。
你可以用f12 然后检测一下http请求，基本上获取到的都是第一个请求。
后面的数据都是通过js修改后的网页。
交互式的。所以要想做复杂爬虫，还得了解web，js，css，xpath，还有http等等。
最开始还是找一些静态网页做实验吧。
python爬虫 爬虫的网站源码不齐全怎么办
http://192.168.101.213:7027/swagger-ui.html#/26631209343164929702
用f12打开看到的源码
和用beautifulsoup get到的源码不一样 没法进行爬取
- 点赞
- 写回答
- 关注问题
- 收藏
- 复制链接分享
- 邀请回答
1条回答
-
502203305 2年前
点赞 评论 复制链接分享
为你推荐
- python小说爬虫 缺少必须位置参数，求大佬解答
- python
- 1个回答
- 网页爬虫，F12可以看到的内容，但爬出来的源码里没有
- python
- 1个回答
- scrapy + selenium抓取到的网易云页面不完整
- 开发语言
- python
- 1个回答
- 【scrapy爬虫问题】scrapy.xpath解析返回的结果有问题，求解答！！！
- python
- 1个回答
- python 新手，因写论文需要微博爬虫，下载别人的代码自己跑，有一段执行其他目录下的python文件的代码，会报错。
- python
- 新浪微博
- 1个回答
- python爬取动态网页时为什么动态网页的url的源码和网页源码不一样？
- 正则表达式
- python
- html5
- 1个回答
- 同一个页面，选择查看网页源代码时看不到这部分内容，但是单机这部分内容选择检查时可以看到源码，爬虫获取内容时如何获取这部分内容？
- python
- 1个回答
- 这爬虫怎么了？为什么老是报错？
- python
- 3个回答
- python爬虫 爬虫的网站源码不齐全怎么办
- python
- 1个回答
- python3爬取的内容可以print但是写入本地文件失败，但测试发现写入语句没有问题
- python
- 2个回答
- urllib里是否实现了DNS缓存？
- dns
- urllib
- python
- 爬虫
- 3个回答
- Python爬虫、requests库的get方法，带上headers后出现编码错误
- 编码
- python
- 爬虫
- 库
- 4个回答
- python爬虫获取源码与网页不同
- python
- 爬虫
- 1个回答
- python爬取动态网址时如何获取发送的参数
- python
- 1个回答
- 求助，python 解析爬取的网页源码中的json部分
- 网页源码
- 2个回答
- 请问用BeautifulSoup如何获取p标签内的值
- beautifulsoup
- python
- 爬虫
- 1个回答
- 求一个可用的爬虫程序源码
- 商品网站信息
- 源码
- 2个回答
- Python爬虫爬取网页源代码为空，求问原因&解决方案（向）
- python
- 爬虫
- 解决方案
- 5个回答
- 在ubuntu系统下使用python制作爬虫获取网页运行完js后的网页源码！
- python
- 爬虫
- 1个回答