关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
π¢
2022-03-09 08:39
采纳率: 66.7%
浏览 211
首页
Python
已结题
Python爬虫requests反还内容与网页内容不相同
python
从网络预览可以看到,内容应该是一个列表,使用标头里的请求网址之后,返还的却是一个网页源码,这是为什么呢?
收起
写回答
好问题
0
提建议
关注问题
微信扫一扫
点击复制链接
分享
邀请回答
编辑
收藏
删除
收藏
举报
4
条回答
默认
最新
关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
爱音斯坦牛
优质创作者: 编程框架技术领域
2022-03-09 09:54
关注
看一下网页里内容是啥,无关内容就是被反爬了,因为这是ajax请求,你直接抓报请求,header头部可能会反爬,有时还要加cookie,referer,csrf等
本回答被题主选为最佳回答
, 对您是否有帮助呢?
本回答被专家选为最佳回答
, 对您是否有帮助呢?
本回答被题主和专家选为最佳回答
, 对您是否有帮助呢?
解决
无用
评论
打赏
微信扫一扫
点击复制链接
分享
举报
评论
按下Enter换行,Ctrl+Enter发表内容
查看更多回答(3条)
向“C知道”追问
报告相同问题?
提交
关注问题
Python
爬虫
实战:抓取与解析网站文本
内容
2024-11-18 00:55
内容
概要:本文介绍了一个用
Python
实现的
爬虫
实例,主要分为环境准备、编写基本
爬虫
代码、高级
爬虫
(如模拟登录)三个部分。文章详细讲解了如何利用
requests
和 BeautifulSoup4 库进行网页请求与HTML解析,提取所...
Python
的网络
爬虫
与
反
爬虫
策略
2024-12-20 20:51
网络
爬虫
是一种自动化程序,用于从互联网上抓取、分析和提取数据。它能够模拟浏览器行为,按照设定的规则自动浏览网页并抓取所需信息。...发送请求使用
requests
库向目标网站发送HTTP请求,获取页面
内容
。
python
爬虫
爬网页部分
内容
空白,但源码可以看到,已解决
2020-12-22 19:08
奇怪的同一个网站同一个榜单,只是页数不同,前若干页能爬取,后若干页就爬取不了,一度怀疑是不允许爬。 最后终于发现原因! 因为Cookie找错了(kao!!!!!) 注意要用这里的cookie! (下图是Chrome的开发者...
Python
爬虫
:
Requests
与Beautiful Soup库详解
2025-06-29 22:07
Pu_Nine_9的博客
本文介绍了
Python
爬虫
的两个核心库
Requests
和Beautiful Soup的基本用法
python
爬虫
requests
返回
网页内容
为空_
python
爬虫
使用
requests
请求无法获取网页元素时终极解决方案...
2020-11-20 20:55
weixin_39705065的博客
原博文2020-06-14 19:28 −爬取数据时,有时候会出现无法通过正常的
requests
请求获取
网页内容
,导致数据无法抓取到,遇到这种情况时,可以换种思路去爬取数据,使用PhantomJS,即
爬虫
终极解决方案去获取页面元素。...
python
爬虫
的概要介绍与分析
2024-11-22 10:35
此
Python
爬虫
项目旨在抓取特定网站(如BBC新闻)的首页新闻标题和链接,并将其保存到本地文件中。该项目展示了如何使用
requests
和BeautifulSoup库来抓取
网页内容
,并提取特定的信息。这是一个基础但功能齐全的
爬虫
...
【
Python
爬虫
技术】
Python
爬虫
基础教程与案例:涵盖环境搭建、基础实现、案例实战及
反
爬虫
策略
2025-07-16 22:31
内容
概要:本文档《
Python
爬虫
基础教程与案例》详细介绍了
Python
爬虫
的基础知识、实现方法及应用案例。首先解释了
爬虫
的概念及其工作原理,包括发送请求、获取响应、解析
内容
、存储数据和处理新链接等步骤,并强调了...
Python
爬虫
入门实例:利用
requests
和BeautifulSoup抓取网页标题
2024-12-25 10:17
内容
概要:本文详细介绍了如何使用
Python
的
requests
和BeautifulSoup库构建一个简单的网络
爬虫
,主要步骤包括发送HTTP请求、解析HTML
内容
并提取特定的HTML标签。通过实例代码展示,读者可以快速掌握从网站上提取信息...
python
中
requests
爬去
网页内容
出现乱码问题解决方法介绍
2020-12-25 08:45
最近在学习
python
爬虫
,使用
requests
的时候遇到了不少的问题,比如说在
requests
中如何使用cookies进行登录验证,这可以查看这篇文章。这篇博客要解决的问题是如何避免在使用
requests
的时候出现乱码。 import ...
Python
网页
爬虫
实例 - 使用
Requests
和 BeautifulSoup 抓取文章标题和链接
2024-10-30 23:13
内容
概要:本文介绍了一个用
Python
编写的简单网页
爬虫
示例。主要涉及使用
requests
库发送 HTTP 请求和使用 BeautifulSoup 库解析 HTML
内容
。通过具体的代码示例,演示了如何从一个博客网站抓取文章的标题和链接...
没有解决我的问题,
去提问
向专家提问
向AI提问
付费问答(悬赏)服务下线公告
◇ 用户帮助中心
◇ 新手如何提问
◇ 奖惩公告
问题事件
关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
系统已结题
3月18日
关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
已采纳回答
3月10日
关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
修改了问题
3月10日
关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
创建了问题
3月9日