日志信息里有网站访问成功，网站返回值200，url也能正常打印，就是没有结果，
Python 的scrapy爬取没有结果，没有报错，也没有结果，直接就返回空了，
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
stone_spider 2022-07-06 13:25关注那你在star_requests中还有parse中打印一下，是否把正确的数据解析出来，并且yiled了
解决 无用评论 打赏举报 分享
- 2021-12-20 01:08回答 1 已采纳 http: 去那里啦?
- 2021-08-03 18:51回答 2 已采纳 找到原因了，是要在setting中加上MEDIA_ALLOW_REDIRECTS = True，貌似是中间件的内容，我还没学到，所以不清楚什么意思，有大佬可以解释一下吗看所有日志后会发现其实有地方报错
- 2022-04-28 23:20回答 7 已采纳 如果你不记得改了什么的话，重装吧。毕竟你改了啥，怎么改回去就只有神才知道了。环境里面的.py文件改了的话基本没什么方法，除了重装。按报错来看，playwright, pyee,twisted,win3
- 2021-01-13 23:05阮晶的博客 [#-*-coding:utf-8-*-from scrapy import Spiderfrom scrapy.http import Requestfrom scrapy.selector import Selectorfrom douban.items import DoubanMovieItemclass Douban(Spider):name='douban'start_urls=['....
- 2022-02-17 10:28回答 3 已采纳 js加载的，先打印看下获取的整个网页。我试了下，在下图这个位置可以找到视频链接，可以用正则或者别的方法取出来
- 2022-09-17 21:20回答 2 已采纳 你可以参考下这篇文章：scrapy框架中的Request()、FormRequest()、FormRequest.from_response()的小结
- 2022-01-04 16:58回答 1 已采纳 这位博友情况跟你的有点类似，你可以借鉴一下 https://blog.csdn.net/weixin_35757704/article/details/120706276
- 2024-03-21 22:43有梦生的博客 使用scrapy爬取58同城的数据，发现xpath路径正确，第一次运行确实可以输出数据，但是第二次运行后却返回了一个空列表，代码如下。3.设置headers,添加cookie,以及UA，如果有referer的话也添加进去。又因为第一次运行...
- 2021-05-26 16:56回答 2 已采纳 你的数据清洗方法用错了，参考一下：https://blog.csdn.net/qq_43004728/article/details/84586628，如有帮助，望采纳
- 2021-12-07 21:42回答 1 已采纳 流程通了细节没改 import copy from scrapy import Request from scrapy.spiders import Spider class AniRank(S
- 2021-11-27 19:50回答 1 已采纳 1.需要传cookies参数,2.data数据的即字典的值都要写成字符串。获取json后再从中用bs4解析出数据。参考如下代码： import requests cookies = { 'P
- 2020-03-14 12:07Dwlufvex的博客 详解学习爬取网站
- 2019-11-15 23:52回答 2 已采纳 import scrapy #引入容器 from scrapytest.NewsItems import NewsItem 改为 from scrapytest.items import Ne
- 2020-09-21 21:48Xin学数据的博客 这个会在检查完环境之后，开启爬虫准备爬取时显示出错误，看到403，一般就是被反爬了，先检查一下请求头。 2.2 items没传、少传值或者不对应 报错：KeyError: 'DoubanItem does not support field: title1' ...
- 2022-02-23 12:11爱编程的莲莲猫的博客 近期需要爬取一些关于银行的新闻，...正常pip install scrapy就行，可能会遇到各种各样的报错，把错误复制到百度，一堆解决方案，这里就不赘述了。 2.scrapy项目创建 我想在E:\PythonProject\Crawl_Eastmoney_news下
- 没有解决我的问题, 去提问
问题事件
创建了问题
7月6日
悬赏问题
- ¥15 封装的 matplotlib animation 不显示图像
- ¥15 python摄像头画面无法显示
- ¥15 关于#3d#的问题：d标定算法(语言-python)
- ¥15 cve，cnnvd漏洞扫描工具推荐
- ¥15 图像超分real-esrgan网络自己训练模型遇到问题
- ¥15 如何构建全国统一的物流管理平台?
- ¥100 ijkplayer使用AndroidStudio/CMake编译，如何支持 rtsp 直播流?
- ¥15 用js遍历数据并对非空元素添加css样式
- ¥15 使用autodl云训练，希望有直接运行的代码(关键词-数据集)
- ¥50 python写segy数据出错