请问在scrapy shell调试中使用css完全无法提取数据是什么问题？

1.问题描述：今天爬取凤凰财经http://finance.ifeng.com/shanklist/1-64-/
，使用scrapy shell调试的时候，无论我用什么样的css语法都没法提取到数据，百度不到这样的问题，只好来求助了
（是初学者，目前只会css; xpath和正则在学习中）

2.代码部分

图片说明

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

2条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
拉灯的小手博客专家认证 2019-07-17 09:43
关注
首先确认下获取到的响应文件中有没有数据，有些网站数据是动态加载的有可能你肯定就没有获取到数据肯定就提取不到
如果确定有数据，在检查一下css语法有没有错误，
xpath很简单，正则最好用

解决 1

无用 1
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

怎么解决Python中scrapy导入出错的问题？ pycharm python
2021-07-14 22:31

回答 1 已采纳看提示是说没有 crawl 命令，要解决这个问题，需要确保2点： 1.把爬虫.py复制到spiders文件夹里如执行scrapy crawl demo ,spiders里面就要有demo.py文件
在 python scrapy爬虫框架：response.xpath（）的返回值是[ ],这个怎么解决？ python
2020-07-03 11:16

回答 4 已采纳考虑网页的内容使用了ajax，使用右键-》查看网页源代码，看是否仍然能获得指定的内容
关于#pythonscrapy#的问题，如何解决？ python 开发语言爬虫
2023-04-02 16:26

回答 2 已采纳好问题！！抱歉我也不太懂，你问问chatGPT吧：https://new.quke123.com/ 或者其他Python群友：https://app.yinxiang.com
Scrapy使用shell调试
2020-02-07 19:36

fswy的博客使用shell尝试爬取 $ scrapy shell https://www.zhipin.com/c101280100/ 2020-02-07 10:42:20 [scrapy.utils.log] INFO: Scrapy 1.8.0 started (bot: scrapybot) 2020-02-07 10:42:20 [scrapy.utils.log] INFO: ...
请问Python爬虫如何把爬取数据存入csv文件中 python 开发语言有问必答爬虫
2021-11-21 21:19

回答 1 已采纳你用open打开csv文件，然后以字符串格式写入就行了，每个数据之间用英文逗号隔开即可
scrapy 找不到txt文件是为什么？ python
2021-12-14 09:34

回答 1 已采纳 with open(r'ccgpwin_2021\publishTime','r') as f: preservationTime = f.readline() 有帮助请采纳
scrapy怎么没打印数据？ python
2021-07-21 12:31

回答 3 已采纳 allowed_domains = ["jobui.com"] 好像是不要WWW 或者这个直接不写 allowed_domains = ["jobui.com"]
Python爬虫---scrapy shell 调试
2024-01-13 18:49

velpro_!的博客可以使用它来测试xpath或css表达式，查看它们是如何工作的，以及它们从你试图抓取的网页中提取的数据。它允许你在编写spider时交互地测试表达式，而无需运行spider来测试每个更改。2. 直接输入scrapy shell 域名 ...
scrapy中把数据存储到MongoDB，运行也没出错怎么查找不到数据库呢？？？ mongodb python
2020-06-05 16:06

回答 1 已采纳 1.密码设置了吗 2.127.0.0.1改成localhost试试 3.我没招了
已经在cmd安装了scrapy，为什么import scrapy还是报错? python
2022-11-09 16:33

回答 2 已采纳在pycharm终端在安装一次就好了：
scrapy中请求携带json与request有什么区别？【赏】 python
2020-12-15 11:12

回答 4 已采纳兄弟，半个小时的辛苦 class CeshiSpider(scrapy.Spider): name = 'ceshi' api_headers = { 'Host'
Python爬虫（三）：scrapy提取数据之CSS提取器
2018-12-22 21:37

eook767117193的博客 scrapy提取数据的三种方法：CSS、XPATH、RE。这里学习一下怎么使用CSS提取器提取有用的数据。参考自http://www.scrapyd.cn/doc/。这里需要有一定的CSS基本，下面附上学习CSS的链接...
python爬虫scrapy python 有问必答
2021-07-22 10:03

回答 2 已采纳看下数据是否是动态加载的，多抓几次包，分析下；可能需要通过添加page参数，进行爬取！
scrapy shell 实践 | 交互式爬虫
2021-01-07 03:10

自CSDN学院课实践。前提：安装scrapy，配置好环境。主题：交互式爬虫shell命令实践。 C:\Users\32310>scrapy shell ...2020-02-19 16:01:34 [scrapy.utils.log] INFO: Versions: lxml 4.4.1.0, libxml2 2.9.5, css
Scrapy css选择器提取数据===留存用
2020-11-19 10:12

小赖同学啊的博客标签属性值的提取 href的值URL的提取：这是最常见的，我们要进入下一页、或是打开内容页……都少不了URL值，如下面这段HTML，我们来提取一下里面的URL <ol class="page-navigator"> <li class="current...
没有解决我的问题, 去提问

悬赏问题

¥15 thinkphp6配合social login单点登录问题
¥15 HFSS 中的 H 场图与 MATLAB 中绘制的 B1 场部分对应不上
¥15 如何在scanpy上做差异基因和通路富集？
¥20 关于#硬件工程#的问题，请各位专家解答！
¥15 关于#matlab#的问题：期望的系统闭环传递函数为G(s)=wn^2/s^2+2¢wn+wn^2阻尼系数¢=0.707，使系统具有较小的超调量
¥15 FLUENT如何实现在堆积颗粒的上表面加载高斯热源
¥30 截图中的mathematics程序转换成matlab
¥15 动力学代码报错，维度不匹配
¥15 Power query添加列问题
¥50 Kubernetes&Fission&Eleasticsearch

请问在scrapy shell调试中使用css完全无法提取数据是什么问题？

2条回答 默认 最新

悬赏问题

2条回答默认最新