python3.7,使用request基础爬虫可以爬到数据，用scrapy爬出内容为空，使用同样的xpath语法。亲手纠正错误！
items文件
spider文件
pipelines文件
setting文件
同样的xpath语法，用request基础爬虫可以爬到数据，用scrapy爬出内容为空。
- 写回答
- 好问题 0 提建议
- 关注问题
分享- 邀请回答
-
3条回答 默认 最新
- 2024-12-21 14:41风是无色的河的博客 scrapy是一个用python编写的开源网络爬虫框架，用于高效地从网站上抓取信息并提取结构化数据。特点：速度快、简单、可扩展性强。
- 2024-03-07 05:52在这个Python爬虫项目实战中，我们主要探讨了如何利用Scrapy框架抓取手机今日头条App的数据，并将这些数据存储到MongoDB数据库中。这个过程涵盖了多个关键知识点，包括Python编程、网络爬虫技术、Scrapy框架的使用...
- 2022-03-16 11:11Scrapy是用Python编写的开源Web抓取框架，它包括了爬取网页、解析响应、处理数据等爬虫开发的各个环节。Scrapy的核心组件有以下几个： 1. **Spider（蜘蛛）**：是Scrapy的主要工作单元，负责定义如何从一个或多个...
- 2023-11-20 11:25向之 所欣的博客 CrawlSpider可以定义规则，再解析html内容的时候，可以根据链接规则提取出指定的链接，然后再向这些链接发 送请求所以，如果有需要跟进链接的需求，意思就是爬取了网页之后，需要提取链接再次爬取，使用CrawlSpider...
- 2024-01-03 23:54【标题】"我的毕业设计爬虫，python、scrapy" 涉及的是使用Python的Scrapy框架进行网络数据抓取的项目。Scrapy是一个强大的、开源的爬虫框架，适用于构建复杂的网络爬虫系统。它由Python编写，提供了一系列方便的API...
- 2025-10-04 19:32数据牧羊人的成长笔记的博客 目录Scrapy的介绍Scrapy的优势Scrapy的架构安装Scarpy开发第一个爬虫创建第一个项目文件说明创建第一个爬虫爬虫包含的内容Scrapy项目的启动介绍Scrapy启动-命令启动scrapy命令方法1方法2Scrapy输出日志-了解Scrapy ...
- 2022-08-03 19:37Syc1102g的博客 Scrapy 框架:scrapy 架构组成、scrapy 工作原理、response 常用的方法、 scrapy shell、pipelines 管道封装、yield 关键字、开启单/多管道、日志信息和日志等级、scrapy 的 post请求、设置代理、 CrawlSpider、写...
- 2023-09-19 07:50秃了也弱了。的博客 Scrapy 是一个为了抓取网页数据、提取结构性数据而编写的应用框架，该框架是封装的，包含 request （异步调度和处理）、下载器（多线程的 Downloader）、解析器（selector）和 twisted（异步处理）等。对于网站的...
- 2023-06-25 11:07瓦瓦卡卡的博客 使用scrapy框架实现租房数据的爬取
- 2025-08-12 09:25Monkey-旭的博客 本文系统介绍了Python网络爬虫的开发与应用，主要内容包括：1. 爬虫基础知识：工作原理、Python优势、应用场景；2. 核心工具库：Requests/BeautifulSoup请求与解析、Selenium处理动态页面；3. 实战案例：豆瓣电影Top...
- 没有解决我的问题, 去提问
问题事件
创建了问题
7月20日