岁月冲淡々 2022-01-10 22:15 采纳率: 16.7%
浏览 97

scrapy 爬虫 运行没反应

运行没反应，是什么原因

![img](###### 问题遇到的现象和发生背景

问题相关代码，请勿粘贴截图
运行结果及报错内容
我的解答思路和尝试过的方法
我想要达到的结果https://img-mid.csdnimg.cn/release/static/image/mid/ask/222360428146168.png "#left")
  • 写回答

1条回答 默认 最新

  • Mint.Coder 2022-01-11 12:15
    关注

    你需要在scrapy目录下使用此命令

    评论

报告相同问题？

  • scrapy爬虫翻页操作，python+scrapy python 其他 有问必答
    2021-04-02 17:02
    回答 3 已采纳 # 导入所需库 import requests class Jdcomment_spider(object): # 请求头 headers = { 'User-A
  • python scrapy爬虫如果想要下一页但是没有href python 爬虫
    2022-12-14 00:18
    回答 1 已采纳 你要模拟参数，具体代码如下： import http.client conn = http.client.HTTPSConnection("chl.cn") #page 5 #submit 下一页
  • scrapy如何手动停止爬虫？ python
    2021-05-10 09:54
    回答 1 已采纳 Ctrl+C 只是终止主线程,你的其他线程没有守护,所以 Ctrl+C 后它们继续运行。   另外scrapy中的 Ctrl+C 是暂停，并不是完全停止，Ctrl+C 是断点续爬的基础。  
  • Scrapy爬虫框架详解（python）
    2024-07-06 23:16
    WishYouAFortune的博客 Scrapy，Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。...Scratch，是抓取的意思，这个Python的爬虫框架叫Scrapy，大概也是这个意思吧，就叫它：小抓抓吧。
  • scrapy爬虫无法翻页 python 有问必答
    2021-05-06 08:49
    回答 5 已采纳 代码中的allow_domains有误，应该为：['louqiuzw.com']。原链接会出现连接丢失错误，与没有传递headers或网页响应慢有关。尝试测试其他网页，在start_urls列出测试网
  • python爬虫scrapy python 有问必答
    2021-07-22 10:03
    回答 2 已采纳 看下数据是否是动态加载的，多抓几次包，分析下；可能需要通过添加page参数，进行爬取！
  • 请问为什么，我无法创建scrapy爬虫项目 python 爬虫
    2022-02-07 19:41
    回答 1 已采纳 库安装失败了
  • 完整版Python网络爬虫之Scrapy爬虫框架使用案例教程含源代码共18页.pdf
    2021-06-19 20:22
    Scratch，是抓取的意思，这个Python的爬虫框架叫Scrapy，大概也是这个意思吧，就叫它：小刮刮吧。 小刮刮是一个为遍历爬行网站、分解获取数据而设计的应用程序框架，它可以应用在广泛领域：数据挖掘、信息处理和或者...
  • scrapy怎么没打印数据？ python
    2021-07-21 12:31
    回答 3 已采纳 allowed_domains = ["jobui.com"] 好像是不要WWW 或者这个直接 不写 allowed_domains = ["jobui.com"]
  • scrapy 爬虫大量链接返回None不知道为啥 python
    2020-05-29 14:50
    回答 2 已采纳 200说明成功了，返回None是因为你返回值本来就设置成None，或者没设置返回值导致python默认返回None
  • flask+scrapy的爬虫问题 flask json python 爬虫
    2018-01-29 07:55
    回答 3 已采纳 你拿到参数后先写一个bat批处理 scrapy crawl myspider -a category=electronics 再 os.system(r'xx.bat') 来调用 https://d
  • 基于Python的Scrapy爬虫框架设计源码
    2024-04-18 15:09
    本项目是基于Python的Scrapy爬虫框架设计源码，包含22个文件，其中主要包含12个py源代码文件，4个xml配置文件等。系统采用了Python编程语言，实现了网站爬虫的功能，可以高效地抓取网站数据。项目结构清晰，代码...
  • scrapy模块进行爬虫报错 python 爬虫
    2022-12-27 23:14
    回答 1 已采纳 望采纳！点击该回答右侧的“采纳”按钮即可采纳！！！我猜测可能是因为没有在你的项目目录下创建这个模块，或者是你在项目的 settings.py 文件中没有指定正确的模块路径。你需要确保在你的项目目录下有
  • Python之scrapy爬虫文件
    2022-11-29 12:36
    **Python之Scrapy爬虫文件**是针对Python编程语言中著名的Web爬虫框架Scrapy的深入学习资料。Scrapy是一个高效、强大的爬虫框架，它为开发者提供了完整的爬取、解析网页以及存储数据的解决方案。本文件包包含了多个...
  • Python scrapy 爬虫入门（三）scrapy 爬虫示例
    2021-01-20 03:32
    1 爬虫示例 要实现爬虫功能，只要执行四个步骤： 定义spider 类 确定 spider 的名称（name） 获取初始化请求（start_request） 解析数据 parse() 1.1 示例1 重写 start_request() 方法 示例1：重写 start_request() ...
  • 没有解决我的问题, 去提问

问题事件

  • 创建了问题 1月10日

悬赏问题

  • ¥15 想用@vueuse 把项目动态改成深色主题，localStorge里面的vueuse-color-scheme一开始就给我改成了dark,不知道什么原因（相关搜索：背景颜色）
  • ¥20 OPENVPN连接问题
  • ¥15 flask实现搜索框访问数据库
  • ¥15 mrk3399刷完安卓11后投屏调试只能显示一个设备
  • ¥100 如何用js写一个游戏云存档
  • ¥15 ansys fluent计算闪退
  • ¥15 有关wireshark抓包的问题
  • ¥15 需要写计算过程，不要写代码，求解答，数据都在图上
  • ¥15 向数据表用newid方式插入GUID问题
  • ¥15 multisim电路设计