os系统，python3.6，根据这个15年的学习贴
http://blog.csdn.net/u012150179/article/details/32911511
一字不差的输入，然后死活不能正常运行
小白求大神
新手学scrapy ，sys.exit(execute()) 以泪崩，求指导
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
2条回答 默认 最新
- 2021-07-26 15:56回答 2 已采纳 这个就是正常爬完了的日志信息吧，没啥问题啊
- 2020-07-03 11:16回答 4 已采纳 考虑网页的内容使用了ajax，使用右键-》查看网页源代码，看是否仍然能获得指定的内容
- 2022-09-17 21:20回答 2 已采纳 你可以参考下这篇文章：scrapy框架中的Request()、FormRequest()、FormRequest.from_response()的小结
- 2019-07-13 18:22一只瘦熊啊的博客 运行环境： pyhton-3.6 scrapy-1.6.0 爬虫启动报错： Traceback (most recent call last): File "/usr/local/bin/scrapy", line 10, in <... sys.exit(execute()) File "/usr/local/lib/python3.6/dist-packag...
- 2020-07-13 19:48回答 1 已采纳 先打印response看看和你在网页上看到的一样吗？？
- 2022-05-06 00:26回答 2 已采纳 你应该继承 scrapy.SpiderCrawlSpider 不要自定义 parse 函数。
- 2021-07-22 10:03回答 2 已采纳 看下数据是否是动态加载的，多抓几次包，分析下；可能需要通过添加page参数，进行爬取！
- 2021-01-19 15:08三头六臂的小白的博客 图片非常大，请耐心等一下。 图片详细介绍了 在使用 "scrapy crawl xxx" 启动命令背后的工作。 cmdline.py excute的这里可以看做整个...import sys import os import optparse import cProfile import inspect i..
- 2022-01-03 10:32回答 1 已采纳 self.xidian_next_page确定有值吗
- 2021-08-03 18:51回答 2 已采纳 找到原因了，是要在setting中加上MEDIA_ALLOW_REDIRECTS = True，貌似是中间件的内容，我还没学到，所以不清楚什么意思，有大佬可以解释一下吗看所有日志后会发现其实有地方报错
- 2021-04-02 17:02回答 3 已采纳 # 导入所需库 import requests class Jdcomment_spider(object): # 请求头 headers = { 'User-A
- 2016-12-02 22:57self-motivation的博客 通过前四篇教程，相信大家对scrapy的总流程和核心组件都有了一定...还是以scrapy crawl xxxSpider命令为例，结合代码进行讲解。 首先，来看一下scrapy命令的实现: /usr/local/bin/scrapy: 代码很简单，只是执行
- 2022-04-28 23:20回答 7 已采纳 如果你不记得改了什么的话，重装吧。毕竟你改了啥，怎么改回去就只有神才知道了。环境里面的.py文件改了的话基本没什么方法，除了重装。按报错来看，playwright, pyee,twisted,win3
- 2020-12-03 03:12weixin_39552472的博客 I'm using Ubuntu 14.04 x64, I've followed the Scrapy docs to install the package using pip:pip install scrapyThen I followed the initialization of the example project and try to execute the example s....
- 2024-03-27 14:22叶梦璃愁的博客 对Scrapy执行命令的流程进行源码分析，实现能在 项目外运行 Scrapy 项目
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 用visual studi code完成html页面
- ¥15 聚类分析或者python进行数据分析
- ¥15 逻辑谓词和消解原理的运用
- ¥15 三菱伺服电机按启动按钮有使能但不动作
- ¥15 js，页面2返回页面1时定位进入的设备
- ¥50 导入文件到网吧的电脑并且在重启之后不会被恢复
- ¥15 （希望可以解决问题）ma和mb文件无法正常打开，打开后是空白，但是有正常内存占用，但可以在打开Maya应用程序后打开场景ma和mb格式。
- ¥20 ML307A在使用AT命令连接EMQX平台的MQTT时被拒绝
- ¥20 腾讯企业邮箱邮件可以恢复么
- ¥15 有人知道怎么将自己的迁移策略布到edgecloudsim上使用吗？