items.py
pipelines.py
settings.py
下面是取到的数据和json文件
拜托各位大神帮忙看一下，谢谢！
scrapy用pipelines输出中文到json文件，能取到数据，但是json文件中是空的
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
- 2021-05-19 19:48回答 4 已采纳 原因可能是这个网址的网页跳转，无法获取到数据，尝试更改网址，重写xpath或css。
- 2021-06-26 13:47回答 1 已采纳 这是一个JSON数组，JSON里面不能空行，否则转换可能会出问题。
- 2017-07-22 15:42回答 1 已采纳 http://www.cnblogs.com/rwxwsblog/p/4567052.html
- 2018-08-13 10:31起飞并不晚的博客 items.py pipelines.py settings.py 下面是取到的数据和json文件 拜托各位大神帮忙看一下，谢谢！ 问题我找到了，在第一张图片def parse()方法最后加上yield item 就能写入了。...
- 2018-03-14 09:42回答 1 已采纳 使用 JSON 函数需要导入 json 库：import json
- 2021-12-14 09:34回答 1 已采纳 with open(r'ccgpwin_2021\publishTime','r') as f: preservationTime = f.readline() 有帮助请采纳
- 2021-08-06 10:14回答 2 已采纳 你在代码里面print(response)看看输出什么内容
- 2022-11-07 20:42论搬砖的艺术的博客 Scrapy 获取数据保存为json文件
- 2020-03-04 16:49回答 1 已采纳 在pipelines文件的内部，打印item，看看数据到底有没有获取到 连接数据库成功后，打印一个数据库内部的数据，看看是不是连接成功 大概率你没搞到数据，所以什么也没有写入
- 2020-06-05 16:06回答 1 已采纳 1.密码设置了吗 2.127.0.0.1改成localhost试试 3.我没招了
- 2020-09-05 13:48回答 1 已采纳 small_link = 'http:'+li.xpath('./@href').extract_first() 这里错了 response.urljoin(li.xpath('./@href')
- 2018-10-23 11:26qq_37138818的博客 1-Scrapy建立新工程 在开始爬取之前，您必须创建一个新的 Scrapy 项目。 进入您打算存储代码的目录中【工作目录】，运行下列命令，如下是我创建的一个爬取豆瓣的工程...首先，文件中有items.py，这个里面这要是...
- 2020-12-15 11:12回答 4 已采纳 兄弟，半个小时的辛苦 class CeshiSpider(scrapy.Spider): name = 'ceshi' api_headers = { 'Host'
- 2022-05-22 23:01前进中的飞鸟的博客 今日学习某平台课程，发现按照课程输入scrapy crawl qidian -o book.json，生成的book.json为空 文件，最后找到了原因，是因为在qidian.py里的parse函数末尾没写上return book 如何还是不行，是因为settings.py里...
- 2019-12-22 15:08优木的博客 本文是对《scrapy网络爬虫实战》一书中，第5.2节内容的重写，由于伯乐在线网站代码有较大改动，原书中代码已经失效。 以下示例演示了 抓取https://movie.douban.com/explore#!type=movie&tag=%E7 %83%AD%E9%...
- 没有解决我的问题, 去提问
悬赏问题
- ¥30 软件自定义无线电该怎样使用
- ¥15 R语言mediation包做中介分析，直接效应和间接效应都很小，为什么？
- ¥15 Jenkins+k8s部署slave节点offline
- ¥15 微信小游戏反编译后，出现找不到分包的情况
- ¥15 如何实现从tello无人机上获取实时传输的视频流，然后将获取的视频通过yolov5进行检测
- ¥15 WPF使用Canvas绘制矢量图问题
- ¥15 用三极管设计一个单管共射放大电路
- ¥15 孟德尔随机化r语言运行问题
- ¥15 pyinstaller编译的时候出现No module named 'imp'
- ¥15 nirs_kit中打码怎么看(打码文件是csv格式)