第一张是我的代码，第二张是终端运行的结果，想问一下是哪出了问题
1条回答 默认 最新
关注这种问题一般都是解析数据的时候出的问题。
你在你的代码里面加上一些print，看一下是否获取到了数据，然后解析的时候，是否成功解析了。
如果没有成功解析，你爬取的那几个值就都是空，爬虫也算是正常执行完毕了。
如果获取数据和解析都没有问题的话，那你就该看看写入到csv文件那里的配置了。
一步步来，排查一下就好了解决 无用评论 打赏举报
分享
- 2018-02-09 09:34回答 3 已采纳 1. 把整个爬取到的网页内容直接存储到数据库肯定是可以的，你之所以没有成功，应该是因为你的数据库中的相应字段错了，整个网页内容都比较长，一般都是要用text字段，甚至是LongText)（最大长度42
- 2021-11-21 21:19回答 1 已采纳 你用open打开csv文件，然后以字符串格式写入就行了，每个数据之间用英文逗号隔开即可
- 2022-12-14 00:18回答 1 已采纳 你要模拟参数，具体代码如下： import http.client conn = http.client.HTTPSConnection("chl.cn") #page 5 #submit 下一页
- 2024-02-02 11:43本教程将聚焦于如何使用Python来爬取微博热搜数据，从而深入理解Python爬虫的基本原理和实践应用。 首先，Python作为一门简洁且功能强大的编程语言，其丰富的库资源使得爬虫开发变得简单易行。在爬取微博热搜时，...
- 2021-09-05 19:18回答 2 已采纳 那叫ajax，
- 2021-08-03 18:51回答 2 已采纳 找到原因了，是要在setting中加上MEDIA_ALLOW_REDIRECTS = True，貌似是中间件的内容，我还没学到，所以不清楚什么意思，有大佬可以解释一下吗看所有日志后会发现其实有地方报错
- 2021-05-23 20:32回答 2 已采纳 你已经爬到图片连接了，这个看到的管道文件的代码怎样写，要对图片链接发送请求访问，然后保存才行
- 2019-06-14 23:29本文将深入探讨“爬取用户微博数据热搜”这一主题，结合压缩包内的资源，包括系统部署说明和系统演示PPT，来解析其中涉及的关键知识点。 首先，我们需要了解的是**爬虫的基本原理**。爬虫是一种自动化程序，它模拟...
- 2021-07-07 23:48回答 1 已采纳 scrapy得出的响应内容是在network的doc里面，如图 如果对你有帮助，可以点击我这个回答右上方的【采纳】按钮，给我个采纳吗，谢谢
- 2021-12-04 01:41回答 1 已采纳 img_url = div.xpath('./div/a/img/src').extract_first() src前面少了 @ 改成 img_url = div.xpath('./
- 2021-12-20 01:08回答 1 已采纳 http: 去那里啦?
- 2024-02-03 20:43【描述】：“此项目是关于如何使用Python编程语言构建一个爬虫，以抓取并分析新浪微博上的数据。爬虫技术在大数据时代对于获取社交媒体信息、进行网络数据分析具有重要意义。通过这个项目，你可以学习到如何利用...
- 2022-02-17 10:28回答 3 已采纳 js加载的，先打印看下获取的整个网页。我试了下，在下图这个位置可以找到视频链接，可以用正则或者别的方法取出来
- 2024-06-17 10:53在Python编程领域，爬虫是一项常见的任务，尤其在社交媒体数据挖掘中扮演着重要角色。本教程将探讨如何使用Python编写一个微博爬虫，批量获取指定账号的数据。由于微博平台不断更新其技术，防止非法抓取数据，因此...
- 2024-05-30 05:44Python是一种非常适合编写网络爬虫的编程语言，因为其语法简洁且有许多强大的库支持，如BeautifulSoup和Scrapy。在这个项目中，我们可能使用requests库来发送HTTP请求获取网页内容，然后用BeautifulSoup解析HTML或...
- 没有解决我的问题, 去提问
问题事件
创建了问题
12月17日
悬赏问题
- ¥15 关于redhat虚拟机系统新建卷的问题
- ¥50 WRFDA读取风云四号A 星的GIIRS数据
- ¥15 C# 爬虫融通金网址实时银价
- ¥15 热敏电阻NTC，温控不同颜色的LED的亮与灭，PCB
- ¥20 ESP32使用MicroPyhon开发，怎么获取485温湿度的值，温湿度计使用的鞋子是Modbus RTU
- ¥50 苹果MGIE项目部署缺少emb权重
- ¥15 采用ansys进行机翼在特定路径下的打孔过程中的受力分析
- ¥15 单片机adb主机连接手机，usb调试密钥无法保存
- ¥15 已知X和Y有以下关系，求X和Y的关系式
- ¥15 net core 同时编辑怎么防止数据多保存了