在scrapy中能不能进行多次post请求？

大佬们好，在scrapy中只能请求一次post吗，就是使用start_requests能成功一次,再使用别的方法进行第二次请求别的链接就不行了。比如start_requests中成功登陆某网站，然后在后续的操作中需要post操作，以获取其他的数据，应该如何操作呢？

写回答
好问题 0 提建议
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

1条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
梦想橡皮擦 Python领域优质创作者 2020-12-13 13:06
关注
通过scrapy 可以多次发送 post 请求的，在start_requests方法中通过 yield 去调用另一个方法即可

本回答被题主选为最佳回答 , 对您是否有帮助呢?

解决无用
评论打赏
分享
举报
编辑

预览
轻敲空格完成输入
显示为

卡片

标题

链接
评论

按下Enter换行，Ctrl+Enter发表内容

编辑

预览

报告相同问题？

关注问题

python装scrapy库装上了但是不能用 python
2022-12-30 07:18

回答 2 已采纳你可以参考下这个问题的回答, 看看是否对你有帮助, 链接: https://ask.csdn.net/questions/7478137我还给你找了一篇非常好的博客，你可以看看是否有帮助，链接：pyt
python3 scrapy Request 请求时怎么保持headers 的参数首字母不大写 python 数据挖掘
2019-05-15 08:44

回答 1 已采纳在spider文件中spider类的上面写下不希望首字母大写的header ``` from twisted.web.http_headers import Headers as TwistedH
scrapy框架能不能阻塞某一个请求，等其他的请求全部结束在执行这个请求呢 python 爬虫
2021-08-25 01:27

回答 3 已采纳不会啊，传参+回调函数，不会导致数据流错乱的。回调函数只是处理上一层调用回调函数的时传入的参数/url
Python3网络爬虫开发实战（15）Scrapy 框架的使用（第一版）
2024-09-17 05:30

Bigcrab__的博客 scrapy 使用介绍
怎么解决Python中scrapy导入出错的问题？ pycharm python
2021-07-14 14:31

回答 1 已采纳看提示是说没有 crawl 命令，要解决这个问题，需要确保2点： 1.把爬虫.py复制到spiders文件夹里如执行scrapy crawl demo ,spiders里面就要有demo.py文件
Python中scrapy.FormRequest老是返回400错误响应 python
2022-09-17 13:20

回答 2 已采纳你可以参考下这篇文章：scrapy框架中的Request()、FormRequest()、FormRequest.from_response()的小结
关于#pythonscrapy#的问题，如何解决？ python 开发语言爬虫
2023-04-02 08:26

回答 2 已采纳好问题！！抱歉我也不太懂，你问问chatGPT吧：https://new.quke123.com/ 或者其他Python群友：https://app.yinxiang.com
python爬虫--Scrapy框架--Scrapy+selenium实现动态爬取
2022-04-12 17:08

JayceeeQAQ的博客 python爬虫–Scrapy框架前言框架结构 start -> 爬虫提交链接request给middlewares -> middlewares发送request给网页 -> middlewares发送response给爬虫 ->爬虫解析response返回的对象 -> pipeline...
scrapy框架怎么新建？，能不能教一下 python
2021-07-25 11:52

回答 1 已采纳在目录下敲命令新建啊scrapy startproject xxx项目名
scrapy中请求携带json与request有什么区别？【赏】 python
2020-12-15 03:12

回答 4 已采纳兄弟，半个小时的辛苦 class CeshiSpider(scrapy.Spider): name = 'ceshi' api_headers = { 'Host'
python爬虫scrapy python 有问必答
2021-07-22 02:03

回答 2 已采纳看下数据是否是动态加载的，多抓几次包，分析下；可能需要通过添加page参数，进行爬取！
scrapy 模拟登陆
2022-07-10 23:37

「已注销」的博客 python 模拟登录豆瓣并发表动态：https://blog.csdn.net/freeking101/article/details/65445551 python网络爬虫之使用scrapy自动登录网站：...Scrapy笔记(11)- 模拟登...
六万字带你一次性速通python爬虫基础
2022-03-04 13:56

跳探戈的小龙虾的博客网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。...
python网络爬虫爬取音频python课程设计.zip
2024-03-29 07:01

8. **部署与测试**：在Windows 10/11环境下，学习如何部署爬虫项目，以及进行功能测试和性能测试，确保在实际环境中能正常运行。 9. **文件操作**：学会如何在Python中读写文件，管理和组织抓取到的音频文件，这...
爬虫教程（ 2 ） --- scrapy 教程、实战
2020-08-31 16:46

擒贼先擒王的博客 scrapy 教程、实战
没有解决我的问题, 去提问

在scrapy中能不能进行多次post请求？

1条回答 默认 最新

1条回答默认最新