code_peasent 2021-10-13 18:38 采纳率: 0%
浏览 35
已结题

scrapy 卡死问题，进程都无法使用ctrl+c退出

爬虫在爬取百万级的数据的时候，会没有理由的卡死，程序进程还在，但是cpu、内存使用率为0，ctrl+c也无法结束，用py-spy也看不到有任何操作

img

  • 写回答

1条回答 默认 最新

  • Mint.Coder 2021-10-14 09:01
    关注

    是不是爬着爬着，程序就不动了？

    评论

报告相同问题？

问题事件

  • 已结题 （查看结题原因） 8月25日
  • 创建了问题 10月13日

悬赏问题

  • ¥15 sqlite 附加（attach database）加密数据库时，返回26是什么原因呢？
  • ¥88 找成都本地经验丰富懂小程序开发的技术大咖
  • ¥15 如何处理复杂数据表格的除法运算
  • ¥15 如何用stc8h1k08的片子做485数据透传的功能？(关键词-串口)
  • ¥15 有兄弟姐妹会用word插图功能制作类似citespace的图片吗？
  • ¥200 uniapp长期运行卡死问题解决
  • ¥15 latex怎么处理论文引理引用参考文献
  • ¥15 请教：如何用postman调用本地虚拟机区块链接上的合约？
  • ¥15 为什么使用javacv转封装rtsp为rtmp时出现如下问题：[h264 @ 000000004faf7500]no frame？
  • ¥15 乘性高斯噪声在深度学习网络中的应用