weixin_43541668
2021-08-07 13:04
采纳率: 100%
浏览 146
已结题

关于使用python实现的网页爬虫程序卡死的问题

想实现一个爬虫,可以抓取指定网页中的内容。

但是由于网络、本机等等原因,很容易就造成程序卡死,也试着找各种方法解决,都未实现。

现在的思路是:

写一个定时器(比如说10min),让程序每隔10min重新运行一次,同时杀死正在运行的程序。
现状:使用了schedule模块,但是这个好像是程序运行结束的10min后运行一次。

这个问题烦了好多天,自己的思路可能比较初级,如果有更好的方法,也是可以的。

还有,最好是用实例的形式,太专业我感觉自己理解会有困难。

  • 写回答
  • 好问题 提建议
  • 追加酬金
  • 关注问题
  • 邀请回答

3条回答 默认 最新

  • 尘世镜花恋 2021-08-07 15:44
    最佳回答

    你可以用time模块进行计时,每过10分钟先用os.system()重新打开程序,然后调用sys.exit()关闭旧进程
    如果有用,希望采纳哦~

    评论
    解决 无用
    打赏 举报
查看更多回答(2条)

相关推荐 更多相似问题