m0_65736405
2021-12-27 21:48
采纳率: 85.7%
浏览 115
已结题

python爬取所有K线速度太慢

爬取数据的速度太慢,完全不符合量化交易的需求。
我的思路是从交易网站上的API获取所有币种的信息,然后筛选出我想要分析其数据的币种,大约有1400个,然后将币种名称用for循环填入到获取K线的的代码中,这个时候就发现,爬取速度比较慢了,获取一个币种的K线需要3秒左右,如果再加上后面还需要获取其他的数据,再加上大量的策略判断,速度就会变得非常非常慢了,我的需求是如何解决这个问题?通过多进程?多线程?如果可以,请在我的代码上进行修改,太过抽象的方法我可能不懂,因为是0基础接触python的第5天~

img

按照楼下说的把该PY文件分成多个,然后同时运行,确实能够解决问题,电脑也完全能够负荷,但是怎样才能一键同时启动10个PY文件?

img

  • 写回答
  • 好问题 提建议
  • 追加酬金
  • 关注问题
  • 邀请回答

4条回答 默认 最新

  • 橙子树下 2021-12-27 22:12
    最佳回答

    把这个文件复制n份,每份for循环部分币种,同时开始运行,相当于物理多线程,效果就看你电脑性能

    评论
    解决 无用
    打赏 举报
查看更多回答(3条)

相关推荐 更多相似问题