m0_65736405 2021-12-27 21:48 采纳率: 85.7%
浏览 128
已结题

python爬取所有K线速度太慢

爬取数据的速度太慢,完全不符合量化交易的需求。
我的思路是从交易网站上的API获取所有币种的信息,然后筛选出我想要分析其数据的币种,大约有1400个,然后将币种名称用for循环填入到获取K线的的代码中,这个时候就发现,爬取速度比较慢了,获取一个币种的K线需要3秒左右,如果再加上后面还需要获取其他的数据,再加上大量的策略判断,速度就会变得非常非常慢了,我的需求是如何解决这个问题?通过多进程?多线程?如果可以,请在我的代码上进行修改,太过抽象的方法我可能不懂,因为是0基础接触python的第5天~

img

按照楼下说的把该PY文件分成多个,然后同时运行,确实能够解决问题,电脑也完全能够负荷,但是怎样才能一键同时启动10个PY文件?

img

  • 写回答

4条回答 默认 最新

  • 橙子树下 2021-12-27 22:12
    关注

    把这个文件复制n份,每份for循环部分币种,同时开始运行,相当于物理多线程,效果就看你电脑性能

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(3条)

报告相同问题?

问题事件

  • 系统已结题 1月9日
  • 已采纳回答 1月1日
  • 修改了问题 12月28日
  • 创建了问题 12月27日