m0_65736405 2021-12-27 21:48 采纳率: 85.7%
浏览 125
已结题

python爬取所有K线速度太慢

爬取数据的速度太慢,完全不符合量化交易的需求。
我的思路是从交易网站上的API获取所有币种的信息,然后筛选出我想要分析其数据的币种,大约有1400个,然后将币种名称用for循环填入到获取K线的的代码中,这个时候就发现,爬取速度比较慢了,获取一个币种的K线需要3秒左右,如果再加上后面还需要获取其他的数据,再加上大量的策略判断,速度就会变得非常非常慢了,我的需求是如何解决这个问题?通过多进程?多线程?如果可以,请在我的代码上进行修改,太过抽象的方法我可能不懂,因为是0基础接触python的第5天~

img

按照楼下说的把该PY文件分成多个,然后同时运行,确实能够解决问题,电脑也完全能够负荷,但是怎样才能一键同时启动10个PY文件?

img

  • 写回答

4条回答 默认 最新

  • 橙子树下 2021-12-27 22:12
    关注

    把这个文件复制n份,每份for循环部分币种,同时开始运行,相当于物理多线程,效果就看你电脑性能

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(3条)

报告相同问题?

问题事件

  • 系统已结题 1月9日
  • 已采纳回答 1月1日
  • 修改了问题 12月28日
  • 创建了问题 12月27日

悬赏问题

  • ¥20 steam下载游戏占用内存
  • ¥15 树莓派5怎么用camera module 3啊
  • ¥20 java在应用程序里获取不到扬声器设备
  • ¥15 echarts动画效果的问题,请帮我添加一个动画。不要机器人回答。
  • ¥15 Attention is all you need 的代码运行
  • ¥15 一个服务器已经有一个系统了如果用usb再装一个系统,原来的系统会被覆盖掉吗
  • ¥15 使用esm_msa1_t12_100M_UR50S蛋白质语言模型进行零样本预测时,终端显示出了sequence handled的进度条,但是并不出结果就自动终止回到命令提示行了是怎么回事:
  • ¥15 前置放大电路与功率放大电路相连放大倍数出现问题
  • ¥80 部署运行web自动化项目
  • ¥15 腾讯云如何建立同一个项目中物模型之间的联系