能AI的就不动手 2023-05-21 23:08 采纳率: 100%
浏览 22
已结题

python处理超大csv转成excel

一个csv大约500M，1000多万行，只有几列，纯数字。
excel工作表只能放104万行，所以要分块写入多个工作表
我用python处理一个大约1小时太慢了。

把csv切割成104万行小块的csv，速度很快1分钟不要。
就是写入excel太慢，有啥好办法吗
谢谢。
图片下面我写的代码
比较笨拙，请指教

img

  • 写回答

4条回答 默认 最新

  • 於黾 2023-05-22 09:20
    关注

    既然已经切成好多文件了，那用线程池啊，把cpu的几个核都充分利用起来，别让它闲着

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(3条)

报告相同问题？

问题事件

  • 系统已结题 6月6日
  • 已采纳回答 5月29日
  • 修改了问题 5月22日
  • 创建了问题 5月21日

悬赏问题

  • ¥15 HBuilderX打包H5网页，扫码模块无法使用
  • ¥15 Javascript跳转页面后，无法执行后面代码，如何解决？
  • ¥15 echarts绘制图表
  • ¥15 请教两个关于高德地图定位不准的技术问题
  • ¥15 根据企业名称 对照两个文件 样本筛选/匹配
  • ¥15 Linux环境下CA证书更新问题
  • ¥15 sqlserver语句提取结果以外数据
  • ¥60 微信小程序如何上传QQ聊天文件
  • ¥300 开发的系统遭到无良商家的破解，请问如何防止再次发生，并追回损失
  • ¥15 java代码写在记事本上后在cmd上运行时无报错但又没生成文件