mysql千万级load data 效率如何提升?

数据库:mysql
操作系统:linux
cpu:4
内存:32G

如表:tababc, 10个col,按时间月分区。表已有数据过亿。表本身做了压缩处理。
现 load data 数据,单文件5000W条记录,load 到表中后,时间大概90min分钟。

测试过将文件切割500W每份,整体效率提升并不明显。

有没有什么好的方法能提高load data 入库的方法。

(mysql 采用的是innodb引擎,buffer给了20G左右。)

csdn_credit
csdn_credit 遇到了相同的问题,楼主怎么解决的
接近 2 年之前 回复

1个回答

关闭binlog
改日志提交模式0

Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
立即提问
相关内容推荐