mysql导入几亿数据磁盘IO读写过大?

各位大佬，小弟现在遇到一个情况，就是用原生命令导入一个200多G的sql文件，表只有主键索引，sql文件数据是insert ignore into开头的语句，每个insert会写入300行数据，现在在导入数据时发现读写IO需要80多M，占满了服务器磁盘性能，可是数据却导入很慢，基本上一个insert需要0.3s，想知道这个正不正常

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

2条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
「已注销」 2022-01-14 09:27
关注
MYSQL默认配置性能低下，只能通过并发下尝试调整参数配置来逐步优化数据库性能，并且使用压力测试工具loadrunner进行测试

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

MySQL导入数据后，日期数据发生变化，与原始数据不符，该如何解决？ database mysql 数据库
2022-05-12 09:24

回答 1 已采纳可以先把时间字段当varchar格式先导入临时表，在查询插入结果表
Mysql数据库的表数据存储在磁盘的什么位置？ mysql 数据库
2017-02-19 12:57

回答 4 已采纳这个本地的wins系统，应该在mysql/data/下面
mysql中怎样使用mysqldump导出导入有自增主键的数据？ mysql 有问必答
2021-07-22 10:27

回答 1 已采纳用navicat 直接转成csv，然后csv直接导入。
转载：Mysql 5.7磁盘IO过高如何解决？
2021-08-25 10:36

石头-豆豆的博客 Mysql 5.7磁盘IO过高如何解决？注：磁盘IO高分析工具 iostat 、iotop 等。 yum install -y sysstat # 安装iostat 工具 iostat -k -d -x 1 10 yum install -y iotop #安装iotop 工具 iotop 1、日志产生的性能影响:...
关于mysql中的数据导入hive的一些问题 ? centos linux mysql sql 数据挖掘
2019-09-06 23:57

回答 1 已采纳 https://www.cnblogs.com/xuyou551/p/7998846.html
navicat向mysql导入excel数据时候报错 mysql
2022-06-13 12:51

回答 2 已采纳如果空表导入也提示主键重复，说明你excel里的主键就重复excel导入之前先全选主键列，然后选择删除重复项，然后看哪一行变空白了
mysql数据表主键id自增导出导入问题 mysql 数据库
2018-11-27 02:53

回答 2 已采纳导出的时候就把id当做一个普通字段导出来，导出来的id肯定也是断裂的，和数据库一样的，导进去的时候也把id导入，值固定，应该就是和你导出来的一样了
MySQL数据库迁移快速导出导入大量数据
2021-01-19 23:01

数据库迁移是我们经常可遇到的问题，对于少量的数据，迁移基本上不会有什么问题。生产环境中，有以下情况需要做迁移工作：磁盘空间不够。比如一些老项目，选用的机型并不一定适用于数据库。随着时间的推移，硬盘很...
java读取mysql数据了过大，如何实现分页读取，求代码 java mysql
2018-08-01 02:26

回答 14 已采纳下面方法select(String page)的page是前台传到后台的，然后处理下page从数据库中分页顺序取出数据 public JSONArray select(String page) {
从mysql 导入 oracle?????? mysql oracle
2015-08-09 07:25

回答 4 已采纳感谢各位,最终问题为,mysql要导入的那个表字段长度为varchar(255),oracle那个表同一个字段长度为varchar2(255),重点来了,,,,,一个汉字在mysql中占三个字节,
MySQL表数据过多导出用Excel打开丢失部分数据怎么解决 mysql
2022-06-23 12:55

回答 2 已采纳建议可以使用csv格式导出，这是一个纯文本文件，数据肯定不会丢失的，如果数据存在分隔符冲突，也可以导出为txt格式，自己指定分隔符。然后手动分割数据到两个文件，再用Excle以指定的分隔符导入就可以了
一提到mysql，总有人说磁盘IO，到底什么是磁盘IO？
2022-05-11 19:06

向骄阳的博客为什么mysql的innodb存储引擎选择了B+树，这个和磁盘的特性有着非常大的关系。我们先来看下磁盘上的物理结构。如果我们简化一下，可以这么看再看几张模型图一个磁盘由大小相同且...
mysql查询语句in查不出为空的数据如何解决？ mysql sql
2023-01-10 15:54

回答 4 已采纳这里有几种解决方法可以让查询语句查出为空的数据： 1.在 IN 子查询中使用 UNION ALL 来将 NULL 值与其他值结合起来。这样，即使 IN 子查询中没有匹配的行，也会返回一个 NULL 值
mysql磁盘io高是什么造成_FAQ | 是什么导致MySQL数据库服务器磁盘I/O高（本文章来自知数堂）...
2021-03-04 05:06

天接云涛的博客 0、导读有个MySQL服务器的磁盘I/O总有过高报警，怎么回事？本文约1500字，阅读时间约10分钟。1、问题我的朋友小明，TA有个MySQL服务器最近总是报告磁盘I/O非常高，想着我这有免费的不用白不用的企业技术服务(TA自己...
mysql io 过高_MySQL占用IO过高解决方案
2021-01-19 09:57

六氟合铝酸钠的博客 1、日志产生的性能影响:由于日志的记录带来的直接性能损耗就是数据库系统中最为昂贵的IO资源。MySQL的日志包括错误日志(ErrorLog)，更新日志(UpdateLog)，二进制日志(Binlog)，查询日志(QueryLog)，慢查询日志...
没有解决我的问题, 去提问

问题事件

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
创建了问题 1月13日

悬赏问题

¥15 教务系统账号被盗号如何追溯设备
¥20 delta降尺度方法，未来数据怎么降尺度
¥15 c# 使用NPOI快速将datatable数据导入excel中指定sheet，要求快速高效
¥15 再不同版本的系统上，TCP传输速度不一致
¥15 高德地图点聚合中Marker的位置无法实时更新
¥15 DIFY API Endpoint 问题。
¥20 sub地址DHCP问题
¥15 delta降尺度计算的一些细节，有偿
¥15 Arduino红外遥控代码有问题
¥15 数值计算离散正交多项式

mysql导入几亿数据磁盘IO读写过大?

2条回答 默认 最新

问题事件

悬赏问题

2条回答默认最新