mysql大量数据批量插入的问题

preparedment提供了addBatch进行批量处理，这个有数据量的最大阈值吗？插入多少条数据量会开始降速？

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

2条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
老紫竹 2021-07-15 09:01
关注
兼顾时效性和内存使用，一般1万-100万是合适的。
数据太大了，还是load吧。

本回答被题主选为最佳回答 , 对您是否有帮助呢?

解决 1
无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

查看更多回答(1条)

报告相同问题？

关注问题

mysql大量数据批量插入的问题 mysql
2021-07-14 19:56

回答 2 已采纳兼顾时效性和内存使用，一般1万-100万是合适的。数据太大了，还是load吧。
关于mysql中数据插入时间过慢问题 mysql 大数据
2018-05-14 14:01

回答 19 已采纳如是普通PC级服务器（或是更好一点的消费级服务器），你每条数据平均占用时间为40MS，考虑到你的每条数据有900多列。这样的话，已经不慢了。如想更快的话： 1、查看是否有索引，索引是以降低插
mysql批量插入数据怎么生成uuid？ mysql sql
2021-12-22 20:55

回答 1 已采纳先uuid查出来,然后再在外面套一层replace是可以的,见下图的测试
C++操作MySQL大量数据插入效率低下的解决方法
2020-09-04 08:40

综上所述，解决C++操作MySQL大量数据插入效率低下的问题，主要依赖于事务管理、批量操作、预处理语句、数据库配置优化以及合理使用数据库特性。通过这些方法，可以显著提升数据插入的效率，满足高性能的数据处理需求...
egg-mysql怎么批量操作数据 mysql node.js 数据库
2022-03-02 16:48

回答 1 已采纳一般这种工具都会提供自定义sql执行的,比如 const results = yield app.mysql.query('update posts set status = 1 where id i
关于mysql使用存储过程插入大量数据的问题 mysql
2015-03-16 08:09

回答 4 已采纳最好的办法是把文件组织成CSV格式，然后用LOAD DATA infile导入mysql，适合批量。性能也好
java多线程批量插入数据报错 java mysql spring boot
2022-04-24 18:32

回答 11 已采纳如果你是springboot项目，像你说的那个批量处理数据什么的，你就用他自带的多线程方法ThreadPoolTaskExecutor，去处理，最后.join的方式加入到主线程，你只需要处理数据网数据
MySql 快速插入千万级大数据的方法示例
2020-09-09 01:28

本文将探讨如何优化这一过程，以实现快速插入，并通过具体的Java多线程和MySQL批量插入策略来提升性能。首先，我们需要理解传统的逐条插入方式在大数据量下效率极低，因为它涉及到频繁的数据库交互，这会消耗大量...
python 批量插入mysql 如何把list分隔开来 mysql python
2019-04-10 20:37

回答 2 已采纳第26行，`listxixi.append(aa+bb+cc+dd)`，改成`listxixi.append([aa, bb, cc, dd])`。你的sql写的也有点问题，前面五个字段，后面四个占位
mysql ,insert语句插入多条数据 mysql
2022-06-07 18:49

回答 1 已采纳内部的每个括号，放的不是应该是一行的值么？你怎么放的一列？而且不要放主键
mysql数据同步到大数据后通过查询大数据实现报表的实时展示 big data java mysql 有问必答
2021-09-18 10:38

回答 4 已采纳你好像描述的有些问题吧？为什么查询大数据展示？你口中的大数据指定到底是什么？如果你是学习大数据（hadoop相关），使用java语言在做数仓项目，那么你可以参考一下这张图查询数据一般从数据库里面查
MySQL优化：批量插入大数据4种实用、讲究方案的测试
2022-03-29 10:09

丰丶的博客记录MySQL插入大数据一些方案的测试心得，即for循环插入、拼接SQL语句、批量插入saveBatch()、循环插入 + 开启批处理模式，该4种情况的测试内容，最终以平均耗时来预测各方案的性能问题，可得知开启批处理模式的方案...
大量mysql数据查询，优化到秒出 java mysql 大数据
2022-12-07 17:18

回答 4 已采纳使用 instr函数试试看 ,查询 like '%121%' select * from test t where instr(t.requestdata,'121')> 0;
Node.js下向MySQL数据库插入批量数据的方法
2020-12-16 11:48

批量插入数据不仅可以提高性能，还可以降低数据库的负载，尤其适用于大量数据的导入场景。在实践中，应当根据实际需求选择合适的批量大小，以平衡性能和内存消耗。此外，务必确保在操作完成后关闭数据库连接，避免...
asp下实现批量插入数据的方法
2021-01-20 08:11

例如，在SQL Server中，可以使用`BULK INSERT`命令或`INSERT INTO...SELECT`语句一次性插入大量数据。在MySQL中，可以利用`LOAD DATA INFILE`命令快速导入数据。这些方法通常比逐条插入更高效，尤其适用于大数据量的...
没有解决我的问题, 去提问

问题事件

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
已采纳回答 7月15日
关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
创建了问题 7月14日

悬赏问题

¥15 网络科学导论，网络控制
¥100 安卓tv程序连接SQLSERVER2008问题
¥15 metadata提取的PDF元数据，如何转换为一个Excel
¥15 关于arduino编程toCharArray()函数的使用
¥100 vc++混合CEF采用CLR方式编译报错
¥15 coze 的插件输入飞书多维表格 app_token 后一直显示错误，如何解决？
¥15 vite+vue3+plyr播放本地public文件夹下视频无法加载
¥15 c#逐行读取txt文本，但是每一行里面数据之间空格数量不同
¥50 如何openEuler 22.03上安装配置drbd
¥20 ING91680C BLE5.3 芯片怎么实现串口收发数据

mysql大量数据批量插入的问题

2条回答 默认 最新

问题事件

悬赏问题

2条回答默认最新