如何将csv文件批量存入mysql数据库中

问题遇到的现象和发生背景

如何将csv文件批量存入mysql数据库中，因为数据量比较大（一个文件最多有10万+条数据），所以想找一个比较快速的方法

用代码块功能插入代码，请勿粘贴截图

我的解答思路和尝试过的方法

之前尝试过用python，pandas读取csv，再用pymysql逐条插入数据库表中，但是感觉速度太慢了
用DataGrip的导入功能比较快，但是不知道如何才能自动化插入操作！

我想要达到的结果

需要将4000多只股票的每日成交数据导入到MySQL数据库！

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除
收藏举报

4条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
CSDN专家-sinJack 2022-10-25 19:21
关注
用数据库客户端导入，可以将sql、csv等类型数据导入。

本回答被题主选为最佳回答 , 对您是否有帮助呢?

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

查看更多回答(3条)

报告相同问题？

关注问题

如何将csv文件批量存入mysql数据库中 mysql 数据库有问必答自动化
2022-10-25 19:05

回答 4 已采纳用数据库客户端导入，可以将sql、csv等类型数据导入。
多个CSV文件数据导入mysql数据库中的一张表中 big data mysql
2021-07-13 12:54

回答 1 已采纳是应该一一对应，但是你如果字段都是一样，可以直接用INSERT INTO 目标表 SELECT * FROM 来源表这种方式
将CSV文件导入mysql数据库 mysql php
2015-07-11 21:23

回答 1 已采纳 Edited Code; $db = new PDO('mysql:host=localhost;dbname=apdatabase', 'root', ''); $db->exec("S
Python批量读取csv文件数据，存入mysql
2022-06-28 22:21

解纷和光的博客提取某个文件夹下所有csv文件数据导入mysql数据库
csv不同数据插入MySQL数据库错误 mysql python 数据库
2023-03-15 00:16

回答 3 已采纳 csv本质上就是个文本文档，只不过扩展名改了一下而已你要往里面写数字，也应该转成str类型写入永远不要往里面直接写int型，那它变成二进制文件了你就读不出来了此外，cursor.executemany
如何在PHP中将csv数据插入到mysql数据库中 mysql php
2016-06-22 09:05

回答 1 已采纳 Well the problem is you have mixed up two of the functions . One is deprecated and the other one i
mysql workbEnch 导入csv文件出现报错 mysql 数据库有问必答
2021-12-02 18:04

回答 2 已采纳用bgk编码导入数据表再处理，或者建一个新的csv文件，把内容拷贝过去，再导入。
spring批量写入mysql数据库_快速使用组件-spring batch(3)读文件数据到数据库
2021-02-04 20:58

Homo Ludens的博客 tags： springbatch1.引言上一篇文章《快速了解组件-spring batch(2)之helloworld》对Spring Batch...典型操作是从文本数据(csv/txt等文件)中读取数据，然后写入到数据库存储。如下图所示：读文件流程若需要开发此过...
后端代码实现读取csv文件并存入数据库 java
2022-08-22 19:04

回答 6 已采纳有项目吗，直接发给我，给你加上你要的功能。
不会修改代码，使得代码可以批量将csv文件插入数据库中去 python 开发语言数据库有问必答
2022-08-12 10:19

回答 3 已采纳 1、检查连接配置信息是否正确2、找到调用的地方，加点日志信息3、读取数据、循环、判断的地方可能不满足条件等
将巨大的CSV文件上传到MySQL数据库脚本 mysql php
2014-02-25 13:41

回答 2 已采纳 Instead of using the information above I used the following Javascript, plus php code. Basically
mysql导入dat文件_.dat导入数据库
2021-01-14 09:41

悠玲的博客 SQL Server中bcp命令的用法以及数据批量导入导出0.参考文献：SQL Server BCP使用小结bcp Utility某社区600万用户数据导入MYSQL、MSSQL、Oracle数据库方法SELECT INTO 和 INSERT INTO SELECT 两种表复制语句1.bcp命令...
如何将csv数据集存入sql server数据库 python sql 机器学习
2021-05-08 00:14

回答 1 已采纳用sqlserver就可以导入了。如果要用编程语言的话，要先读取数据，再要配置列名，再写sql文
Java向mysql批量存储数据_java大批量数据导入（MySQL）
2021-01-27 01:39

weixin_39967096的博客内存溢出：将文件中的数据全部取出放在集合中，当数据过多时就出现Java内存溢出，此时可通过调大JVM的最大可用内存(Xmx)解决，但终究不是王道。MySQL支持一条SQL语句插入多条记录的操作，并且效率比单条插入快的不是...
批量导入大数据以及数据去重，CSV多线程导入100w数据
2021-06-15 23:10

nutQ2019的博客解决： 1）将文件以流的形式存入磁盘中，然后通过多线程去分区读取（使用FileChannel、RandomAccessFile实现）； 2）根据分区读取的内容数量进行数据库连接的调用，因此不会造成网络传输压力大的问题； 3）分批插入...
没有解决我的问题, 去提问

问题事件

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
系统已结题 11月2日
关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
已采纳回答 10月25日
关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
创建了问题 10月25日

悬赏问题

¥15 对于squad数据集的基于bert模型的微调
¥15 为什么我运行这个网络会出现以下报错？CRNN神经网络
¥20 steam下载游戏占用内存
¥15 CST保存项目时失败
¥15 树莓派5怎么用camera module 3啊
¥20 java在应用程序里获取不到扬声器设备
¥15 echarts动画效果的问题，请帮我添加一个动画。不要机器人回答。
¥15 Attention is all you need 的代码运行
¥15 一个服务器已经有一个系统了如果用usb再装一个系统，原来的系统会被覆盖掉吗
¥15 使用esm_msa1_t12_100M_UR50S蛋白质语言模型进行零样本预测时，终端显示出了sequence handled的进度条，但是并不出结果就自动终止回到命令提示行了是怎么回事：