急急急！java实现将txt文件数据导入数据库中。百万级别的数据。各位有什么好的办法吗
6条回答
jia2jiayuan 2018-04-29 02:55关注首先这些数据是不是规范数据？如果规范的话，可以这么做
1. 通过 head 命令等其他工具查看文件前几行数据，分析规律，主要包括 字段的分隔符是什么，字段属性是什么，字段对应的列名是什么？
2. 通过Java缓存、获取文件句柄，然后每次读取一行到缓存中，如果没有创建表结构先创建表结构，分割每行字符，然后拼接成对应sql语句，然后通过for循环执行 sql语句插入数据，如果这些数据都是可信的
3. 为了插入的高效，可以一次插入 多个数据 value(),... 还有暂停这个库的所有连接、查询等其他服务
4. 不推荐使用多线程进行操作，防止发生死锁现象，这么大的数据，毕竟纯粹的IO流，依次插入既可以保证一致性也可以出错快速定位出错在哪一行
5. 如果数据不遵守规范，哈哈，放弃治疗吧，孩子，哈哈，祝你好运评论 打赏解决 3无用举报
分享
- 2018-06-21 13:22回答 4 已采纳 ``` =>这个是js、C#的写法 java是 -> ```
- 2021-01-12 15:40回答 5 已采纳 看下是你想要的效果不
- 2017-06-02 11:35回答 1 已采纳 代码如下： buttonSubmit是提交按钮，nameText是姓名文本框，hobbyText是爱好文本框。 ``` buttonSubmit.addActionListener(ne
- 2021-04-15 16:17pigutau的博客 如何用java向指定的EXCEL单元格中写入数据？1.java操作excel三方开源包很多，比如poi，javaExcel，OpenXls等；2.你可以上述的某个包，然后直接看它的API就ok了，单元格内容是最基础的方法，很容易的。希望对你有所...
- 2015-06-24 14:30回答 4 已采纳 用 myeclipse 10 以上做吧 挺简单的，直接求代码，，不太好吧
- 2019-04-25 15:21回答 1 已采纳 页面表单 ``` ``` 页面赋值 ``` $(document).ready(function(){ var t = "${asset.wbTime!,'yyyy-MM-d
- 2018-11-15 06:39回答 2 已采纳 其实就是2进制的base64编码，你要想将base64字符转为2进制，在输出或者保存就行了，asp.net已经解码出来，java的看这个 https://blog.csdn.net/qq_35
- 2021-03-06 02:31weixin_39576270的博客 java实现把csv文件导入到sqlserverjava实现把csv文件中的数据导入的sqlserver数据库中，由于初学java很多可以通过BufferedReader 流的形式进行流缓存，之后通过readLine方法获取到缓存的内容。 BufferedReader bre =...
- 2017-01-17 02:10回答 9 已采纳 1.如果你在控制台输出，建议使用分段打印，手动操作的方式； 如：在每打印100条休息一下，你既可以看，也可以清除； 休息的代码可以是：Thread.sleep(3000);//休息3秒，也可
- 2021-06-22 08:59回答 2 已采纳 首先得用数组将成绩装起来，然后再实现右侧功能
- 2017-01-11 03:43回答 8 已采纳 构造方法是可以使用泛型的。支持泛型的两种写法： ```java public class Test { public Test(T z) { } } ``` 这种写法表
- 2021-03-16 18:45明星训练基地的博客 注意我的模板中只有一个变量，如果你的模板也是只有一个变量其他都不用改了，到这步就可以了，如果有两个或以上变量就需要修改SmsApiHttpSendTest.java类中的param参数了。 然后运行SmsApiHttpSendTest.java这个类就...
- 2021-06-21 11:21回答 1 已采纳 代码如下： #include <stdio.h> struct Student { int nmb; char name[20]; int score[3]; }; //录入数据
- 2024-04-22 21:032301_79125431的博客 破二本，第一次面试，一个小时多一点，面试官感觉没睡醒，但是还是问了不少问题，基本上都是我一个人在说，写在前面：前端后端的同学都需要哈，前端的技术栈我不太懂，后端的话卡Java方向~苍穹外卖，牛客论坛，
- 2021-01-28 03:33weixin_32243075的博客 我的mysql数据库版本是是5.7.26，但是导入驱动时，找不到5.7.26，导入是5.1.13最后出错的信息是org.mybatis.spring.MyBatisSystemException: nested exception is org.apache.ibatis.exceptions....
- 2021-02-16 11:40upward337的博客 部署运维 案例资料 jar包 配置文件 页面 数据库设计 user表数据： INSERT INTO `user`(`id`,`name`,`gender`,`age`,`address`,`qq`,`email`) VALUES (1,'张三','男',13,'陕西','12345','zhangsan@itcast.cn');...
- 2021-01-28 00:42八决子的博客 我的mysql数据库版本是是5.7.26，但是导入驱动时，找不到5.7.26，导入是5.1.13最后出错的信息是org.mybatis.spring.MyBatisSystemException: nested exception is org.apache.ibatis.exceptions....
- 2020-01-07 17:56NewBee.Mu的博客 java菜鸟，刚刚入行，如果有哪里不对，欢迎指正，谢谢！ ---------------------------------------------------------------分割线--------------------------------------------------------------------- 首先，...
- 2016-05-23 09:53小扁加油的博客 刚学easyui，使用datagrid数据不显示，页面数据空白，但记录数对的, myeclipse项目, 读取大量数据文件更新到数据库。, 关于表单提交后跟ajax请求, java web上传文件功能的问题, solr高亮问题, java web上传文件到...
- 2021-06-18 14:03hero_is_me的博客 文章目录前言一、SSA二、GTTP1.逐个看下基本类2.模拟上面的mybatis#getMapper获取代理对象3.查看mybatis源码，证明模拟的理论总结 前言 劳歌一曲解行舟，红叶青山水急流。日暮酒醒人已远，满天...关于mybatis实现jdk
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 乘性高斯噪声在深度学习网络中的应用
- ¥15 运筹学排序问题中的在线排序
- ¥15 关于docker部署flink集成hadoop的yarn，请教个问题 flink启动yarn-session.sh连不上hadoop，这个整了好几天一直不行，求帮忙看一下怎么解决
- ¥30 求一段fortran代码用IVF编译运行的结果
- ¥15 深度学习根据CNN网络模型，搭建BP模型并训练MNIST数据集
- ¥15 C++ 头文件/宏冲突问题解决
- ¥15 用comsol模拟大气湍流通过底部加热（温度不同）的腔体
- ¥50 安卓adb backup备份子用户应用数据失败
- ¥20 有人能用聚类分析帮我分析一下文本内容嘛
- ¥30 python代码，帮调试，帮帮忙吧