请问读TXT文本文件,再更新到数据库。有什么好的优化方案?

文本文件大小在30MB左右,数据行有十几万条。
每条数据更新状态需要记录。

现在的做法是每读一条数据就更新一次,但是这样速度就会很慢。
请问大家有什么的优化方法?

2个回答

我是这样做的:
1.解析文件。按照规则解析文本文件,将解析后的结果按照ResultSet的形式进行存放,给设定一个游标,跟操作jdbc差不多。

2.从内存中一条一条地写入数据库。写入时用Batch的方式。操作数据库的代码最好由自己完成。

oracle,mysql是可以直接导入文本文件到表的。
就算是你自己写。你也要放缓存里批量插入数据库啊。10万一提交都可以,速度很快。10万也是几秒内的事情。

Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
立即提问
相关内容推荐