越人清歌知为谁℡ 2013-12-30 10:04
浏览 374
已采纳

求批量插入和更新Excel导入数据高效解决方法~

需求:
导入Excel(上万条记录),每一行数据对应表(table_product)的一条记录。 导入时先读取Excel,并将数据insert到table_product表,同时insert到记录表,当barcode存在则做update操作。(barcode是Excel中的某一列的值)。
现有的处理方式很脑残:
[code="java"]
Action处理:
List list = new ArrayList();
Map map = excelReader.readExcelContent(is);
for (int i = 1; i <= map.size(); i++) {
list.add(map.get(i));
}
1、循环读取Excel,并将Excel的记录保存到一个ArrayList当中。
这一步的操作是否存在效率问题? ArrayList和Map是否合适?

service层处理方法:
for (int i = 0; i < list.size(); i++) {
String[] str = list.get(i);
// 查询数据是否存在
coll = findByBarCode(str[count]);
if (null != coll) {
//存在,做更新操作
update();
}else{
//不存在,做插入操作
insert();
drinsert(); //插入记录表
}
}
[/code]

这种方式很无脑,效率极低,求提出优化方案。

  • 写回答

6条回答 默认 最新

  • chaodilei 2014-01-02 16:42
    关注

    建一个临时表,先把所有的数据都用jdbc batch insert插入。再搞个store procedure 处理两个表就行了。在导入的时候作判断太花时间,没必要

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(5条)

报告相同问题?

悬赏问题

  • ¥15 安卓adb backup备份应用数据失败
  • ¥15 eclipse运行项目时遇到的问题
  • ¥15 关于#c##的问题:最近需要用CAT工具Trados进行一些开发
  • ¥15 南大pa1 小游戏没有界面,并且报了如下错误,尝试过换显卡驱动,但是好像不行
  • ¥15 没有证书,nginx怎么反向代理到只能接受https的公网网站
  • ¥50 成都蓉城足球俱乐部小程序抢票
  • ¥15 yolov7训练自己的数据集
  • ¥15 esp8266与51单片机连接问题(标签-单片机|关键词-串口)(相关搜索:51单片机|单片机|测试代码)
  • ¥15 电力市场出清matlab yalmip kkt 双层优化问题
  • ¥30 ros小车路径规划实现不了,如何解决?(操作系统-ubuntu)