postgre大数据量插入效率提高，请大牛现身

我往postgre数据库里插入100万条数据，数据以csv文件方式读入前端java、设置1000条提交一次。数据库表结构在store_code ，character varying(4)和goods_stk_no，character varying(30)建主键，并且这两个字段是索引，当数据为1001,100000000000000000000000000000时，执行时间为11至13分钟，当数据为GT01，GOODSN000000000000000000000001时，执行时间为3分钟，大大缩短，请问这是怎么回事呢？可以从什么方向上改进？

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

3条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
M44346460 2014-01-28 22:02
关注
如果你只是想着把数据导入的话，那我会建议你不要用sql导入，直接以文本的方式导入。速度至少是用SQL导入的10倍都不止！

本回答被题主选为最佳回答 , 对您是否有帮助呢?

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

查看更多回答(2条)

报告相同问题？

关注问题

postgre大数据量插入效率提高，请大牛现身
2014-01-28 10:29

回答 3 已采纳如果你只是想着把数据导入的话，那我会建议你不要用sql导入，直接以文本的方式导入。速度至少是用SQL导入的10倍都不止！
连接上了数据库，执行了insert动作，但是数据库没有插入的数据 c# 数据库
2017-05-31 07:33

回答 2 已采纳上面数据库插入的代码根本没有执行去数据库插入数据这个事务，只是把数据库打开然后就关闭了什么也没操作啊。cmd.executeXXXXX()方法根本没有！
sql分组比较个数大小排序问题 mysql oracle sql
2022-01-27 11:11

回答 1 已采纳这个问题的核心其实是要先算出来每个学生的每种评分的次数，再进行次数的排序就可以了，可以看下下面的伪代码，用手机敲，看思路就可以： select * from ( select std ,sum(ca
往postgre插入大量数据
2019-03-12 13:57

fonlemon的博客我的目标是插入100000000万条数据经过实际操作，用以下方法，能在4分钟完成 declare ii integer; begin II:=1; FOR ii IN 1..100000000 LOOP INSERT INTO test1(id, test1, test2, test3, test4, test5, test...
postgre 一个字段多个值的模糊查询 postgresql
2022-12-27 20:55

回答 2 已采纳望采纳！点击该回答右侧的“采纳”按钮即可采纳！！！我觉得兄弟你可以使用 "ILIKE" 操作符来实现模糊匹配，并且它会忽略大小写。你还可以使用 "IN" 操作符来构建一个包含多个模糊匹配值的列表，这样
postgre 在指定字段后增加一个字段
2017-05-12 06:44

回答 2 已采纳 ALTER table 表名 add COLUMN 字段名类型 AFTER 字段名;
Java连接postgre数据库不能导入包 java postgresql sql
2022-03-26 20:20

回答 2 已采纳已经解决啦！！！谢谢csdn某热心楼主！
PostgreSQL数据库快速插入INSERT大量数据研究
2021-10-11 15:46

传而习乎的博客在PG上快速插入数据有几种方案？每种方案的效率怎么样？如何调优能加快的数据装载？场景设定 SQL日志分析是一个采集JDBC日志、分析SQL、发送分析结果工具。在分析阶段，需要解析大量的JDBC日志，并把解析后的结构...
postgre sql 初始化问题 postgresql 有问必答
2021-05-10 21:26

回答 3 已采纳应该是这个配置有问题/var/lib/pgsql/12/initdb.，你看看这个路径下的文件
Postgre报错Returning autogenerated keys is only supported for 8.2 and later servers java postgresql
2023-02-09 14:34

回答 4 已采纳升级JDBC驱动看看参考：http://t.csdn.cn/aWC6k
shedlock 从oracle迁移postgre，老是打印错误日志 java
2021-08-19 16:57

回答 1 已采纳知道为啥了，oracle迁移postgre的时候，发现表多了个约束，constraint，去掉之后就好了
快速批量插入1个亿的数据，适合大部分数据库的方法
2021-09-06 17:52

webmote的博客 ????欢迎点赞：???? 收藏 ⭐留言 ??... 如有错误敬请指正，赐人玫瑰，手留余香！...作者格言：生活在于折腾，当你不折腾生活时，生活就开始折腾你，让我们一起...对大部分数据库来说，批量插入数据都是比较简单的事情，最
postgresql中的数据如何同步到mysql里 mysql postgresql
2021-02-20 13:42

回答 3 已采纳自己用java就能写一个呀，也不难啊，而且可以用定时任务持续使用
PostgreSQL数据库导入大量数据时如何优化
2022-08-26 09:51

一个搬砖的程序猿的博客 PostgreSQL数据库导入大量数据时如何优化
PostgreSQL数据库如何快速插入大量数据
2017-12-11 12:57

wangzhen3798的博客在Abase上快速插入数据有几种方案，每种方案的效率怎么样？如何调优能加快的数据装载？场景设定SQL日志分析是一个采集JDBC日志、分析SQL、发送分析结果工具。在分析阶段，需要解析大量的JDBC日志，并把解析后的结构...
Sql循环插入数据-postgre
2020-06-16 10:01

天津赫本的博客 1.输出大写字母 select chr(int4(random()*26)+65); 2.输出随机整数 select floor(random()*10);...循环插入表 do $$ declare num integer = 1; begin while num < 10 loop insert into 表名 ...
Postgre数据库Insert 、Query性能优化详解
2021-01-19 23:07

插入效率简直实在无法忍受，必须优化。在了解了Postgre的Copy,unlogged table 特性之后，决定一探究竟。二、测试用例 1.数据表结构:表示一个员工工作绩效的表（work_test）：共15个字段id,no,name,sex,tel,...
postgre循环插入表数据
2019-01-14 10:20

Amos-Chen的博客 do $$ declare v_idx integer := 1; begin while v_idx < 96 loop INSERT INTO table(col1,col2) values (v_idx, 123); v_idx = v_idx + 1; end loop; end $$;
postgre插入数据错误: 日期/时间值超出范围:
2022-10-20 12:58

pipafu的博客解决方法：在备用机器的postgre配置文件的 postgresql.conf 中，有一个名为 datestyle 的设置。最近在备份传输postgre数据库数据时遇到时间插入问题，
没有解决我的问题, 去提问

悬赏问题

¥15 关于#c##的问题：最近需要用CAT工具Trados进行一些开发
¥15 南大pa1 小游戏没有界面，并且报了如下错误，尝试过换显卡驱动，但是好像不行
¥15 没有证书，nginx怎么反向代理到只能接受https的公网网站
¥50 成都蓉城足球俱乐部小程序抢票
¥15 yolov7训练自己的数据集
¥15 esp8266与51单片机连接问题(标签-单片机|关键词-串口)（相关搜索：51单片机|单片机|测试代码）
¥15 电力市场出清matlab yalmip kkt 双层优化问题
¥30 ros小车路径规划实现不了，如何解决？(操作系统-ubuntu)
¥20 matlab yalmip kkt 双层优化问题
¥15 如何在3D高斯飞溅的渲染的场景中获得一个可控的旋转物体

postgre大数据量插入效率提高，请大牛现身

3条回答 默认 最新

悬赏问题

3条回答默认最新