如何实现百万级的数据快速入库，并且在入库前判断对应的记录是否已经存在，
如果存在则跳过该条记录，并且实现入库序列自增。
百万级数据oracle入库
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
4条回答 默认 最新
soulsoul_god 2017-11-17 10:05关注我先说说我的看法啊，仅供参考。这些数据是什么样的，是直接就在oracle数据库中，还是某个文件格式，按你的意思应该是后一种，如果是某种格式，比如data.txt的文件，如果数据文件格式都是一致的，可以通过sqlldr进行数据装载，后续的判断记录是否存在，可以再进行去重处理，然后在用sequence进行序列自增。不知道你要实现的是不是这样的？
解决 无用评论 打赏举报 分享
- 2022-01-22 11:02回答 2 已采纳 只在查询上加速的话,目前看上去只能加个并行试试了 select /*+ parallel(t,8)*/ * from 表名 t where t.身份证号='43000000000000000000'
- 2017-06-10 02:45回答 9 已采纳 select o.ORG_ID, o.rn from (select i.ORG_ID, rownum as rn from (SELECT ORG_ID FROM T
- 2021-05-19 09:08回答 2 已采纳 用hadoop
- 2018-11-01 14:19如此简单^_^的博客 面对大批量数据入库，通常有几种解决办法： 1.写java程序，用java批量导入数据库 2.sqlplus导入数据库 3.切分数据文件，变成小块，分批导入 4.使用dblink导入数据 5.sqldeveloper数据库复制 6.plsql command-windows...
- 2022-05-16 17:46回答 1 已采纳 -- ①、非级联方式： WITH zb AS ( SELECT '16559' zbbm, '' sj_zbbm, 1 zbcj, '一级指标' zbm
- 2022-02-08 22:00回答 3 已采纳 这sql优化我搞不出来了，改成代码里选用redis的典型应用场景解决了😂
- 2023-03-01 14:11回答 6 已采纳 看看这个可不可以如果不行，我再去找Oracle和MySQL数据类型映射官方文档：https://dev.mysql.com/doc/connector-j/8.0/en/connector-j-ref
- 2021-03-09 04:19Peter Tam的博客 业务：需要从一个数据库查询百万级数据，在java程序中插入到另一个oracle数据库中代码：private final int persize = 1000;/*** 推送数据-流程* @param tableCode 表名* @param startTime 开始时间* @param endTime ...
- 2022-03-11 22:15回答 1 已采纳 你and 和 or 在一层,就都变成or了,要加括号 select distinct ID01 as type from QRQC_TRACK_REPORT where type='APW' and
- 2023-01-19 16:20回答 1 已采纳 字段的顺序或者数据类型不一致导致的吧，有些工具会有红色警告，提醒你是哪个字段出问题了，没有的话那就仔细检查下看，不行就少导入两个字段排除下看是哪个字段问题
- 2017-07-27 08:31回答 2 已采纳 insert into FUEL_MATERIAL (MATERIAL_HEAT, MATERIAL_NOT_HEAT, MATERIAL_NUMBER, MATERIAL_ID, MAT
- 2019-06-25 19:33lmdsoft的博客 oracle在进行大量数据批量插入时，若不进行分批次插入的话，则会报错 Cause: java.sql.SQLSyntaxErrorException: ORA-00913: 值过多 ; bad SQL grammar []; nested exception is java.sql.SQLSyntaxErrorException...
- 2017-09-16 02:26回答 2 已采纳 https://www.2cto.com/database/201701/589415.html
- 2022-11-24 19:30Javatomcat12138的博客 数据库（Database）是按照...常用的数据库有 MySQL、ORACLE、SQL Server 等。1.2 什么是数据仓库数据仓库是决策支持系统（dss)和联机分析应用数据源的结构化数据环境。数据仓库研究和解决从和数据库中获取信息的问题。
- 2021-08-15 14:05#资源达人分享计划#
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 delta降尺度计算的一些细节，有偿
- ¥15 Arduino红外遥控代码有问题
- ¥15 数值计算离散正交多项式
- ¥30 数值计算均差系数编程
- ¥15 redis-full-check比较 两个集群的数据出错
- ¥15 Matlab编程问题
- ¥15 训练的多模态特征融合模型准确度很低怎么办
- ¥15 kylin启动报错log4j类冲突
- ¥15 超声波模块测距控制点灯，灯的闪烁很不稳定，经过调试发现测的距离偏大
- ¥15 import arcpy出现importing _arcgisscripting 找不到相关程序