对数据源oracle数据库只有读权限，没有时间字段，第一次全量抽取后，如何进行定期增量抽取？
1条回答
little_how 2019-02-22 14:47关注如果数据可能存在修改，那么恭喜你，很难增量；
如果真想增量，那么简单的方式就是建立一个触发器和一张记录变更的表，后期增量更新就用变更表配合原表来就行增量抽取。
还有一个方式就需要改动原表了，增加一个最后修改时间的字段；如果数据只存在新增，那么可以给予自增主键来进行增量。
希望可以帮到你...
本回答被专家选为最佳回答 , 对您是否有帮助呢?解决评论 打赏无用 1举报
分享
- 2018-11-26 05:31回答 3 已采纳 已经解决了，设置环境变量即可解决
- 2017-09-16 02:26回答 2 已采纳 https://www.2cto.com/database/201701/589415.html
- 2021-11-05 18:01回答 1 已采纳 看看这个，很详细： DBA_Tablespace表空间的概念和管控（概念） - 东方瀚海 - 博客园 2014-07-24 Created
- 2023-04-03 23:19赢啦啦的博客 每当源表中的数据发生变化，就被相应的触发器将变化的数据写入到一个临时表中，再通过ETL工具从临时表中抽取数据写到目标表中，同时要将临时表中抽取过的数据标记或者删除。优点：是数据库本身的触发机制，契合度高...
- 2017-09-16 02:17回答 2 已采纳 --建表 create table t (a number); --插入两条测试数据 insert into t values(0); insert into t values(0);
- 2021-12-19 11:35回答 2 已采纳 查了一些资料,Datax源码的确有点问题,需要修改Datax的源码。参考: datax mysql null不能转为Long 等一些列无法强转问题_大壮的博客-CSDN博
- 2021-05-27 09:43回答 1 已采纳 在根据用户需求选择需要抽取的字段之外，我们通常需要选择采用全量或者增量的方法进行数据抽取。全量抽取指的是从源系统中将表内数据不加行的筛选，全部抽取；增量抽取指的是只抽取前次抽取之后发生变化或者新增的数
- 2021-07-09 15:49恒生LIGHT云社区的博客 基于时间字段切分增量数据 此方法依据表的某一时间字段，在etl工具里进行条件设定即可快速抽取增量数据 比如我们要抽取2021-07-06 13:00:00 到 2021-07-06 16:00:00，则可限定 SELECT * FROM T1 WHERE P_DATE ...
- 2017-07-27 08:31回答 2 已采纳 insert into FUEL_MATERIAL (MATERIAL_HEAT, MATERIAL_NOT_HEAT, MATERIAL_NUMBER, MATERIAL_ID, MAT
- 2021-06-17 12:34回答 3 已采纳 -- union会去除重复行，union all不会去重，只是合并. select count(1) from (select a.name, a.gender, a.
- 2015-12-10 10:13回答 1 已采纳 没有人回答么？算了我已经解决问题了，把句子贴上去供参考吧 select * from (select t.id,t.val1,t.val2,t.val3,t.datatime,(t.val1||t.
- 2020-12-19 17:26weixin_39717443的博客 近几年，随着移动互联网的蓬勃发展，出现了其他类型的数据源，典型的如网站浏览日期、APP浏览日志、IoT设备日志从技术实现方式来讲，从关系型数据库获取数据，可以细分为全量抽取、增量抽取2种方式，两种方法分别...
- 2022-10-12 21:51回答 1 已采纳 解决了，没有开启checkpoint导致，加上下面代码即可env.enableCheckpointing(1000, CheckpointingMode.EXACTLY_ONCE);env.getCh
- 2021-05-17 16:39瓴羊企业智能服务的博客 概述 数据抽取是指从源数据抽取所需要的数据，...用时间戳方式抽取增量数据很常见，业务系统在源表上新增一个时间戳字段，创建、修改表记录时，同时修改时间戳字段的值。抽取任务运行时，进行全表扫描，通过比较抽...
- 2023-09-10 11:44G皮T的博客 CDC 这个名词应该大家都不难理解，直译就是 “变化数据捕获”，实际的含义也是如此：当数据库里的表发生了 增（INSERT） / 改（UPDATE）/ 删（DELETE）的时候，会将这种变化实时 / 非实时地发送给下游的系统进行处理...
- 没有解决我的问题, 去提问
问题事件
专家已采纳回答
5月19日
悬赏问题
- ¥15 这是哪个作者做的宝宝起名网站
- ¥60 版本过低apk如何修改可以兼容新的安卓系统
- ¥25 由IPR导致的DRIVER_POWER_STATE_FAILURE蓝屏
- ¥50 有数据，怎么建立模型求影响全要素生产率的因素
- ¥50 有数据，怎么用matlab求全要素生产率
- ¥15 TI的insta-spin例程
- ¥15 完成下列问题完成下列问题
- ¥15 C#算法问题, 不知道怎么处理这个数据的转换
- ¥15 YoloV5 第三方库的版本对照问题
- ¥15 请完成下列相关问题！