场景介绍：
我要从Oracle库中把Oracle_A表中的数据同步到DB2库中的DB2_A表中，使用kettle。
现在我有多张表需要同步，有的表有数据加载时间字段，有的没有数据加载时间字段。
请教各位大佬应该怎么实现？希望各位大佬不吝赐教！跪谢！
（百度上也能搜到不少，不过细节挺少的，也许是我水平不够吧）
怎么使用kettle进行增量数据的抽取？
- 写回答
- 好问题 0 提建议
- 关注问题
分享- 邀请回答
-
3条回答 默认 最新
- wenjunlong88_easy 2019-03-18 17:26关注
已经解决了，设置环境变量即可解决
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决评论 打赏无用 2举报 分享
- 2019-01-28 19:14增量抽取是从源系统中提取自上次抽取以来发生改变的新数据或更新数据，而不是每次全量抽取所有数据，这样可以显著提高效率并减少网络和存储资源的消耗。在这个案例中，我们不依赖时间戳，可能需要用到其他的追踪机制...
- 2020-12-14 21:27使用Kettle增量抽取MongoDB数据，需要巧妙地结合MongoDB的查询特性与Kettle的ETL组件。通过命名参数实现动态查询，用常量和字符串替换组件管理批处理信息，可以有效地解决非关系型数据库与ETL工具之间的协同问题。...
- 2018-10-18 10:00### Kettle增量抽取数据知识点详解 #### 一、Kettle简介与重要性 Pentaho Data Integration (PDI)，也称为Kettle，是一款开源的数据集成工具，被广泛应用于数据清洗、转换以及ETL（Extract, Transform, Load）过程...
- 2021-04-01 19:362. **Kettle增量抽取的步骤** - **第一步：获取上次更新数据的最大时间** 这个步骤通常涉及到记录并维护一个“水印”（Watermark），即上次抽取操作后最新的数据时间戳。这可以通过在目标数据库中创建一个特殊...
- 2021-11-15 17:39cbphan的博客 需求背景： 当下行业，做程序不在是一味的写增删改查了。数据汇聚、数据清洗、数据转换已成为普遍现象，本人所在... 说到数据汇聚，我们通常采用的办法就是通过ETL工具进行抽取，也有通过Oracle触发器利用dblink方...
- 2019-10-24 18:04以上步骤提供了使用Kettle进行MySQL增量同步的基本框架，但实际操作中可能需要根据具体业务需求进行调整。例如，可能需要处理复杂的业务规则，或者使用特定的版本控制策略来处理并发更新。 通过Kettle，你可以灵活...
- 2024-06-18 17:30红笺-的博客 我们进行增量抽取的时候，只需要判断每一条数据中的hiredate是否大于上一次的抽取时间，如果大于说明是新数据，需要抽取。一般只有项目初始化的时候会使用到全量抽取，全量抽取的效率慢，抽取的数据量大。
- 2018-12-13 21:49aganliang的博客 一、使用时间戳抽取数据原理 数据库之间基于时间戳同步数据，原理是通过判断数据采集或者更新时间与某一个基准时间对比，把数据在时间的维度进行排序，同步变化了的数据，具体如图所示： A表是主表，B表是附表...
- 2020-11-29 00:26weixin_39799561的博客 一：Data Migration(DM)1、Data Migration 简介： Data Migration (DM) 是一体化的数据同步任务管理平台，支持从 MySQL 到 TiDB或者MySQL 的全量数据迁移和增量数据同步。使用 DM 工具有利于简化错误处理流程，降低...
- 2020-07-02 16:57Kettle增量同步，里边包含项目文件可能需要你新建数据库。源数据为Oracle，目标数据库为PostgreSQL. 增量记录表.SQL 用来生成 edp_etl_record 表 记录每次更新数据的执行记录过程。 更新时先取出edp_etl_record 表...
- 没有解决我的问题, 去提问
