Fang0518 2019-09-16 15:12 采纳率: 0%
浏览 3254

如何用kettle实现比较源数据库中的所有表数据和目标数据库中的对应的表数据是否一致

图片说明

如上图所示(转换中有两个表输入,一个叫源表,一个叫目标表,他们来自两个不同的库,表名是一个变量 ,抓取数据库中所有表,所以查询都是 select * from ${TABLENAME} ,表名相同表结构相同)

如何用kettel比较源数据库中的所有表数据和目标数据库中的对应的表数据是否一致?

试过用合并记录方法,但是 合并记录需要关键字段和数据字段,而我两个表输入都是用的变量的方式,因此不知道数据字段,并且每个表的主键也不一样,关键字段也不好填写。有什么好方法可以实现

  • 写回答

2条回答

  • weixin_39225435 2019-10-30 16:29
    关注

    首先,抽取出来的两表的字段要一致;然后通过字段转换,将源表抽取的字段和目标表字段数据类型转成一致,然后合并记录,
    通过关键字段、值字段进行比对,确定是完全相同不操作,还是更新或新增。最后再把处理结果(需要插入或更新的数据)插入目标表,
    把完全相同的数据剔除不操作

    评论

报告相同问题?

悬赏问题

  • ¥15 乘性高斯噪声在深度学习网络中的应用
  • ¥15 运筹学排序问题中的在线排序
  • ¥15 关于docker部署flink集成hadoop的yarn,请教个问题 flink启动yarn-session.sh连不上hadoop,这个整了好几天一直不行,求帮忙看一下怎么解决
  • ¥30 求一段fortran代码用IVF编译运行的结果
  • ¥15 深度学习根据CNN网络模型,搭建BP模型并训练MNIST数据集
  • ¥15 C++ 头文件/宏冲突问题解决
  • ¥15 用comsol模拟大气湍流通过底部加热(温度不同)的腔体
  • ¥50 安卓adb backup备份子用户应用数据失败
  • ¥20 有人能用聚类分析帮我分析一下文本内容嘛
  • ¥30 python代码,帮调试,帮帮忙吧