qq_41651187 2023-04-07 00:25 采纳率: 100%
浏览 9
已结题

如何实现hive更新数据时假如与旧数据重复就不执行数据更新?

希望可以实现:hive更新数据时如果新数据中的id与旧数据id重复,那么就不执行更新
我的疑问:在进行数据更新时遇到的困难,查询了大部分相关帖子都是用新数据去覆盖旧数据,在mysql中可以用ignore和unique,但是hive并没有这个能力。

  • 写回答

3条回答 默认 最新

  • 温柔的小才 2023-04-07 11:16
    关注

    旧数据 left join 新数据 选出旧数据关联不上的(也就是旧数据有,新数据没有的),
    然后再与新数据union ,这样没更新的旧数据就和新数据在一个表了

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论 编辑记录
查看更多回答(2条)

报告相同问题?

问题事件

  • 系统已结题 4月19日
  • 已采纳回答 4月11日
  • 创建了问题 4月7日

悬赏问题

  • ¥20 机器学习能否像多层线性模型一样处理嵌套数据
  • ¥20 西门子S7-Graph,S7-300,梯形图
  • ¥50 用易语言http 访问不了网页
  • ¥50 safari浏览器fetch提交数据后数据丢失问题
  • ¥15 matlab不知道怎么改,求解答!!
  • ¥15 永磁直线电机的电流环pi调不出来
  • ¥15 用stata实现聚类的代码
  • ¥15 请问paddlehub能支持移动端开发吗?在Android studio上该如何部署?
  • ¥20 docker里部署springboot项目,访问不到扬声器
  • ¥15 netty整合springboot之后自动重连失效