sjtu448651346 2019-10-29 21:10 采纳率: 50%
浏览 3292
已结题

hive 如何判断字段名是否存在,或者字段总数?

hive中如何判断字段名是否存在,或者字段总数为多少?

如果不能回答,下面的问题场景有好的解决方案也可以采纳

问题场景:
目前问题是这样的:公司hive库需要新增一个字段,但是数据部的同事为了保证hive代码在公司新增数据字段后仍能正常运行不会报错,需要自动判断是否添加了新字段(或者是判断字段数目为x or x+1),这样就能用if执行2个逻辑。

为什么我们不直接创建一个新表呢? 因为要保证数据连续性,不能在某天中断了(跑一次全量表数据公司服务器要跑一个月,历史数据非常庞大)

  • 写回答

3条回答

  • bj_0163_bj 2019-11-05 17:54
    关注

    在hive sql 里面好像直接判断字段个数有点困难,
    原表为tmp1,
    可以事先创建一个相同表建构的数据
    create table tmp2 like tmp1;
    然后取一条数据出来union all

    create table tmp3 as
    select * from tmp1 limit 1
    union all
    select * from tmp2
    如何报错,就说明表结构有变化。

    当然,union all 那步要加校验,进行异常处理

    评论

报告相同问题?

悬赏问题

  • ¥100 Jenkins自动化部署—悬赏100元
  • ¥15 关于#python#的问题:求帮写python代码
  • ¥20 MATLAB画图图形出现上下震荡的线条
  • ¥15 关于#windows#的问题:怎么用WIN 11系统的电脑 克隆WIN NT3.51-4.0系统的硬盘
  • ¥15 perl MISA分析p3_in脚本出错
  • ¥15 k8s部署jupyterlab,jupyterlab保存不了文件
  • ¥15 ubuntu虚拟机打包apk错误
  • ¥199 rust编程架构设计的方案 有偿
  • ¥15 回答4f系统的像差计算
  • ¥15 java如何提取出pdf里的文字?