不会CRUD
2021-12-19 11:35
采纳率: 100%
浏览 85
已结题

使用datax同步oracle到hive的数据错乱问题

当Oracle读的一行数据中有null时,会导致hive在写数据时把值前移,也就是说对应的null没有写上去,数据类型就对应错了,这个bug你们怎么解决的?然而mysql同步数据到hive,当mysql出现一行数据的一个有null或者多个null时,又不会出现hive写数据当有null而前移数据的问题。oracle reader正常配置,hive也是正常配置,文件类型orc,分隔符"/u0001",并且在datax中,关系数据库都是用的共同的读数据的工具类,因为这个工具类在循环获取读到的数据,读到null时会continue,所以我在它在continue前,把null加了进去,暂时解决了问题,但是其他数据例如mysql又不会出现这个问题,所以很奇怪,求大神解答,在线等。

  • 写回答
  • 好问题 提建议
  • 追加酬金
  • 关注问题
  • 邀请回答

2条回答 默认 最新

相关推荐 更多相似问题