代码功能:Scala语言编写的spark读取es库数据,读取到的json数据解析后存进临时视图表中,再通过sparksql将临时表中的数据一次性insert进hive表中
代码最终是打包放到ds工具上进行调度执行的,问题出现于某一天任务调度,其他日期调度正常
错误截图:
感觉不只是massage.maxsize大小的问题
代码功能:Scala语言编写的spark读取es库数据,读取到的json数据解析后存进临时视图表中,再通过sparksql将临时表中的数据一次性insert进hive表中
代码最终是打包放到ds工具上进行调度执行的,问题出现于某一天任务调度,其他日期调度正常
错误截图: