尘世壹俗人 2025-08-25 12:50 采纳率: 81.3%
浏览 11
已结题

spark配置gluten任务运行报错

2025-08-25 12:46:14,146 ERROR yarn.Client: Application diagnostics message: User class threw exception: org.apache.gluten.exception.GlutenException: corrupt tzdb: rule 'R' does not exist

最近在自己的测试环境spark安装了spark+gluten配置

环境整体采用 spark3.2.2、hadoop3.2.3、Jdk8、scala2.12,但是很奇怪的是同样的任务参数,配置好spark+gluten之后,用默认自带的spark圆周率测试jar运行就不报错,自己写了一个任务就会报上面的错误,就很奇怪

以及重装了系统的时区环境,还是没有解决问题

  • 写回答

5条回答 默认 最新

  • 尘世壹俗人 2025-08-25 16:01
    关注

    解决了,国内这个落后的软件环境,真的很烂,很让人恼火,Gluten运行在CentOS 7 上需要补一个插件
    https://github.com/apache/incubator-gluten/issues/10258

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(4条)

报告相同问题?

问题事件

  • 已结题 (查看结题原因) 8月25日
  • 已采纳回答 8月25日
  • 创建了问题 8月25日