guodu1223
2022-05-30 02:37
采纳率: 66.7%
浏览 46

spark on yarn 问题

请求帮帮忙!
spark on yarn 无法启动
最近在学习spark on yarn 内容,用 ./pyspark --master yarn 无法启动,总是报错:
ERROR spark.SparkContext: Error initializing SparkContext.
hadoop 集群已经全部启动,我的hadoop是3.3.2 spark 是3.2.1

报错结果如下图:

img

spark env 配置文件如下:

img

yarn yarn-site.xml配置文件如下:

img

3条回答 默认 最新

相关推荐 更多相似问题