spark打包上传报错

我用的spark3.1.3和hadoop2.10

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除
收藏举报

1条回答默认最新

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
CSDN-Ada助手 CSDN-AI 官方账号 2022-10-27 15:50
关注
不知道你这个问题是否已经解决, 如果还没有解决的话:
你看下这篇博客吧, 应该有用👉 ：spark任务提交报错

如果你已经解决了该问题, 非常希望你能够分享一下解决方案, 写成博客, 将相关链接放在评论区, 以帮助更多的人 ^-^
解决
无用 1
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

spark导报上传报错 scala spark 大数据
2022-10-21 10:28

回答 2 已采纳命令的问题吧，./bin/spark-submit --class org.apache.spark.examples.SparkPi --master yarn --deploy-mode clus
spark 启动显示报错 hadoop spark 大数据
2023-03-14 21:18

回答 1 已采纳根据报错信息，似乎是找不到 "/usr/spark/master" 这个文件或目录。可能是你的路径设置有问题，或者是该路径下的文件或目录被删除或移动了。建议仔细查看路径设置和文件系统，确保路径设置正确
hive on spark运行sql报错 hive spark 有问必答
2021-09-28 16:58

回答 2 已采纳该问题由hive与spark两者版本不兼容导致的，具体的解释，在官网是有说明的：Hive on Spark is only tested with a specific version of Spar
spark打包上传报错
2022-10-28 19:56

花溪★流年的博客 spark打包上传报错
Atlas关联spark插件编译报错大数据
2023-01-17 10:39

回答 3 已采纳这个是github上个人维护的spark-aql勾子程序,你的问题应该是设置高版本的spark和scala,造成了一些版本冲突,而且高版本中许多类都更新过了,当然找不到.(1)<import o
大数据，spark ，doris mysql spark 大数据
2023-01-17 22:05

回答 2 已采纳这是一个连接Doris服务器失败的错误，具体原因可能是Doris服务器无法连接或网络故障导致的。
HDP Spark插入HIVE报错 scala 有问必答
2021-05-26 21:06

回答 7 已采纳是不是又得work nodes是后来加上的，但是没有加到配置更新的文件里。
Spark启动报错问题
2021-06-04 11:58

bugcode.online的博客今天准备把Spark和Hive进行集成一下，当启动Spark的时候，报了如下错误： [rzf@hadoop100 spark]$ bin/spark-shell 21/06/04 11:52:20 WARN NativeCodeLoader: Unable to load native-hadoop library for your ...
Spark 读取 Hive 数据报错 NoSuchMethodError : org.apache.spark.sql.catalyst.catalog.SessionCatalog hive spark 大数据
2022-12-15 15:54

回答 1 已采纳 22/12/15 15:32:44 INFO SparkContext: Invoking stop() from shutdown hook集群资源不足，且动态资源分配申请的executors、内存
Linux上安装了Spark但无法运行，运行报错 hadoop spark 大数据
2023-04-21 16:19

回答 2 已采纳这篇博客: spark安装踩坑中的 2.JNI error 部分也许能够解决你的问题, 你可以仔细阅读以下内容或跳转源博客中阅读: 报错：A JNI error has occurred, pleas
虚拟机里安装spark时报错 hadoop spark 大数据
2022-12-07 13:39

回答 1 已采纳缺少jar包：org/slf4j/impl/StaticLoggerBinder，添加一下slf4j-nop-xxx.jar
配置hive on spark后启动报错
2020-08-14 20:48

一过人_的博客因为hive底层用的执行引擎是MapReduce，所以导致了运行起来非常慢，所以我们要更换执行引擎，就有了hive on spark，基于hive的基础上将执行引擎换成spark 版本：hive 3.1.2 spark3.0.0 需要配置的信息在spark的配置...
spark与hive版本问题? 本机正常运行,服务器上报错. hive java spark
2021-07-30 17:14

回答 1 已采纳可参考：https://blog.csdn.net/zt15732625878/article/details/85245731看客户端的 hive-jdbc的version 和hive Server
spark向mysql中写数据，报错不能连接mysql
2023-10-17 14:24

etastgrehyjrt的博客将$SPARK_HOME/jars/目录下mysql-connector-java-5.1.27.jar删除，经检查，mysql数据库是8.0.12版本，而项目使用的驱动包是5.1.27版本。修改pom文件中mysql驱动版本。猜想可能是驱动包版本不兼容所致。打包执行，仍...
Spark深入解析（八）：Spark整合YARN报错或无法查看日志
2020-04-26 23:18

老王的小知识的博客目录如果整合Yarn报错或无法查看log需做如下操作如果要整合YARN历史服务器和Spark历史服务器，则还需要如下操作配置历史日志服务器本地调试如果整合Yarn报错或无法查看log需做如下操作 1.修改hadoop的yarn-site.xml...
没有解决我的问题, 去提问

问题事件

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
已结题（查看结题原因） 10月28日
关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
创建了问题 10月21日

悬赏问题

¥15 急，ubuntu安装后no caching mode page found等
¥15 联想交换机NE2580O/NE1064TO安装SONIC
¥15 防火墙的混合模式配置
¥15 Ubuntu不小心注销了要怎么恢复啊
¥15 win10电脑安装完plcsim advanced4.0运行时为什么会提示找不到虚拟网卡
¥15 安装powerbuilder10卡在安装程序正在运行这个页面没有下一步任何指令
¥15 关于mpi的问题：请问遇到这种情况需要怎么解决，出现这个问题后电脑不能进行mpi多核运行只能进行单核运行
¥50 微信聊天记录备份到电脑提示成功了，但还是没同步到电脑微信
¥15 python怎么在已有视频文件后添加新帧
¥20 虚幻UE引擎如何让多个同一个蓝图的NPC执行一样的动画,

spark打包上传报错

1条回答 默认 最新

问题事件

悬赏问题

1条回答默认最新