如题。我在远程部署了spark集群。启动spark之后，想submit提交上传的jar包。报错：java.lang.ClassNotFoundException: cluster。我的主类名是：cluster
spark集群启动之后，spark-submit提交任务，主类找不到
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
- 2021-07-16 08:59回答 1 已采纳 第一种：是spark节点的内存满了，加大执行内存，内存可以在spark的配置文件—>spark-env.sh中可以看到。这个配置文件路径在：/usr/local/spark-2.4.0-bin-
- 2022-09-16 19:01回答 1 已采纳 因为spark是计算引擎，你是将你的代码提交到spark上运行，不是运行spark程序
- 2018-01-04 10:48回答 3 已采纳 1、临时解决方法：将spark/work目录下的文件手动删除，之后重新提交application就可以了。 2、修改spark配置文件：在spark-env.sh中加入如下内容 SPAR
- 2017-09-04 09:44OddBillow的博客 报错：java.lang.ClassNotFoundException: Main 解决： 删除与spark集群上已有环境的相关jar包
- 2018-10-09 14:23回答 3 已采纳 可以本地调试，以本地模式运行。 首先保证maven项目中的spark的相关以来已经引用： org.apache.spark
- 2018-05-08 10:49回答 1 已采纳 可以试试hadoop jar xxx(main)
- 2018-11-06 15:11回答 3 已采纳 spark使用命令行提交任务使用场景很窄，一般情况下提交任务、kill任务、查询任务执行状态都是使用http接口，在这种场景下你应该使用livy。你需要安装livy，才可以用，具体安装文档以及使用文档
- 2022-07-01 09:05不懂开发的程序猿的博客 大数据实验教学系统使用spark-submit工具提交Spark作业对于数据的批处理，通常采用编写程序、打.jar包提交给集群来执行，这需要使用Spark自带的spark-submit工具。 一般的部署策略是在一个网关机器上提交应用...
- 2016-03-15 07:09回答 2 已采纳 start-master.sh: command not found 你这个是你的sh根本没有能找到，用绝对路径等试试
- 2022-10-11 15:35回答 1 已采纳 给你找了一篇非常好的博客，你可以看看是否有帮助，链接：Spark SQL 通过什么来实现？
- 2022-10-16 15:59回答 1 已采纳 这里提示的是你的spark里边的配置文件spark-env.sh 里边的hadoop路径写错了 这里应该是在hadop-2.7.5/etc/hadoop还有就是你的scala的路径也写错了，你在检查
- 2020-02-02 16:23花和尚也有春天的博客 spark-submit 可以提交任务到 spark 集群执行，也可以提交到 hadoop 的 yarn 集群执行。 1. 例子 一个最简单的例子，部署 spark standalone 模式后，提交到本地执行。 ./bin/spark-submit \ --master spark://...
- 2021-06-12 23:04回答 3 已采纳 主要有两个原因，第一个就是你的电脑本身就不好，配置低，第二个就是你给这个虚拟机分配的运行内存不够或者说有点小了
- 2022-10-29 13:01山顶夕景的博客 随着 application 的增加，需要不断安装新的包，而且不同 application 可能存在版本问题，这对于 client 模式来说或许还可以接受...client：在客户端上启动driver，这样逻辑运算在client上执行，任务执行在cluster上。
- 2018-07-27 17:22Yeung先森的博客 蜗龙徒行-Spark学习笔记【四】Spark集群中使用spark-submit提交jar任务包实战经验 - cafuc46wingw的专栏 - 博客频道 - CSDN.NET http://blog.csdn.net/cafuc46wingw/article/details/45043941 一、所遇问题 ...
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 回答4f系统的像差计算
- ¥15 java如何提取出pdf里的文字？
- ¥100 求三轴之间相互配合画圆以及直线的算法
- ¥100 c语言，请帮蒟蒻写一个题的范例作参考
- ¥15 名为“Product”的列已属于此 DataTable
- ¥15 安卓adb backup备份应用数据失败
- ¥15 eclipse运行项目时遇到的问题
- ¥15 关于#c##的问题：最近需要用CAT工具Trados进行一些开发
- ¥15 南大pa1 小游戏没有界面，并且报了如下错误，尝试过换显卡驱动，但是好像不行
- ¥15 自己瞎改改，结果现在又运行不了了