问题遇到的现象和发生背景
添加了系统环境变量：SPARK_HOME
在系统环境变量Path增加：%SPARK_HOME%\bin.
但是运行spark-shell还是有问题。
（路径中没有空格）
操作环境、软件版本等信息
win10
spark1.6.2
尝试过的解决方法
试着改了一下路径，并没有作用。
重新配置环境变量也不行。
我想要达到的结果
可以进入spark环境
spark-shell无法运行
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
0条回答 默认 最新
- 2021-08-03 17:06回答 2 已采纳 先看看hadoop集群有没有正常开启，检查hdfs路径有没有问题
- 2021-07-16 08:59回答 1 已采纳 第一种：是spark节点的内存满了，加大执行内存，内存可以在spark的配置文件—>spark-env.sh中可以看到。这个配置文件路径在：/usr/local/spark-2.4.0-bin-
- 2018-01-04 10:48回答 3 已采纳 1、临时解决方法：将spark/work目录下的文件手动删除，之后重新提交application就可以了。 2、修改spark配置文件：在spark-env.sh中加入如下内容 SPAR
- 2022-06-20 19:21大数据驱动AI的博客 spark-shell运行wordcount
- 2018-05-08 10:49回答 1 已采纳 可以试试hadoop jar xxx(main)
- 2021-06-12 23:04回答 3 已采纳 主要有两个原因，第一个就是你的电脑本身就不好，配置低，第二个就是你给这个虚拟机分配的运行内存不够或者说有点小了
- 2023-01-17 22:05回答 2 已采纳 这是一个连接Doris服务器失败的错误，具体原因可能是Doris服务器无法连接或网络故障导致的。
- 2024-04-21 22:14泛黄的咖啡店的博客 类似于Yarn环境中的RM, 而Worker 呢，也是进程，一个Worker运行在集群中的一台服务器上，由Master分配资源对数据进行并行的处理和计算，类似于Yarn环境中NM。这里所谓的有向无环图，并不是真正意义的图形，而是由...
- 2022-10-16 15:59回答 1 已采纳 这里提示的是你的spark里边的配置文件spark-env.sh 里边的hadoop路径写错了 这里应该是在hadop-2.7.5/etc/hadoop还有就是你的scala的路径也写错了，你在检查
- 2022-09-16 19:01回答 1 已采纳 因为spark是计算引擎，你是将你的代码提交到spark上运行，不是运行spark程序
- 2023-04-21 16:19回答 2 已采纳 这篇博客: spark安装踩坑中的 2.JNI error 部分也许能够解决你的问题, 你可以仔细阅读以下内容或跳转源博客中阅读: 报错：A JNI error has occurred, pleas
- 2023-09-14 20:50吗喽也是命的博客 调度每个job执行，在启动Spark-shell时，自动创建Spark context对象，变量名称为：sc，提供给用户读取数据。在spark-shell界面加载数据：val wordRDD = sc.textFile("/datas/wordscount.txt");分割数据： val ...
- 2022-10-08 16:43回答 1 已采纳 朋友你这个问题在于anaconda下载的pyspark和spark不兼容的情况。你可以看看我的这篇博客： https://blog.csdn.net/master_hunter/article/det
- 2022-05-09 19:00殊迟的博客 在spark-shell中运行代码 编写Spark独立应用程序 在集群上运行Spark应用程序
- 2021-02-27 17:26PursuitK的博客 如果直接使用spark-shell命令直接运行，那么它的一切参数都使用的是默认配置,例如: #资源存储的位置，默认为本地，以及使用什么调度框架 ，默认使用的是spark内置的资源管理和调度框架Standalone --master 默认...
- 没有解决我的问题, 去提问
问题事件
系统已结题
9月13日
创建了问题
9月5日
悬赏问题
- ¥15 Windows X86 远线程注入问题解惑
- ¥15 Vs2022安装时黑框闪退无反应
- ¥15 嵌入式设备网口down后再up时不能link？
- ¥15 关于区块链和边缘计算
- ¥15 做一个简单项目，用Python分析共享单车的数据
- ¥20 在使用CESM2.2.0模型进行case.submit过程中出现如下错误(关键词-Map)
- ¥15 有办法改变通过wifi进入的网站的设置吗
- ¥15 label_studio
- ¥15 请教如何phython发邮件
- ¥15 linux系统安装问题