我装hadoop2.5.0-cdh5.3.1 + spark1.2.1-bin-hadoop2.4.tgz，发现许多问题。是不是版本不兼容。
请朋友们帮助！
另外，如何编译 jar? 因为未发现build or sbt path.
hadoop2.5.0-cdh5.3.1, 如何选择相配的spark?
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
0条回答 默认 最新
- 2021-11-15 16:27回答 1 已采纳 默认为用户的home目录 home目录的默认路径为 /user， 根据配置项（dfs.user.home.dir.prefix）决定而用户（非kerberos的情况下）， 则是根据 环境变量HADOO
- 2023-04-16 20:08回答 2 已采纳 可能是由于Hadoop103节点没有启动 yarn没有启动成功
- 2022-06-23 13:55回答 1 已采纳 Hadoop和Spark都是处理大数据的框架。就象你说关系型数据库，这只是一个概念，但是代表了一系列的含意，比如数据是结构化的，基于关系模型存储的。而MySQL、Oracle、SqlServer这些就
- 2016-01-14 16:56hadoop-2.5.0-cdh5.3.1 64位在centos6.4 64位编译好的本地库， 复制到native文件夹下就可以了，注意建立软链接。
- 2022-06-07 00:40回答 3 已采纳 这取决于你需要解决什么问题，如果只是临时跑一下批处理任务用到spark大可local模式跑跑完了，真要构建完整的hadoop生态你这一台云服务器够呛，内存低了甚至跑不起来全部组件
- 2021-11-30 21:23回答 2 已采纳 可能是这些原因，自己检查一下1.看自己是否关闭防火墙了，防火墙没关可能导致这个原因2.在core-site.xml中没有配置hadoop运行时产生的文件的存储目录3.hdfs namenode -fo
- 2022-05-20 13:43回答 2 已采纳 从报错来看，是一个循环依赖的问题，类似于 A 依赖 B， B依赖C ，C依赖A；可以先排查一下jar的依赖！
- 2018-04-21 18:30hadoop-2.5.0-cdh5.3.1源码，从官网下载的，需要的可以下载使用。
- 2023-03-01 10:46回答 2 已采纳 Hadoop中的MR中每个map/reduce task都是一个java进程方式运行，好处在于进程之间是互相独立的，每个task独享进程资源，没有互相干扰，监控方便，但是问题在于task之间不方便共享
- 2022-12-23 16:57回答 2 已采纳 集群还在启动吧，还是在安全模式，无法创建文件夹，稍等一会儿集群完全启动成功后就可以了。
- 2022-04-22 23:16回答 1 已采纳 spark：主要用于海量数据的统计计算，跟做不做大屏没关系，比如进行机器学习。hadoop：主要用到的就是数据的分布式存储，海量的数据和日志，如果想留存，就用它来存储吧。做大屏统计是比较直观的数据结果
- 2016-01-01 10:41该昵称已经被占用的博客 1 创建 hadoop 用户 2 网络配置 3 安装 JDK 4 配置 SSH 免密码通信 5 VNC 配置 可选 三 安装 ZooKeeper 四 安装 Hadoop 重点 1 下载解压配置环境变量 2 修改配置文件 3 分发程序 五 启动集群 1 启动ZooKeeper集群 2 ...
- 2022-07-16 11:06回答 4 已采纳 直接杀了可以的stop-all.sh里面引用了系统的环境变量的hadoop的东西，你有配置hadoop的环境变量吗
- 2015-10-26 10:57该昵称已经被占用的博客 Hadoop-2.5.0-cdh5.3.2 搭建单机伪分布 Centos6.5 64位Hadoop完全分布安装教) —— 这个最主要 安装结果格式化成功：节点进程成功启动： Hadoop-2.5.0-cdh5.2.0 问题什么库文件的 Warning 都没啥问题了，进程也都...
- 2016-07-14 13:41谷雨hadoop的博客 for line in `cat /home/hadoop/platform/hadoop.list|awk '{print $1}'`; do echo $line;ssh $line "/bin/mkdir /home/hadoop/platform";done for line in `cat /home/hadoop/platform/hadoop.list|a
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 如何在scanpy上做差异基因和通路富集？
- ¥20 关于#硬件工程#的问题，请各位专家解答！
- ¥15 关于#matlab#的问题：期望的系统闭环传递函数为G(s)=wn^2/s^2+2¢wn+wn^2阻尼系数¢=0.707，使系统具有较小的超调量
- ¥15 FLUENT如何实现在堆积颗粒的上表面加载高斯热源
- ¥30 截图中的mathematics程序转换成matlab
- ¥15 动力学代码报错，维度不匹配
- ¥15 Power query添加列问题
- ¥50 Kubernetes&Fission&Eleasticsearch
- ¥15 報錯：Person is not mapped，如何解決？
- ¥15 c++头文件不能识别CDialog