cc06208
cc06208
采纳率0%
2015-10-21 01:31 阅读 1.4k

spark主节点配置一定与hadoop主节点配置一样吗?依赖zookeeper吗?

10

我用的是hadoop-2.5cdh5.3,集群namenode在01主机上,在配置spark的时候我将spark master指向了03节点,
配置完毕后,将hadoop集群,yarn依次启动,然后启动spark做示例运行总是出现启动不正常的问题,所以请有经验的人指明一下,是不是一定要和hadoop的主节点一样呢?zookeeper是不是也一定要启动。图是我的示例运行,页面查询发现此任务运行是被killed的状态。

图片说明
图片说明
图片说明
图片说明
worker的deploy日志
图片说明

  • 点赞
  • 写回答
  • 关注问题
  • 收藏
  • 复制链接分享

相关推荐