不努力谁会可怜你？ 2018-12-19 11:50 采纳率: 0%
浏览 552
已采纳

我的spark mater少了一个datanode，不能够访问50070？

配置：centos7、jdk1.7、hadoop2.4.1、三台spark虚拟机(spark02,spark03,spark04).其中spark02:有datanode,namenode,screndnode,jps。这里老师的有datanode而我没有。其它两台都有jps,datanode

图片说明
图片说明
图片说明
图片说明
图片说明
图片说明
图片说明

  • 写回答

2条回答 默认 最新

  • 不努力谁会可怜你？ 2018-12-19 12:51
    关注

    在hdfs-site.xml里加上对外访问的端口：


    dfs.http.address
    0.0.0.0:50070

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题？

  • Spark面试题及其答案
    2019-04-25 11:03
    @进行中的博客 答：spark通过这个参数spark.deploy.zookeeper.dir指定master元数据在zookeeper中保存的位置，包括Worker，Driver和Application以及Executors。standby节点要从zk中，获得元数据信息，恢复集群运行状态，才能对外...
  • spark core面试专题
    2021-08-05 09:12
    坏孩子充电自习室的博客 它是一个快速通用的集群计算平台.Spark扩展了流行的MapReduce模型.Spark提供的主要功能之一就是能够在内存中运行计算 ，但对于在磁盘上运行的复杂应用程序，系统也比MapReduce更有效。 2.解释Spark的主要功能？ 多...
  • Spark 应用开发程序
    2017-03-25 15:15
    白马长枪儒雅将的博客 目 录 1 绪论 1 ...1.1.2 Spark的兴起 2 1.2 项目意义 2 2 Hadoop云计算环境的搭建 3 2.1 准备工作 3 2.2 环境说明 3 2.3 网络环境配置 4 2.4 SSH无密码验证登陆 5 2.5 Master上安装JDK 6 2.6 Mas
  • Spark面试题、答案
    2018-11-03 20:27
    Ethan130的博客 答：spark通过这个参数spark.deploy.zookeeper.dir指定master元数据在zookeeper中保存的位置，包括Worker，Driver和Application以及Executors。standby节点要从zk中，获得元数据信息，恢复集群运行状态，才能对外...
  • Spark和Hadoop基础知识
    2018-08-30 21:27
    MirandaGirl2018的博客 spark和hadoop初步掌握，参考：http://www.aboutyun.com/thread-24246-1-1.html <1> spark有哪些组件？  答：主要有如下组件： ...3）Driver：运行程序的main方法，创建spark context对象...
  • Spark面试相关
    2019-10-06 20:36
    aeluwl2038的博客 Spark Core面试篇01 一、简答题 ...答：spark通过这个参数spark.deploy.zookeeper.dir指定master元数据在zookeeper中保存的位置，包括Worker，Driver和Application以及Executors。standby节点要从zk中获...
  • Spark面试题修改版本
    2019-08-22 22:59
    MagicStarts的博客 答：spark通过这个参数spark.deploy.zookeeper.dir指定master元数据在zookeeper中保存的位置，包括Worker，Driver和Application以及Executors。 standby节点要从zk中，获得元数据信息，恢复集群运行状态...
  • spark面试题
    2019-09-19 23:22
    summer2381的博客 答：spark通过这个参数spark.deploy.zookeeper.dir指定master元数据在zookeeper中保存的位置，包括Worker，Driver和Application以及Executors。standby节点要从zk中，获得元数据信息，恢复集群运行状态，才能对外...
  • Spark面试近300题初始版本
    2019-08-19 20:40
    MagicStarts的博客 答：spark通过这个参数spark.deploy.zookeeper.dir指定master元数据在zookeeper中保存的位置，包括Worker，Driver和Application以及Executors。standby节点要从zk中，获得元数据信息，恢复集群运行状...
  • HDFS配置Kerberos认证
    2017-08-17 13:59
    ——。——的博客 HDFS配置Kerberos认证 2014.11.04 本文主要记录 CDH Hadoop 集群上配置 HDFS 集成 Kerberos 的过程，包括 Kerberos 的安装和 hadoop 相关配置修改说明。... Hadoop 的认证机制和 Kerberos 认证协议做个
  • Hadoop大数据开发基础系列：一、初识Hadoop
    2019-10-03 16:20
    Nelson_hehe的博客 目录结构 1.Hadoop概述 1.1 Hadoop简介 1.2Hadoop发展史 1.3Hadoop特点 2.Hadoop核心 2.1分布式文件系统——HDFS 2.2分布式计算框架——MapReduce 2.3集群资源管理器——YARN ...一、Hadoo...
  • Hadoop平台搭建与数据分析
    2023-09-06 14:26
    古月印象星空的博客 Hadoop是由Apache 研发的开源分布式基础架构,它由 Hadoop内核、MapReduce、Hadoop分布式文件...为了让学生更好地将理论与实践相结合,以Hadoop-3.3.4平台的搭建和数据分析为主线，我设计了包含5个实验在内的一系列实验。
  • 大数据面试题及答案
    2019-03-05 10:35
    欧阳子卿的博客 map输出数据按key Hash的分配到reduce中，由于key分布不均匀、业务数据本身的特点、建表时考虑不周、等原因造成的reduce 上的数据量差异过大。 1)、key分布不均匀; 2)、业务数据本身的特性; 3)、建表时考虑...
  • 数据分析大数据面试题大杂烩02
    2021-03-09 16:30
    爱学习的菜鸟罢了的博客 Map端会处理输入数据并产生中间结果,这个中间结果会写到本地磁盘,每个Map的输出会先写到内存缓冲区中,当写入的数据达到设定的阈值时,系统将会启动一个线程将缓冲区的数据写到磁盘,这个过程叫做spill(spill写入之前,...
  • hadoop面试问题
    2019-03-19 09:36
    原来是阿付的博客 map输出数据按key Hash的分配到reduce中，由于key分布不均匀、业务数据本身的特点、建表时考虑不周、等原因造成的reduce 上的数据量差异过大。 1)、key分布不均匀; 2)、业务数据本身的特性; 3)、建表时考虑不周; 4)...
  • 没有解决我的问题, 去提问