baidu_32461109
baidu_32461109
采纳率100%
2021-03-07 12:21

hadoop 无法同时打开localhost:8088 和 9870

不小心格式化了一下,然后就不能同时打开8088 和 9870了

要么单独启动yarn 可以打开8088 一旦启动dfs就无法再打开8088了。

要么删掉tmp文件夹可以代开8088 打不开9870

配置信息:

core-site:

<configuration>

	<property>
	     <name>fs.defaultFS</name>
	     <value>hdfs://localhost:8088</value>
	</property>
	<!--用来指定hadoop运行时产生文件的存放目录  自己创建-->
	<property>
	     <name>hadoop.tmp.dir</name>
	     <value>file:/usr/local/Cellar/hadoop/3.3.0/libexec/hadooptmp</value>
	</property>
	<property>
	     <name>fs.trash.interval</name>
	     <value>1440</value>
	</property>

</configuration>

hdfs-site:

<configuration>
	<property>
	     <name>dfs.replication</name>
	     <value>1</value>
	</property>
	<!--不是root用户也可以写文件到hdfs-->
	<property>
	     <name>dfs.permissions</name>
	     <value>false</value>    <!--关闭防火墙-->
	</property>
	<!-- name node 存放 name table 的目录 -->
	<property>
	     <name>dfs.namenode.name.dir</name>
	     <value>file:/usr/local/Cellar/hadoop/3.3.0/libexec/tmp/dfs/name</value>
	</property>
	<!-- data node 存放数据 block 的目录 -->
	<property>
	     <name>dfs.datanode.data.dir</name>
	     <value>file:/usr/local/Cellar/hadoop/3.3.0/libexec/tmp/dfs/data</value>
	</property>
</configuration>

mapred-site:

<configuration>
	<property>
      <!--指定mapreduce运行在yarn上-->
      <name>mapreduce.framework.name</name>
      <value>yarn</value>
	</property>

</configuration>

yarn-site:

<configuration>

<!-- Site specific YARN configuration properties -->
	<property>
	<!-- mapreduce 执行 shuffle 时获取数据的方式 -->
	      <name>yarn.nodemanager.aux-services</name>
	      <value>mapreduce_shuffle</value>
	</property>
</configuration>

刚接触hadoop,个中联系还不熟悉,望大神们多多指教。

  • 点赞
  • 写回答
  • 关注问题
  • 收藏
  • 复制链接分享
  • 邀请回答

1条回答

  • technologist_03 CSDN技术专家团—feng 1月前

    配置错了吧,yarn的默认端口是8088,你把hdfs也配置成8088了,冲突了吧。如果前期不清楚这些配置干什么的,建议减少配置,能运行起来就行,后期知道了再往里面加

    <property>
    	     <name>fs.defaultFS</name>
    	     <value>hdfs://localhost:8088</value>
    </property>
    点赞 评论 复制链接分享