软糖工程001 2022-04-11 09:55 采纳率: 66.7%
浏览 614
已结题

救!An internal error occurred during: "Map/Reduce location status updater"

eclipse上运行Map/Reduce插件报错,hadoop运行起来看上去没什么问题
An internal error occurred during: "Map/Reduce location status updater".
Cannot read the array length because "jobs" is null

img

配置文件
core-site-xml:


```xml
<configuration>  
    <property>
      <name>hadoop.tmp.dir</name>
      <value>/D:/hadoop-2.8.3/data</value>
    </property>
    <property>
      <name>fs.defaultFS</name>
      <value>hdfs://localhost:9000</value>
    </property>
</configuration>


hdfs-site-xml:
<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>/D:/hadoop-2.8.3/data/namenode</value>
    </property>
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>/D:/hadoop-2.8.3/data/datanode</value>
    </property>
<property>
<name>dfs.namenode.http-address</name>
<value>0.0.0.0:50070</value>
<description>
The address and the base port where the dfs namenode web ui will listen on.
</description>
</property>
<property>
            <name>dfs.datanode.address</name>
            <value>0.0.0.0:50010</value>
               <!-- Default Port: 50010. -->
    </property>
    <property>
            <name>dfs.datanode.http.address</name>
            <value>0.0.0.0:50075</value>
               <!-- Default Port: 50075. -->
    </property>
    <property>
            <name>dfs.datanode.ipc.address</name>
            <value>0.0.0.0:50020</value>
               <!-- Default Port: 50020. -->
    </property>
    <property>
            <name>dfs.secondary.http.address</name>
            <value>0.0.0.0:50090</value>
               <!-- Default Port: 50090. -->
    </property>

<property>
  <name>dfs.http.address</name>
  <value>localhost:9870</value>
</property>
</configuration>

yarn-site-xml:

<configuration>
     <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
    <property>
        <name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
        <value>org.apache.hahoop.mapred.ShuffleHandler</value>
    </property>


</configuration>
mapred-site-xml:
<configuration>
     <property>
            <name>mapreduce.framework.name</name>
             <value>yarn</value>
    </property>
    <property>
        <name>mapred.job.tracker</name>
        <value>localhost:9001</value>
                <!-- Default Port: 9001. -->
    </property>
    <property>
            <name>mapred.job.tracker.http.address</name>
            <value>0.0.0.0:50030</value>
                <!-- Default Port: 50030. -->
    </property>

    <property>
        <name>mapred.task.tracker.http.address</name>
        <value>0.0.0.0:50060</value>
                <!-- Default Port: 50060. -->
    </property>

</configuration>

```

  • 写回答

2条回答 默认 最新

  • CSDN专家-sinJack 2022-04-11 12:35
    关注

    出现这个错误是你hdfs上的文件是空的,你只需要
    hadoop fs -mkdir /input/
    创建一个文件就不会报错了。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

问题事件

  • 系统已结题 4月22日
  • 已采纳回答 4月14日
  • 创建了问题 4月11日

悬赏问题

  • ¥15 将安全信息用到以下对象时发生以下错误:c:dumpstack.log.tmp 另一个程序正在使用此文件,因此无法访问
  • ¥15 速度位置规划实现精确定位的问题
  • ¥15 代码问题:df = pd.read_excel('c:\User\18343\Desktop\wpsdata.xlxs')路径读不到
  • ¥15 为什么视频算法现在全是动作识别?
  • ¥15 编写一段matlab代码
  • ¥15 用Python做岩石类别鉴定软件
  • ¥15 关于调取、提交更新数据库记录的问题
  • ¥15 之前删了盘从下vs2022遇见这个问题 搞了一整天了
  • ¥15 从Freecad中宏下载的DesignSPHysics,出现如下问题是什么原因导致的(语言-python)
  • ¥30 notepad++ 自定义代码补全提示