倒排索引的最后一步，输入完代码为啥显示这个，有没有朋友知道🙏

Question

[root@hadoop1 data]# hadoop jar HadoopDemo-1.0-SNAPSHOT.jar cn.ticast.invertedIndex.InvertedIndexDriver /InvertedIndex/input /InvertedIndex/output
2025-11-11 20:55:17,281 INFO client.DefaultNoHARMFailoverProxyProvider: Connecting to ResourceManager at hadoop1/192.168.121.160:8032
Exception in thread "main" org.apache.hadoop.mapred.FileAlreadyExistsException: Output directory hdfs://hadoop1:9000/InvertedIndex/input already exists
at org.apache.hadoop.mapreduce.lib.output.FileOutputFormat.checkOutputSpecs(FileOutputFormat.java:164)
at org.apache.hadoop.mapreduce.JobSubmitter.checkSpecs(JobSubmitter.java:277)
at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:143)
at org.apache.hadoop.mapreduce.Job$11.run(Job.java:1576)
at org.apache.hadoop.mapreduce.Job$11.run(Job.java:1573)
at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:422)
at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1845)
at org.apache.hadoop.mapreduce.Job.submit(Job.java:1573)
at org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:1594)
at cn.itcast.invertedIndex.InvertedIndexDriver.main(InvertedIndexDriver.java:29)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:498)
at org.apache.hadoop.util.RunJar.run(RunJar.java:323)
at org.apache.hadoop.util.RunJar.main(RunJar.java:236)
[root@hadoop1 data]# hadoop fs -cat /InvertedIndex/output/part-r-00000
cat: `/InvertedIndex/output/part-r-00000': No such file or directory

Answer 1

阿里嘎多学长整理AIGC生成，因移动端显示问题导致当前答案未能完全显示，请使用PC端查看更加详细的解答过程

问题理解

你在使用Hadoop进行倒排索引的最后一步，输入完代码后，却显示了[root@hadoop1 data]# hadoop jar HadoopDemo-1.0-SNAPSHOT.jar cn.ticast.invertedIndex.InvertedIndexDriver。你想知道这是为什么。

可能原因

1. 命令输入错误: 检查命令是否输入正确，是否有任何语法错误。
2. 类路径错误: 检查HadoopDemo-1.0-SNAPSHOT.jar是否正确，是否包含InvertedIndexDriver类。
3. 环境变量错误: 检查HADOOP_HOME和HADOOP_CLASSPATH环境变量是否正确配置。
4. 依赖包错误: 检查是否缺少必要的依赖包。

解决方案

1. 检查命令输入: 确保命令输入正确，包括类名和参数。
2. 检查类路径: 使用jar -tf HadoopDemo-1.0-SNAPSHOT.jar命令检查jar包是否包含InvertedIndexDriver类。
3. 检查环境变量: 确保HADOOP_HOME和HADOOP_CLASSPATH环境变量正确配置。
4. 检查依赖包: 确保所有必要的依赖包都正确安装和配置。

核心代码

# 检查jar包内容
jar -tf HadoopDemo-1.0-SNAPSHOT.jar

# 检查环境变量
echo $HADOOP_HOME
echo $HADOOP_CLASSPATH

# 检查依赖包
mvn dependency:tree