ladyfish 2015-02-12 10:48 采纳率: 0%
浏览 2014

读取HDFS上的文件问题

在伪分布模式下测试代码,在eclipse里建了个项目,然后在map函数里我想从hdfs中读取文件数据(testData.csv),然后这几段代码就会出现问题,String str_url="hdfs://localhost:9000";URI.creat(str_url);String str="hdfs://localhost:9000/user/input/testData.csv";Path path=new Path(str);
我发现如果是str="/user/input/testData.csv";Path=new Path(str);就不会出现问题,但是这个路径是不存在的。
因为有两个文件需要读取,不知道怎么处理啊~~~

  • 写回答

1条回答 默认 最新

  • LeeeeeeYooooond 2015-03-30 09:56
    关注

    import org.apache.hadoop.fs.FileSystem;

    这个包 有两种方式 调用

        FileSystem.get(arg0, arg1);
        FileSystem.get(conf);
    
    
    
        String uri = "hdfs://bigdata/tmp/1.txt";
    
        Configuration conf = new Configuration();
    
        FileSystem fs = FileSystem.get(URI.create(uri), conf);  
    
        或者
    
        FileSystem fs = FileSystem.get(conf);
    
        欢迎加入 hadoop 基础培训: http://blog.csdn.net/biperler/article/details/44731489
    
    评论

报告相同问题?

悬赏问题

  • ¥15 Matlab问题解答有两个问题
  • ¥50 Oracle Kubernetes服务器集群主节点无法访问,工作节点可以访问
  • ¥15 LCD12864中文显示
  • ¥15 在使用CH341SER.EXE时不小心把所有驱动文件删除了怎么解决
  • ¥15 gsoap生成onvif框架
  • ¥15 有关sql server business intellige安装,包括SSDT、SSMS。
  • ¥15 stm32的can接口不能收发数据
  • ¥15 目标检测算法移植到arm开发板
  • ¥15 利用JD51设计温度报警系统
  • ¥15 快手联盟怎么快速的跑出建立模型