努力奋斗的阿远 2015-12-24 08:30 采纳率: 0%
浏览 3304

node.js访问hdfs文件并写入本地文件系统

我是nodejs初学者,现在项目需要使用node.js去访问hdfs文件系统中的文件,查阅相关资料,说推荐使用webhdfs模块,创建client后读取数据流,再pipe到本地文件系统,code如下:

demo.js


 var WebHDFS = require('webhdfs');
var fs = require('fs');


hdfs = WebHDFS.createClient({
    user:'root',
    host:'192.168.1.241',
    port:80,
    path:'/user/root/spark_lib/'
});


var localFileStream = fs.createWriteStream('/home/tera/workspace/t2/localFile.txt');
var remoteFileStream = hdfs.createReadStream('hdfs://192.168.1.241:8020/user/root/spark_lib/remoteFile.txt');

console.log(remoteFileStream);
remoteFileStream.pipe(localFileStream);


localFileStream.on('finish', function onFinish() {
    console.log('finish');
});

localFileStream.on('error', function onError(err) {
    console.log(err);
});

执行以上代码后本地生成localFile.txt但文件为空,求建议。

  • 写回答

1条回答 默认 最新

  • devmiao 2016-02-06 15:55
    关注
    评论

报告相同问题?

悬赏问题

  • ¥20 关于#qt#的问题:Qt代码的移植问题
  • ¥50 求图像处理的matlab方案
  • ¥50 winform中使用edge的Kiosk模式
  • ¥15 关于#python#的问题:功能监听网页
  • ¥15 怎么让wx群机器人发送音乐
  • ¥15 fesafe材料库问题
  • ¥35 beats蓝牙耳机怎么查看日志
  • ¥15 Fluent齿轮搅油
  • ¥15 八爪鱼爬数据为什么自己停了
  • ¥15 交替优化波束形成和ris反射角使保密速率最大化