目前正在windows+.net下开发一个Hadoop HDFS读写文件的小测试程序。用的WebHDFS
http接口。上传文件速度比较快,但是下载非常慢。跟踪代码发现主要是在读取网络流时太慢:
Stream respStream = wrp.GetResponseStream();
Stream fileStream = File.Create(localFile);
int bufferSize = 1024 * 1024;
int byteNum;
byte[] downloadByte = new byte[bufferSize];
while (true)
{
byteNum = repStream.Read(downloadByte, 0, bufferSize);
if (byteNum == 0)
{
break;
}
fileStream.Write(downloadByte, 0, byteNum);
}
我虽然设置了bufferSize但是每次读取时最多不超过8192字节。我想请问一下怎样才能提高读取的字节数?
关于Hadoop WebHDFS 下载文件速度慢的问题
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
- 邀请回答
-
2条回答
悬赏问题
- ¥15 多电路系统共用电源的串扰问题
- ¥15 slam rangenet++配置
- ¥15 有没有研究水声通信方面的帮我改俩matlab代码
- ¥15 对于相关问题的求解与代码
- ¥15 ubuntu子系统密码忘记
- ¥15 信号傅里叶变换在matlab上遇到的小问题请求帮助
- ¥15 保护模式-系统加载-段寄存器
- ¥15 电脑桌面设定一个区域禁止鼠标操作
- ¥15 求NPF226060磁芯的详细资料
- ¥15 使用R语言marginaleffects包进行边际效应图绘制