关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
我不想名字重复
2021-11-22 15:09
采纳率: 0%
浏览 69
首页
有问必答
已结题
如何通过http请求获取远端Hadoop的文件数据
有问必答
hadoop
java
比如,朋友A要获取朋友B自己搭建的hdfs集群上的某个文件,ip和路径都知道,在不考虑安全认证什么的,如何通过http请求获取到,我查阅hadoop官网,发现有WebHdfsFileSystem支持http请求,但未找到java代码,哪位大腿有案例,麻烦给一个,谢谢
收起
写回答
好问题
0
提建议
关注问题
微信扫一扫
点击复制链接
分享
邀请回答
编辑
收藏
删除
收藏
举报
4
条回答
默认
最新
关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
CSDN专家-微编程
2021-11-22 15:15
关注
这个hdfs不是有web界面吗?默认端口号是50070,通过ip:50070就可以进入hdfs了,找对应路径下的文件下载即可,Java代码的话,教程参考如下
本回答被题主选为最佳回答
, 对您是否有帮助呢?
本回答被专家选为最佳回答
, 对您是否有帮助呢?
本回答被题主和专家选为最佳回答
, 对您是否有帮助呢?
解决
无用
评论
打赏
微信扫一扫
点击复制链接
分享
举报
编辑记录
评论
按下Enter换行,Ctrl+Enter发表内容
查看更多回答(3条)
向“C知道”追问
报告相同问题?
提交
关注问题
Hadoop
在
大数据
领域的教育
数据
分析应用
2025-10-12 19:21
大厂资深 AI 架构师的博客
在教育信息化2.0时代,教育...通过具体案例和代码实现,展示了
Hadoop
如何赋能个性化学习、教学质量提升、学生成长追踪和教育资源优化配置,为教育工作者和技术开发者提供了一套完整的教育
大数据
解决方案。关键词:Ha
Hadoop
大数据
开发基础概
2024-12-26 04:14
姜欣良的博客
Hadoop
实现了一个分布式
文件
系统(
Hadoop
Distributed File System,HDFS)和一个MapReduce编程模型,以及YARN资源管理器。用户可以在不了解分布式底层细节的情况下,开发分布式程序。利用
Hadoop
,开发者可以轻松地...
大数据
:
Hadoop
小
文件
问题深度解析
2025-09-22 12:48
WeiLai1112的博客
随着TB
大数据
场景中,小
文件
通常指远小于HDFS默认块大小(128MB)的
文件
,这类
文件
的大量存在会对HDFS和MapReduce等组件造成严重性能损耗。本文将系统剖析小
文件
问题的根源,详解主流解决方案,并结合实战案例阐述...
Hadoop
生态圈
大数据
文档
2021-12-01 09:45
BigData_XiaoBai的博客
文档基于介绍基于
Hadoop
的
大数据
生态圈。介绍下图每一个组件的使用场景及使用方法,同时还对每一个组件有更深入的介绍。 ...
Hadoop
在
大数据
领域的娱乐
数据
分析案例
2025-04-27 00:51
光子AI的博客
Hadoop
核心组件在娱乐
数据
场景下的适配性分析基于MapReduce的典型娱乐
数据
分析任务实现从日志清洗到用户画像的完整工程案例娱乐行业特有的
数据
挑战(如高并发写入、多源异构)解决方案第2章解析
Hadoop
核心组件与娱乐...
大数据
基础——
Hadoop
大数据
平台搭建
2021-01-27 16:19
陈敬雷-充电了么-CEO兼CTO的博客
文章目录前言
Hadoop
大数据
平台搭建一.
Hadoop
原理和功能介绍二.
Hadoop
安装部署三.
Hadoop
常用操作总结 此文章摘自充电了么创始人,CEO兼CTO陈敬雷先生的新书《分布式机器学习实战》(人工智能科学与技术丛书)。更...
【
Hadoop
大数据
技术】——HDFS分布式
文件
系统(学习笔记)
2024-03-07 14:44
HinsCoder的博客
在NameNode内部是以元
数据
的形式,维护着两个
文件
,分别是FsImage镜像
文件
和EditLog日志
文件
。其中,FsImage镜像
文件
用于存储整个
文件
系统命名空间的信息,EditLog日志
文件
用于持久化记录
文件
系统元
数据
发生的变化。...
Hadoop
与Spark等
大数据
框架介绍
2018-08-09 17:06
von Neumann的博客
很早以前,当一台电脑无法存储这么庞大的
数据
时,采用的解决方案是使用NFS(网络
文件
系统)将
数据
分开存储。但是这种方法无法充分利用多台计算机同时进行分析
数据
。 一个实际的需求场景:日志分析 日志...
【
Hadoop
大数据
技术】——HDFS分布式
文件
系统(学习笔记(2)
2024-04-28 06:34
2401_84160087的博客
(1)“/usr/local/
hadoop
/share/
hadoop
/common”目录下的所有JAR包,包括
hadoop
-common-3.3.5.jar、
hadoop
-common-3.3.5-tests.jar、haoop-nfs-3.3.5.jar、haoop-kms-3.3.5.jar和
hadoop
-registry-3.3.5.jar,注意,不...
大数据
Hadoop
常考知识点汇总
2023-08-08 21:24
Stupid阳光的博客
Hadoop
是一个由Apache基金会所开发的分布式系统基础架构,主要解决海量
数据
存储与计算的问题,其中主要包括HDFS、MapReduce和Yarn框架。
没有解决我的问题,
去提问
向专家提问
向AI提问
付费问答(悬赏)服务下线公告
◇ 用户帮助中心
◇ 新手如何提问
◇ 奖惩公告
问题事件
关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
已结题
(查看结题原因)
8月22日
关注
码龄
粉丝数
原力等级 --
被采纳
被点赞
采纳率
创建了问题
11月22日