HDFS文件系统有没有储存文件的上限，或者说它能储存的文件数量受限于什么条件？
求大佬解答！
HDFS有没有储存文件数量的上限
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
bottle123 2019-03-21 16:18关注namenode需要在其内存FSImage 文件中中记录在Datanode中的数据块信息，所以如果小文件过多，或者设置的block块的大小太小，需要维护的数据块信息就会过多，namenode的内存会撑不住，所以hdfs存储的文件数量和文件自身大小、配置的block块大小、以及namenode的内存有关
解决 无用评论 打赏举报 分享
- 2021-12-15 20:24回答 1 已采纳 为啥集群小文件治理那么重要，你真的懂吗？_涤生手记大数据-CSDN博客 小文件是 Hadoop 的常见挑战，如果不小心处理，它们可能会导致
- 2022-10-04 19:13回答 1 已采纳 不是没有反应，而是目录下没有文件，所以ls后没有内容可以显示，可以试试ls /
- 2023-03-25 03:16回答 8 已采纳 hdfs没有 /data目录
- 2022-06-17 23:28饮马瀚海呐的博客 分布式文件系统HDFS简介 2.HDFS块的概念 现在可以把一个大的文件进行切割，可以把它切割成非常多的小块，这些小块可以分布式存储到不同的机器上面，这样就可以突破单机存储的上限。块的大小固定。块会备份 名称结点...
- 2023-01-05 14:13回答 9 已采纳 String fileName = "xxx"; response.reset(); response.setContentType("application/x-msdownload
- 2021-11-16 21:09回答 1 已采纳 你的core-site.xml 配置文件错了你没有生成log和hadooptmp，删了重配我前几天写了一个脚本，你可以借鉴一下
- 2023-07-18 16:57Want595的博客 1. 为什么需要分布式存储 2. 分布式的基础架构分析 3. HDFS的基础架构 4. HDFS集群环境部署 4.1 VMware虚拟机中部署 4.1.1 集群规划 4.1.2 上传解压 4.1.3 Hadoop安装包目录结构 4.1.4 修改配置文件 4.1.5 准备数据...
- 2022-08-15 11:47回答 6 已采纳 信息不足不是很好判断，找了下源码，报错的方法如下： /** Read the block length from one of the datanodes. */ private long rea
- 2021-11-15 16:27回答 1 已采纳 默认为用户的home目录 home目录的默认路径为 /user， 根据配置项（dfs.user.home.dir.prefix）决定而用户（非kerberos的情况下）， 则是根据 环境变量HADOO
- 2021-12-20 14:54回答 5 已采纳 看您core-site.xml和hdfs.xml配置文件里面的配置，感觉配置的有点少哦，hdfs-site.xml中至少需要指明的是dfs.namenode.name.dirdfs.datanode.
- 2022-10-19 10:17简明编程的博客 HDFS(Hadoop Distributed File System )，意为:Hadoop分布式文件系统。...HDFS是一种能够在普通硬件上运行的分布式文件系统，它是高度容错的，适应于具有大数据集的应用程序，它非常适于存储大型数据（比如TB和PB)。
- 2015-08-19 16:14回答 2 已采纳 你需要用HDFS API来获取 ``` package org.myorg.hdfsdemo; import java.io.BufferedReader; import j
- 2018-09-13 16:28流浪的程序员1993的博客 一、Hadoop创始人介绍 Doug cutting，就职Yahaoo期间开发了Hadoop项目，目前就职于Cloudera公司...1、分布式存储系统hdfs（存储） 2、分布式计算框架MapReduce（离线计算，spark内存计算，storm流式计算） 三、H...
- 2023-04-29 00:18随兴随缘的博客 5.云计算的基本原理是，通过使计算分布在大量的分布式计算机上，而非本地计算机或远程服务器中，企业数据中心的运行将更与互联网相似。5.某用户从云服务提供商租用虚拟机进行日常使用，外出旅游时把虚拟机归还给云...
- 没有解决我的问题, 去提问
