qq_32387579 2021-12-15 20:24 采纳率: 100%
浏览 109
已结题

hdfs为什么不适合存储小文件

如题,hdfs为什么不适合存储小文件
网上很多说法说是由于元数据存储在namenode内存结构之中的,海量小文件会导致内存数据不够用,

但是hdfs不是可以通过联邦架构横向扩展么
另外想问下hdfs的block数据结构与物理存储是怎样的原理,这块目前还不是很清楚。看你博客里面说,如果是
10M的小文件存储,会导致一个block的默认128M空间只使用了10M,这个意思是说会有物理磁盘碎片的意思么?

  • 写回答

1条回答

      报告相同问题?

      相关推荐 更多相似问题

      问题事件

      • 系统已结题 12月27日
      • 已采纳回答 12月19日
      • 创建了问题 12月15日

      悬赏问题

      • ¥30 关于#网络安全#的问题:非对称加密验证
      • ¥20 关于线性代数里施密特正交化和QR分解的疑问
      • ¥15 matlab超类包含解析错误
      • ¥15 python拖拽文件问题
      • ¥15 执行import paddle代码出现错误如何解决?
      • ¥15 hisat2align exited with value 137
      • ¥15 寻找大学生合作开发软件(Delphi)
      • ¥30 AndroidBench&eMMC内存测试速度&Android
      • ¥15 W10 文件共享失败 怎么解决
      • ¥20 b站私信完整导出的方法