qq_32387579 2021-12-15 20:24 采纳率: 100%
浏览 128
已结题

hdfs为什么不适合存储小文件

如题,hdfs为什么不适合存储小文件
网上很多说法说是由于元数据存储在namenode内存结构之中的,海量小文件会导致内存数据不够用,

但是hdfs不是可以通过联邦架构横向扩展么
另外想问下hdfs的block数据结构与物理存储是怎样的原理,这块目前还不是很清楚。看你博客里面说,如果是
10M的小文件存储,会导致一个block的默认128M空间只使用了10M,这个意思是说会有物理磁盘碎片的意思么?

  • 写回答

1条回答 默认 最新

报告相同问题?

问题事件

  • 系统已结题 12月27日
  • 已采纳回答 12月19日
  • 创建了问题 12月15日

悬赏问题

  • ¥15 esp8266控制共阳极wrgb灯板无法关闭所有led灯
  • ¥100 python读取速度问题
  • ¥15 stm32f407使用DMA问题
  • ¥15 您好 这个API接口该怎么弄 网站搭建好了 API也有 现在就不知道该怎么填写API 不知道怎么用
  • ¥88 用uniapp写一个多端的程序,用到高德地图,用高德的JSAPI吗?
  • ¥20 关于#c++#的问题:水果店管理系统
  • ¥30 dbLinq最新版linq sqlite
  • ¥20 对D盘进行分盘之前没有将visual studio2022卸载掉,现在该如何下载回来
  • ¥15 完成虚拟机环境配置,还有安装kettle
  • ¥15 2024年全国大学生数据分析大赛A题:直播带货与电商产品的大数据分析 问题5. 请设计一份优惠券的投放策略,需要考虑优惠券的数量、优惠券的金额、投放时间段和投放商品种类等因素。求具体的python代码