qq_32387579 2021-12-15 20:24 采纳率: 100%
浏览 125
已结题

hdfs为什么不适合存储小文件

如题，hdfs为什么不适合存储小文件
网上很多说法说是由于元数据存储在namenode内存结构之中的，海量小文件会导致内存数据不够用，

但是hdfs不是可以通过联邦架构横向扩展么
另外想问下hdfs的block数据结构与物理存储是怎样的原理，这块目前还不是很清楚。看你博客里面说，如果是
10M的小文件存储，会导致一个block的默认128M空间只使用了10M，这个意思是说会有物理磁盘碎片的意思么？

  • 写回答

1条回答 默认 最新

    报告相同问题？

    问题事件

    • 系统已结题 12月27日
    • 已采纳回答 12月19日
    • 创建了问题 12月15日

    悬赏问题

    • ¥15 C语言快速排序函数纠错
    • ¥15 C#的一个应用程序书写
    • ¥65 页面调接口时加载卡住不响应
    • ¥35 用C语言解决编程问题
    • ¥15 unity硬件连接与使用
    • ¥15 鱼缸加热棒的数据分析或者实际案例也行
    • ¥15 postgresql11安装完成后，pgadmin无法启动
    • ¥15 (标签-无人机|关键词-Matlab代码)
    • ¥15 执行shell脚本提示参数太多
    • ¥15 困扰好久了，电脑的串口调试助手向单片机发送一个字符（如：字符‘1’到‘8’）,单片机点亮对应的灯（如发送字符‘2’则点亮第2个灯）并给电脑回复信息：已点亮第x个灯（其中 x 要替换成对应的数字）