qq_32387579 2021-12-15 20:24 采纳率: 100%
浏览 125
已结题

hdfs为什么不适合存储小文件

如题,hdfs为什么不适合存储小文件
网上很多说法说是由于元数据存储在namenode内存结构之中的,海量小文件会导致内存数据不够用,

但是hdfs不是可以通过联邦架构横向扩展么
另外想问下hdfs的block数据结构与物理存储是怎样的原理,这块目前还不是很清楚。看你博客里面说,如果是
10M的小文件存储,会导致一个block的默认128M空间只使用了10M,这个意思是说会有物理磁盘碎片的意思么?

  • 写回答

1条回答 默认 最新

    报告相同问题?

    问题事件

    • 系统已结题 12月27日
    • 已采纳回答 12月19日
    • 创建了问题 12月15日

    悬赏问题

    • ¥15 C语言快速排序函数纠错
    • ¥15 C#的一个应用程序书写
    • ¥65 页面调接口时加载卡住不响应
    • ¥35 用C语言解决编程问题
    • ¥15 unity硬件连接与使用
    • ¥15 鱼缸加热棒的数据分析或者实际案例也行
    • ¥15 postgresql11安装完成后,pgadmin无法启动
    • ¥15 (标签-无人机|关键词-Matlab代码)
    • ¥15 执行shell脚本提示参数太多
    • ¥15 困扰好久了,电脑的串口调试助手向单片机发送一个字符(如:字符‘1’到‘8’),单片机点亮对应的灯(如发送字符‘2’则点亮第2个灯)并给电脑回复信息:已点亮第x个灯(其中 x 要替换成对应的数字)