nodie 2011-05-04 16:14
浏览 186
已采纳

有关hadoop数据导入的一些疑问

hdfs是一个分布式文件存储系统,如果我每天产生2G日志,是不是每天还要把这2G日志,导入到hdfs系统中?
如果导入,那么等于我一天的硬盘存储就是4G(近似值),因为2G日志+2G的hdfs文件,觉得这样很没有效率。

请问,我这样理解对不对?

  • 写回答

3条回答 默认 最新

  • luxixi3600 2011-05-05 11:20
    关注

    噢,写个脚本跑定时任务好了。让他凌晨的时候自己折腾去。
    还可以增量分析嘛。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题?