hdfs是一个分布式文件存储系统,如果我每天产生2G日志,是不是每天还要把这2G日志,导入到hdfs系统中?
如果导入,那么等于我一天的硬盘存储就是4G(近似值),因为2G日志+2G的hdfs文件,觉得这样很没有效率。
请问,我这样理解对不对?
有关hadoop数据导入的一些疑问
- 写回答
- 好问题 0 提建议
- 关注问题
- 邀请回答
-
3条回答 默认 最新
luxixi3600 2011-05-05 11:20关注噢,写个脚本跑定时任务好了。让他凌晨的时候自己折腾去。
还可以增量分析嘛。本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏 举报