nodie 2011-05-04 16:14
浏览 185
已采纳

有关hadoop数据导入的一些疑问

hdfs是一个分布式文件存储系统,如果我每天产生2G日志,是不是每天还要把这2G日志,导入到hdfs系统中?
如果导入,那么等于我一天的硬盘存储就是4G(近似值),因为2G日志+2G的hdfs文件,觉得这样很没有效率。

请问,我这样理解对不对?

  • 写回答

3条回答 默认 最新

  • luxixi3600 2011-05-05 11:20
    关注

    噢,写个脚本跑定时任务好了。让他凌晨的时候自己折腾去。
    还可以增量分析嘛。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题?

悬赏问题

  • ¥50 导入文件到网吧的电脑并且在重启之后不会被恢复
  • ¥15 (希望可以解决问题)ma和mb文件无法正常打开,打开后是空白,但是有正常内存占用,但可以在打开Maya应用程序后打开场景ma和mb格式。
  • ¥20 ML307A在使用AT命令连接EMQX平台的MQTT时被拒绝
  • ¥20 腾讯企业邮箱邮件可以恢复么
  • ¥15 有人知道怎么将自己的迁移策略布到edgecloudsim上使用吗?
  • ¥15 错误 LNK2001 无法解析的外部符号
  • ¥50 安装pyaudiokits失败
  • ¥15 计组这些题应该咋做呀
  • ¥60 更换迈创SOL6M4AE卡的时候,驱动要重新装才能使用,怎么解决?
  • ¥15 让node服务器有自动加载文件的功能