潇潇吸尘器 2014-07-09 09:28 采纳率: 0%
浏览 4326

hadoop比spark的优势?

最近入门spark，但是网上都是说spark的优势，速度快。可是现在很多企业是hadoop结合spark，说明hadoop也有他的优势面？
所以hadoop比spark优势，更擅长什么？

  • 写回答

1条回答

  • CJEQ 2014-12-04 17:20
    关注

    spark确实在一定方面比mapreduce快，比如机器学习的迭代过程，spark是把中间的数据保存在内存中，在每次迭代的时候直接从内存中提取，而mapreduce一直是IO传输，速度比spark慢。但是在相对的比较大，长时间处理与存储的数据来说，还是hadoop相对来说有可取的地方，所以很多企业都是结合起来用，或者更改源代码来获得更大效率

    评论

报告相同问题？

悬赏问题

  • ¥15 乘性高斯噪声在深度学习网络中的应用
  • ¥15 运筹学排序问题中的在线排序
  • ¥15 关于docker部署flink集成hadoop的yarn，请教个问题 flink启动yarn-session.sh连不上hadoop，这个整了好几天一直不行，求帮忙看一下怎么解决
  • ¥30 求一段fortran代码用IVF编译运行的结果
  • ¥15 深度学习根据CNN网络模型，搭建BP模型并训练MNIST数据集
  • ¥15 C++ 头文件/宏冲突问题解决
  • ¥15 用comsol模拟大气湍流通过底部加热（温度不同）的腔体
  • ¥50 安卓adb backup备份子用户应用数据失败
  • ¥20 有人能用聚类分析帮我分析一下文本内容嘛
  • ¥30 python代码，帮调试，帮帮忙吧