votouch 2022-12-04 01:46 采纳率: 66.7%
浏览 17
已结题

spring boot 大文件合并至hdfs问题

背景:采用spring boot 集成hdfs想做一个网盘,在处理完大文件上传问题以后遇到文件合并的问题。
需要解决的问题:1.文件合并到将合并以后的文件上传到hdfs文件系统响应太慢了。
产生的原因:由于通过前端分片上传了5个g的文件,在文件接受的时候很快,但是在前端请求合并接口,后台合并以后还需要上传到hdfs,之间消耗的时间太长了。
2.能否加入优化hdfs大文件上传至hdfe,现在CSDN关于hdfs文章都太浅了😓

  • 写回答

1条回答 默认 最新

  • 夜郎king 2022博客之星IT其它领域TOP 12 2022-12-04 10:50
    关注

    嗯嗯,5个G的文件有点大了,HDFS在处理大文件效率比较低。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

问题事件

  • 系统已结题 12月13日
  • 已采纳回答 12月5日
  • 创建了问题 12月4日