求HADOOP集群MAPREDUCE程序生成文件整合的办法 100C

由于JAR包是加密的(无法修改),执行后会生成几万个小文件(1M一个左右),想整合成一个文件或者多个大文件,求方法,
我们一般用脚本封装,里面写hadoop jar 然后填一些参数,能添加参数实现吗?

2个回答

Comb‎inei‎nput好像是这个参数。但是怎么写?

打包压缩也行呀 java api

zy841958835
cloudyzhao http://blog.csdn.net/kirayuan/article/details/8651603
2 年多之前 回复
qq_37114772
啊坤. 目前是这个情况 jar包是封闭的 不能打开改代码,这个jar包用mapreduce跑出来的文件数量巨大且小,想在跑JAR包时整合输出的文件进行合并,在hadoop jar 这条命令处加参数实现这种情况
2 年多之前 回复
Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
立即提问