I_promiseU 2015-03-30 07:22
浏览 972

reduce到底是什么作用?

把含有相同的KEY放到一组去(shuffle)这个动作是再mapper得到中间结果之后,
copy到“多个”reduce之前做的。那“多个”reduce是干嘛的?

书上说:不同的KEY分给不同的reduce。 那么间接说明了reduce的个数是由key分组后的个数决定的,那JOB的setNumReduceTasks的指定又代表了什么?如果是3种KEY,我却指定个reduce,会是什么情形?还是说这里的reduce个数和按key来分发reduce的个数毫无关系?

  • 写回答

0条回答 默认 最新

    报告相同问题?

    悬赏问题

    • ¥60 版本过低apk如何修改可以兼容新的安卓系统
    • ¥25 由IPR导致的DRIVER_POWER_STATE_FAILURE蓝屏
    • ¥50 有数据,怎么建立模型求影响全要素生产率的因素
    • ¥50 有数据,怎么用matlab求全要素生产率
    • ¥15 TI的insta-spin例程
    • ¥15 完成下列问题完成下列问题
    • ¥15 C#算法问题, 不知道怎么处理这个数据的转换
    • ¥15 YoloV5 第三方库的版本对照问题
    • ¥15 请完成下列相关问题!
    • ¥15 drone 推送镜像时候 purge: true 推送完毕后没有删除对应的镜像,手动拷贝到服务器执行结果正确在样才能让指令自动执行成功删除对应镜像,如何解决?