asdfg48_ 2015-05-27 15:11 采纳率: 0%
浏览 4530

hadoop map怎么一次读取多行数据(一块数据)而非一行数据?

利用hadoop做数据SVM并行计算,但是想在map任务中将数据分块建立模型再reduce中将分块的
模型合并,但是map每次只能读取一行数据,不能满足数据挖掘中用一整块数据去建模的
原则,请教大家怎么修改map任务逻辑,能一次读取一块数据而非一行数据,谢谢

  • 写回答

2条回答

  • llx1943llx 2015-05-28 01:14
    关注

    你需要自定义hadoop的InputFormat,而不是改mapper

    评论

报告相同问题?

悬赏问题

  • ¥30 这是哪个作者做的宝宝起名网站
  • ¥60 版本过低apk如何修改可以兼容新的安卓系统
  • ¥25 由IPR导致的DRIVER_POWER_STATE_FAILURE蓝屏
  • ¥50 有数据,怎么建立模型求影响全要素生产率的因素
  • ¥50 有数据,怎么用matlab求全要素生产率
  • ¥15 TI的insta-spin例程
  • ¥15 完成下列问题完成下列问题
  • ¥15 C#算法问题, 不知道怎么处理这个数据的转换
  • ¥15 YoloV5 第三方库的版本对照问题
  • ¥15 请完成下列相关问题!