asdfg48_ 2015-05-27 15:11 采纳率: 0%
浏览 4537

hadoop map怎么一次读取多行数据（一块数据）而非一行数据？

利用hadoop做数据SVM并行计算，但是想在map任务中将数据分块建立模型再reduce中将分块的
模型合并，但是map每次只能读取一行数据，不能满足数据挖掘中用一整块数据去建模的
原则，请教大家怎么修改map任务逻辑，能一次读取一块数据而非一行数据，谢谢

  • 写回答

2条回答 默认 最新

  • llx1943llx 2015-05-28 01:14
    关注

    你需要自定义hadoop的InputFormat，而不是改mapper

    评论

报告相同问题？