asdfg48_ 2015-05-27 15:11 采纳率: 0%
浏览 4530

hadoop map怎么一次读取多行数据（一块数据）而非一行数据？

利用hadoop做数据SVM并行计算，但是想在map任务中将数据分块建立模型再reduce中将分块的
模型合并，但是map每次只能读取一行数据，不能满足数据挖掘中用一整块数据去建模的
原则，请教大家怎么修改map任务逻辑，能一次读取一块数据而非一行数据，谢谢

  • 写回答

2条回答

  • llx1943llx 2015-05-28 01:14
    关注

    你需要自定义hadoop的InputFormat，而不是改mapper

    评论

报告相同问题？

悬赏问题

  • ¥15 请完成下列相关问题！
  • ¥15 drone 推送镜像时候 purge: true 推送完毕后没有删除对应的镜像,手动拷贝到服务器执行结果正确在样才能让指令自动执行成功删除对应镜像，如何解决？
  • ¥15 求daily translation（DT）偏差订正方法的代码
  • ¥15 js调用html页面需要隐藏某个按钮
  • ¥15 ads仿真结果在圆图上是怎么读数的
  • ¥20 Cotex M3的调试和程序执行方式是什么样的？
  • ¥20 java项目连接sqlserver时报ssl相关错误
  • ¥15 一道python难题3
  • ¥15 牛顿斯科特系数表表示
  • ¥15 arduino 步进电机