asdfg48_ 2015-05-27 15:11 采纳率: 0%
浏览 4530

hadoop map怎么一次读取多行数据（一块数据）而非一行数据？

利用hadoop做数据SVM并行计算，但是想在map任务中将数据分块建立模型再reduce中将分块的
模型合并，但是map每次只能读取一行数据，不能满足数据挖掘中用一整块数据去建模的
原则，请教大家怎么修改map任务逻辑，能一次读取一块数据而非一行数据，谢谢

  • 写回答

2条回答 默认 最新

  • llx1943llx 2015-05-28 01:14
    关注

    你需要自定义hadoop的InputFormat，而不是改mapper

    评论

报告相同问题？

悬赏问题

  • ¥60 更换迈创SOL6M4AE卡的时候，驱动要重新装才能使用，怎么解决？
  • ¥15 让node服务器有自动加载文件的功能
  • ¥15 jmeter脚本回放有的是对的有的是错的
  • ¥15 r语言蛋白组学相关问题
  • ¥15 Python时间序列如何拟合疏系数模型
  • ¥15 求学软件的前人们指明方向🥺
  • ¥50 如何增强飞上天的树莓派的热点信号强度，以使得笔记本可以在地面实现远程桌面连接
  • ¥20 双层网络上信息-疾病传播
  • ¥50 paddlepaddle pinn
  • ¥20 idea运行测试代码报错问题