如题,我想用hadoop来进行文本检索,想法是一个查询对应一个JOB,检索的话肯定时间要快。
但是我在eclipse中跑一个JOB时,即使是什么都不做,也需要7秒,用hadoop jar命令更久。
请问这个时间可以优化吗,还是Mapreduce初始JOB就需要这么久。还有一个奇怪的现象:
JOB如果遍历文本集合来进行检索,竟然只需要6秒多,比什么都不干还快。
hadoop一个mapreduce的JOB最短执行时间
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
- 邀请回答
-
2条回答
- 小威xiaowei2 2016-04-28 08:00关注
看起来不会有人回答了,个人感觉mapreduce就是慢,不是说它不适合实时处理吗,查询这种对响应时间要求很高的还是不能这样干,
一个job的运行时间不可能小于1s,就是什么都不干都不行。果断放弃,还好有另外一个方法解决 无用评论 打赏 举报
悬赏问题
- ¥15 django项目运行报编码错误
- ¥15 请问这个是什么意思?
- ¥15 STM32驱动继电器
- ¥15 Windows server update services
- ¥15 关于#c语言#的问题:我现在在做一个墨水屏设计,2.9英寸的小屏怎么换4.2英寸大屏
- ¥15 模糊pid与pid仿真结果几乎一样
- ¥15 java的GUI的运用
- ¥15 我想付费需要AKM公司DSP开发资料及相关开发。
- ¥15 怎么配置广告联盟瀑布流
- ¥15 Rstudio 保存代码闪退