戰士 2018-06-28 01:45 采纳率: 0%
浏览 1225
已结题

OOZIE与Tez执行兼容问题

最近搭建大数据框架,离线计算部分想用OOZIE作为任务调度。
我的大数据框架hadoop的MapReduce执行在tez上。
在执行OOZIE自带的example时候,如果在hadoop的任务用原生的MapReduce执行,也就是当配置文件mapred-site.xml中mapreduce.framework.name设定为yarn时候,OOZIE执行例子都没有问题,都能成功。
但是当把任务放在tez上执行时,也就是把mapred-site.xml中mapreduce.framework.name设定为yarn-tez时候,执行hadoop的任务,比如跑个原生的wordcount例子,会显示执行引擎是tez并执行成功。如果执行OOZIE例子,就会失败,
出现错误:JA009: Cannot initialize Cluster. Please check your configuration for mapreduce.framework.name and the correspond server addresses.
把mapreduce.framework.name改回yarn后,再执行OOZIE例子,还是会成功。
网上有用oozie处理hive作业时使用Tez引擎的例子,但是请问所有的任务,不仅仅是
Hive任务用Tez引擎,应该如何做到OOZIE所有任务都和Tez兼容???或者是OOZIE
所有任务这种情况无法和Tze引擎兼容?如果不能兼容请说明原因·······万分感谢!!

  • 写回答

1条回答 默认 最新

  • dabocaiqq 2018-06-29 15:48
    关注
    评论

报告相同问题?

悬赏问题

  • ¥15 微带串馈天线阵列每个阵元宽度计算
  • ¥15 关于无人驾驶的航向角
  • ¥15 keil的map文件中Image component sizes各项意思
  • ¥30 BC260Y用MQTT向阿里云发布主题消息一直错误
  • ¥20 求个正点原子stm32f407开发版的贪吃蛇游戏
  • ¥15 划分vlan后,链路不通了?
  • ¥20 求各位懂行的人,注册表能不能看到usb使用得具体信息,干了什么,传输了什么数据
  • ¥15 Vue3 大型图片数据拖动排序
  • ¥15 Centos / PETGEM
  • ¥15 划分vlan后不通了