学编程的渣渣 2018-10-23 06:47 采纳率: 0%
浏览 1388
已采纳

使用hue集成oozie 运行 shell 脚本 完成度为95% 状态持续为running

查看MR日志，error信息：
图片说明

            hadoop:8088 上面状态一直为RUNNING ，内存有剩余
  • 写回答

1条回答 默认 最新

  • zqbnqsdsmd 2018-10-26 07:39
    关注

    https://blog.csdn.net/lujisen/article/details/79086716

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？

  • OOZIE调度shell脚本引起可能存在的错误问题。
    2021-07-15 09:32
    wegigbalebykillofy的博客 1，oozie调度shell脚本，当出现这个错误信息–引发的问题有（我单独执行shell脚本（执行sqoop命令用了sudo -u hive），即使没有表都可以识别–hive-overwrite会自动创建表出来，但是我用oozie调度的shell脚本(第一不...
  • Hue中使用oozie调用shell启动sqoop报错
    2020-12-01 15:20
    love_lixr的博客 2020-12-01 14:23:01,841 INFO org.apache.oozie.command.wf.ActionStartXCommand: SERVER[cdh-dev5] USER[itview] GROUP[-] TOKEN[] APP[SqoopTest] JOB[0000000-201201142033410-oozie-oozi-W] ACTION[0000000-...
  • hue上workflow之shell-sqoop脚本配置实录
    2020-05-31 14:42
    叁木-Neil的博客 这里的shell脚本会以上篇的脚本为例！ 一、配置hue的workflow 二、所遇问题 2.1 不能加载mysql驱动 报错如下： ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.RuntimeException: Could
  • java 操作 Hue上的 Oozie 工作流
    2020-06-11 18:49
    人生有如两个橘子的博客 org.apache.oozie</groupId> <artifactId>oozie-client</artifactId> <version>4.1.0</version> </dependency> code: import java.util.Properties; import org.
  • Oozie
    2022-08-30 17:14
    xyc1211的博客 Job状态 执行workflow应用程序 job.properties hue hue操作oozie 各种调度工具特性对比 Ooize 是一个重量级,功能全面 Azkaban 轻量级 linux crontab 最轻量，最简单 Oozie 使用Oozie的主要目的是为了管理不同类型的...
  • Oozie简介和运行实例
    2019-08-26 09:56
    少年阿峣_从零单排的博客 一、oozie简介 Oozie是一个管理 Apache Hadoop 作业的工作流调度系统。 官网连接：http://oozie.apache.org/ 1、安装： 一是源生的，需要自己编译；（本文暂时不介绍具体的安装步骤，可以参考...
  • Hadoop_23_oozie
    2020-06-07 19:17
    菜小雨的博客 文章目录oozieoozie的安装解决oozie的页面的时区问题oozie的使用使用oozie调度shell脚本使用oozie调度hive使用oozie调度MR任务oozie的任务串联oozie的任务调度,定时任务执行oozie当中任务的查看以及杀死 oozie Oozie...
  • Oozie重启任务策略研究及总结
    2020-05-16 22:13
    莫叫石榴姐的博客 Oozie作为一种开源的任务调度引擎，在大数据生态圈中起着举足轻重的作用。...本文针对Oozie的重启策略进行研究总结，给出了实际中具体应用方法，并针对重启策略编写了具体监控脚本，具有一定的实践指导意义。
  • oozie调度sqoop踩坑之路（hue配置）
    2018-08-27 23:36
    深寒色的猫丶的博客 通过oozie来调度管理sqoop数据抽取流程，一般有两种方法：一是直接使用oozie的sqoop-action，二是将sqoop语句写在shell脚本中，通过shell-action来调度。经过测试，sqoop-action实在是坑多，故采用坑相对较少的shell...
  • hadoop2.6+hive+oozie+sqoop+hue集群搭建
    2020-01-20 18:05
    ·慕晴·的博客 hadoop集群搭建一、 环境说明二、 环境搭建1. Linux系统准备2. 安装jdk8并设置环境变量3. 安装mysql4. 安装hadoop5. 安装hive6. 安装sqoop7. 安装oozie8. 安装hue9. 结果展示10. 启动集群脚本 一、 环境说明 我...
  • [理解总结+实战]oozie的使用
    2020-09-02 16:55
    王一1995的博客 oozie实践背景：1.知识点：1.1.简介1.2.特点1.3.架构1.4.Oozie的部署与搭建1.5...关于时区2.2.1.Oozie定时任务/循环任务2.3.Flink整合Oozie Shell Action 提交任务带Kerberos认证2.4.修改oozie的配置更改时区 背景： 最
  • oozie的sharelib没有正确放到hadoop中，导致异常/user/oozie/share/lib does not exist
    2018-05-28 19:11
    冯立彬的博客 但是也有可能在出现某种情况异常如权限不对等的情况下，导致/user/oozie/share/lib没有正确的放入oozie的share lib，其错误可能表示为如下已知的两种情况： 1、通过HUE的界面的QUERY-&gt;Editor-&gt;J...
  • Oozie的workflow和coordinate的使用（HA）
    2018-11-16 17:02
    首席撩妹指导官的博客 &lt;workflow-app name="...uri:oozie:workflow:0.1"&gt; ... &lt;decision name="[NODE-NAME]"&gt; &lt;switch&gt; &lt;case to="[NODE_NAME]"&g
  • Oozie简介
    2018-03-27 13:20
    爱萨萨的博客 Oozie是一种Java Web应用程序，它运行在Java servlet容器——即Tomcat——中，并使用数据库来存储以下内容：工作流定义当前运行的工作流实例，包括实例的状态和变量Oozie工作流是放置在控制依赖DAG（有向无环图 ...
  • 2024年大数据平台架构浅析——以讯飞大数据平台Odeon为例(3)
    2024-05-02 16:37
    2401_84182097的博客 Oozie 也非常灵活。人们可以很容易启动，停止，暂停和重新运行作业...WorkflowBundlejava mapreduce、Streaming mapreduce、hive、sqoop和distcp（分布式拷贝）等等，也支持系统特定的作业，例如java程序和shell脚本。
  • oozie job 的挂了监控报警或重启
    2019-01-18 18:50
    weixin_34204722的博客 Oozie的Workflow里面运行MapReduce、Hive、Sqoop或Shell脚本。 Action Extensions包括：Email Action、Shell Action、Hive Action、Hive 2 Action、Sqoop Action、Ssh Action、DistCp Action、Writing a Custom ...
  • 没有解决我的问题, 去提问

问题事件

  • 已采纳回答 9月28日