QuartzJob 调用 hadoop mapreduce 报错

Error: java.io.IOException: com.mysql.jdbc.Driver
at org.apache.hadoop.mapreduce.lib.db.DBOutputFormat.getRecordWriter(DBOutputFormat.java:185)
at org.apache.hadoop.mapred.ReduceTask$NewTrackingRecordWriter.(ReduceTask.java:540)
at org.apache.hadoop.mapred.ReduceTask.runNewReducer(ReduceTask.java:614)
at org.apache.hadoop.mapred.ReduceTask.run(ReduceTask.java:389)
at org.apache.hadoop.mapred.YarnChild$2.run(YarnChild.java:164)
at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:422)
at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1693)
at org.apache.hadoop.mapred.YarnChild.main(YarnChild.java:158)

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除
收藏举报

2条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
Evankaka 博客专家认证 2016-11-19 12:33
关注
看看mysql的配置是否正确

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

在eclipse运行hadoop mapreduce例子报错 eclipse hadoop mapreduce
2017-09-06 01:16

回答 1 已采纳 http://blog.csdn.net/jack85986370/article/details/51902871
hadoop启动报错 hadoop hdfs 其他大数据
2021-12-26 23:10

回答 1 已采纳您这个问题是没有正常启动导致的呢，如果方便的话贴一下hadoop/log/里面的hdfs相关日志呢，方便解决问题呢我之前也做过和您这个相关的实验，您可以参考一下呢：
Hadoop mapreduce传值问题 hadoop mapreduce 推荐算法
2018-04-25 00:52

回答 1 已采纳 step4输出的是 UserId\tItemId,Score，也就是Step5的Map的step4数据KEY是UserId，map的step2的数据KEY是itemID，肯定没办法走到同一个循环。
大数据 hadoop mapreduce 词频统计
2016-10-23 10:51

在hadoop平台上，用mapreduce编程实现大数据的词频统计
IDEA运行hadoop集群报错 hadoop idea 有问必答
2021-12-04 16:26

回答 1 已采纳你代码中获取了args中的参数，这个是需要配置的。如果觉得麻烦，直接将代码中涉及args[]取值的地方替换为具体的值。 idea中运行args作为接收参数的程序_Luke
kettle连接Hadoop遇如下报错 big data hdfs spark
2022-10-03 13:52

回答 1 已采纳把光标挪到最后一个输入框（Oozie的URL）中，使用Tab来挪光标，然后回车试试。
Hadoop Distcp报错队列问题 hadoop
2017-01-17 12:38

回答 1 已采纳 -Dmapred.job.queue.name=队列名称
大数据-Hadoop-MapReduce介绍
2024-04-21 15:20

主要介绍了Hadoop的MapReduce的Java编程接口，包括Mapper API和Reducer API，Job的运行模式、工作流
hadoop和大数据、spark的关系该怎么理解？ hadoop spark 大数据
2022-06-23 13:55

回答 1 已采纳 Hadoop和Spark都是处理大数据的框架。就象你说关系型数据库，这只是一个概念，但是代表了一系列的含意，比如数据是结构化的，基于关系模型存储的。而MySQL、Oracle、SqlServer这些就
大数据、Hadoop hadoop 大数据
2022-12-19 16:44

回答 1 已采纳 format只需要对NameNode做，如果你在node3做了也没关系，删除node3上的、hdfs-site.xml中配置的NameNode对应的目录即可，然后在node1上也删除相同的目录后，重新
关于hadoop和spark大数据开发大数据
2016-06-12 05:52

回答 2 已采纳你好本人刚在大数据库处理方面学习对此有以下理解 1，大数据处理看到的注重点是对数据处理，字段与字段在oracle与oracle ，oracle与mysql，oracle与mariadb等数据
大数据Hadoop、MapReduce、Hive项目实践
2023-11-09 10:24

大数据Hadoop、MapReduce、Hive项目实践
Hadoop 格式命令报错 hadoop
2022-09-18 22:43

回答 1 已采纳有安装jdk了吗？有安装的话环境变量JAVA_HOME是配置为jdk的安装路径吗？
hadoop运行mapreduce报错Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRApp
2022-12-20 20:09

花小疯的博客 hadoop运行mapreduce报错Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster
Hadoop+Spark大数据开发零基础入门
2021-06-18 23:33

2020最新课程，从安装CentOS操作系统到搭建Hadoop2.x集群，结合实际案例一步一步讲解，带你零基础入门。...本套课程包含Hadoop2.x和Spark2.4.0的主要核心知识点，HDFS、MapReduce、Spark RDD Shell与API操作等。
没有解决我的问题, 去提问

悬赏问题

¥20 关于#硬件工程#的问题，请各位专家解答！
¥15 关于#matlab#的问题：期望的系统闭环传递函数为G(s)=wn^2/s^2+2¢wn+wn^2阻尼系数¢=0.707，使系统具有较小的超调量
¥15 FLUENT如何实现在堆积颗粒的上表面加载高斯热源
¥30 截图中的mathematics程序转换成matlab
¥15 动力学代码报错，维度不匹配
¥15 Power query添加列问题
¥50 Kubernetes&Fission&Eleasticsearch
¥15 報錯：Person is not mapped，如何解決？
¥15 c++头文件不能识别CDialog
¥15 Excel发现不可读取的内容