kettle Job日志问题--trans日志和job日志的关联

各位大虾：
我们公司用KETTle工具创建JOB的方式完成数据同步，一个job中很可能有多个转换。现在需要对job的运行做监控：要求数据库中实现运行日志表（我选了资源库，是不是还要自己建立日志表，日志表的表结构怎么定义？？），日志分两级——
Job 日志表记录每个转换的名称，开始运行时间，运行状态，报错信息等。每个转换还要有自己的日志来详细记录转换本身的运行状态。

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

3条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
fanspace 2015-07-23 08:39
关注
注意最下方中间的sql 要点击，生成语句后点击执行按钮

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

kettle执行转换大概三四百次后就栈溢出了日志写入报错 etl java 有问必答
2021-11-25 20:49

回答 1 已采纳内存溢出的种类有很多。有可能是大循环导致的。因为在大循环里产生的对象不一定会及时被清理。建议使用gc优化代码。
kettle Loading job from XML file : null java 有问必答
2022-01-05 11:13

回答 1 已采纳找不到xml配置的job，检查一下参数是否准确。
linux 下kettle执行mysql抽数到oracle的job问题报错 linux mysql
2018-11-21 11:00

回答 1 已采纳 https://blog.csdn.net/benbenniaono1/article/details/82222998
kettle日志解析_Kettle运行日志记录
2020-12-24 12:55

张勇18613964002的博客原创文章，转载请注明出处：http://qq85609655.iteye.com/blog/2173882在kettle.properties中，可以定义参数KETTLE_JOB_LOG_DB=dw1KETTLE_JOB_LOG_TABLE=bi_etl_job_log_tableKETTLE_TRANS_LOG_DB=dw1KETTLE_TRANS_...
sqoop和kettle可以实现oracle到kafka嘛 hbase sqoop 大数据
2022-08-08 17:40

回答 1 已采纳都可以抽Oracle写Kafka重点是你要怎么做数据抽取，增量变更捕获或者就是全量抽
kettle 日志保存到数据库r_log
2011-02-16 14:14

回答 3 已采纳这个建议你读代码吧我们当时都是读代码跟踪的没法子 kettle的文档不是很详细
关于#kettle#的问题，如何解决？(关键词-字段) etl
2023-03-23 11:55

回答 1 已采纳该回答引用GPTᴼᴾᴱᴺᴬᴵ,具体如下：你可以在Kettle中使用"Select Value"步骤来解决这个问题。使用该步骤，你可以选择"Replace value"选项，并将".0"替换为空字符串
java kettle job_java项目调用kettleJob和Trans
2021-03-06 18:19

StevenConan的博客 1、调用本地Job和Trans较简单不用多说没有遇到任何问题，以下是代码：importorg.pentaho.di.core.KettleEnvironment;importorg.pentaho.di.core.database.DatabaseMeta;importorg.pentaho.di.core.exception....
《大数据实训电影推荐系统》kettle安装 hadoop spark
2023-02-04 09:55

回答 4 已采纳这种情况，你要增加根目录(/）的分配空间。可以使用磁盘管理工具扩大根分区的大小。
KETTLE调度问题 etl java
2023-03-09 17:34

回答 2 已采纳小魔女参考了bing和GPT部分内容调写:Java head space的问题可能是由于内存不足导致的，可以尝试增加内存来解决。可以在Kettle的设置中调整内存大小，例如增加Java的最大内存，设置
Kettle读取非固定格式的excel问题 etl etl工程师
2022-07-15 18:06

回答 2 已采纳是否可以这样：1、先获取目录下所有文件的名字；2、根据名字建立分支，将相同格式的文件放到相同的分支中；3、这样每个分支处理的文件格式就相同了
springboot整合kettle和xxljob
2023-11-16 17:25

大潘_IT的博客 springboot整合kettle+xxljob kettle9.2
关于#Kettle#的问题，如何解决？ etl
2023-03-17 16:57

回答 3 已采纳参考GPT和自己的思路：您好，针对您关于#Kettle#的问题，可以使用Kettle中的"Merge Join"步骤来实现数据校验并输出到新的表里。具体操作步骤如下：将要校验的excel文件使用"
kettle日志解析_kettle之日志有关方面的总结
2021-01-14 08:57

SISUERyep的博客 jobmysql1.job日志sqljob日志有三种：数据库做业日志表：总体的记录oracle做业项日志表：每一个项目的日志测试日志通道日志表：spa第一次配置，由于数据库中尚未这个表，须要手动点击sql建立表，而后执行sql。3d日志...
java调用kettle---调用本地Job和Trans
2019-05-08 10:45

LFfootprint的博客 * java 调用 kettle 的job * * @param jobname * 如： String fName= "D:\\kettle\\informix_to_am_4.ktr"; */ public static void runJob(String[] params, String jobPath) { try { ...
没有解决我的问题, 去提问

悬赏问题

¥15 程序不包含适用于入口点的静态Main方法
¥15 素材场景中光线烘焙后灯光失效
¥15 请教一下各位，为什么我这个没有实现模拟点击
¥15 执行 virtuoso 命令后，界面没有，cadence 启动不起来
¥50 comfyui下连接animatediff节点生成视频质量非常差的原因
¥20 有关区间dp的问题求解
¥15 多电路系统共用电源的串扰问题
¥15 slam rangenet++配置
¥15 有没有研究水声通信方面的帮我改俩matlab代码
¥15 ubuntu子系统密码忘记