kettle中xml文件输入然后解析有失败的,如何跳过失败的继续执行啊?

kettle中xml文件输入然后解析有失败的内容,如何跳过失败的继续执行啊?求大神解答
图片说明

1个回答

我记得加一段代码就可以的,你可以百度一下

Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!
其他相关推荐
Kettel 如何循环的读取本地文件夹下所有的XML文件并解析到数据库

如标题, 例如在本地D盘的A文件夹下有OUT这子文件夹,里面放xml文件, kettle如何读取这out文件夹下的所有XML文件并解析保存到数据库表里? 然后如何将out文件夹下读取过的放到A文件夹下的BACK这个文件夹中?

ETL工具kettle文本文件输入导入oracle数据库

我需要用kettle将文本文件.txt的数据导入oracle数据库,文件格式如下:![图片说明](https://img-ask.csdn.net/upload/201609/13/1473736380_503352.png) 有个字段有换行符,导致导入数据库的数据如下: ![图片说明](https://img-ask.csdn.net/upload/201609/13/1473736523_239828.png) 请问如何处理.txt文件去掉换行符

如何在kettle中读取dat文件

我这里有一个dat文件,如何利用kettle读取,并用Excel输出?

用kettle做xml输出遇到的问题

无法打开这个步骤窗口 No enum constant org.pentaho.di.trans.steps.xmloutput.XMLField.ContentType. ![图片说明](https://img-ask.csdn.net/upload/201611/24/1479957103_116771.jpg)

Kettle中使用全局变量设置输出文件表名

现在我有一个这样需求:从数据库中,把查询到的数据导入到excel中,然后压缩成zip文件。这里生成的excel文件名是根据数据库中的某一个字段生成前半部分,后面加上生成日期,即文件名为XXX__YYYYMMDD.xls,然后在获取这个文件,压缩成zip文件。这里我考虑用全局变量来设置文件名,但琢磨了一下午都没弄出来,求高手给个实例,然后发我782246287@qq.com邮箱里面,非常感谢!

kettle JSON INPUT解析JSON字符串

各位大大 ,在使用kettle的JSON INPUT解析JSON字符串的时候碰到一个问题 我有一个JSON字符串 {"errorCode":"0","realName":"张小明","schoolId":13068,"schoolName":"四五二小学", "teachClasses":[{"className":"三年级3班","classRole":"0","croName":"小学","croid":3,"gradeId":6,"gradeName":"三年级","id":31105,"[b]teachSubjects[/b]":[{"id":4,"subjectName":"数学"}]}, {"className":"四年级4班","classRole":"1","croName":"小学","croid":3,"gradeId":7,"gradeName":"四年级","id":31106}],"uid":1003147629,"uuid":"T0000001003147629"} 因为这个JSON串中teachClasses也是一个JSON串,所以需要做2次解析,但是在这个teachClasses字符串中,teachSubjects有可能不存在,那么我在使用JSON INPUT工具解析时候, ![图片说明](https://img-ask.csdn.net/upload/201606/15/1465973248_365.png) 运行时就会报错,提示 The data structure is not the same inside the resource! We found 1 values for json path [$..teachSubjects], which is different that the number retourned for path [$..className] (2 values). We MUST have the same number of values for all paths. 有没有哪位大神救命呀 在线等。急急急急。 还有一个问题,当teachSubjects存在的时候,里面标识符也是写id跟外层id重复,一样会报错,提示信息跟上面一样。

KETTLE之文本文件输出控件本地路径,求解惑

kettle服务器是linux,需要实现功能是使某个oracle数据库的表数据在该linux服务器上生成txt文件后,再主动上传到另一台远程服务器上 现在已做如下: job: ![图片说明](https://img-ask.csdn.net/upload/201712/06/1512550766_836036.jpg) trans如下: ![图片说明](https://img-ask.csdn.net/upload/201712/06/1512550736_317802.jpg) 本地调试,已实现上述基本正常功能, 功能结果是生成如下文件 ,并推送到另一远程服务器上 ![图片说明](https://img-ask.csdn.net/upload/201712/06/1512550992_537671.jpg) 但问题是,本人电脑是windows 7版本,调试的文件本地生成路径是在个人电脑盘里,而不是在kettle所在的linux服务器路径上,多方调试无果 本人路径设置如下圈红: ![图片说明](https://img-ask.csdn.net/upload/201712/06/1512551111_399021.jpg) 请教在调用job后,如何生成文件在本地linux服务器上,谢谢

kettle的配置文件在哪里?

现在所用的kettle里面的配置不着在哪里?现在想修改?但是找不到。求赐教!

kettle创建的转换有时候控件相当于跳过,不执行,但显示运行完成,为什么?

kettle创建的转换有时候控件相当于跳过,不执行,但显示运行完成,为什么?

kettle抽取gz格式文件

kettle用文本输入读取gz文件,日志显示 该文件不是文件,看过论坛上的一篇文章,必须设置通配符吗?我试了试读取del文件也提示相同的错误

kettle中有源表和目标表,两个表的表输入的查询中的表名是一个变量,如何让源表中的数据更新到目标表中?

![图片说明](https://img-ask.csdn.net/upload/201811/13/1542112284_134671.png) 如上图所示(不知道有没有显示出来,转换中有两个表输入,一个叫源表,一个叫目标表,他们来自两个不同的库,查询都是 select * from ${TABLENAME} ) 那么,如何让源表中的数据插入或更新到目标表中呢? 尝试过的思路(PS:不可取的思路): 1、暴力操作:执行sql脚本(清空目标表数据)--> 表输入(获取源表数据)-->表输出(将源表数据插入到目标表中) 因为表输出可以不用指定数据库字段,因此能实现需求,但太暴力,boss明确说明,这样不可取。 2、合并记录: 合并记录需要关键字段和数据字段,而我两个表输入都是用的变量的方式,因此不知道数据字段,并且每个表的主键也不一样,关键字段也不好填写。不知道有没有方式能够取到关键字段和数据字段。 3、两个表输入都指向java代码,利用java代码实现比较,然后再更新目标表(没有尝试不知道可不可行) 以上是尝试过的方法,以失败告终。不知道有没有好的方法能够解决这个问题。 求,急

linux 下 kettle Job 日志文件问题

启动脚本是 ``` /opt/kettle/data-integration/kitchen.sh -file=/opt/kettle/Job/syncToGreenCloud.kjb -level=basic >> /opt/kettle/rLog/syn_$(date +%Y%m%d).log & ``` JOB是每10分钟执行一次,日志的时间没有变过,永远在一个日志文件中,文件越来越大,占用资源。 如何能够将每次定时开启之前的日志清空。

kettle表输入的列名包含数字

表t1有一列1a,值为3s_q *1a 3s_q 3s_q 3s_q 表输入的预览结果为 a 1 1 1 为什么值是列名开头的数字

影响window系统中kettle的“表输入”控件抽数效率的因素有哪些,如何提高读取效率

原表有8000万数据,目标表没有索引,抽数速度很低,前期2300条/秒,后期速度越来越低,入库速度也很低。 如下是数据库以及kettle所在windows系统的一些信息: 1、oracle是安装在windows server操作系统中的,数据库版本为11.2,系统内存为16G,数据库SGA如下: ![图片说明](https://img-ask.csdn.net/upload/201906/14/1560502131_847880.png) ![图片说明](https://img-ask.csdn.net/upload/201906/14/1560502154_644584.png) 2、kellte安装在windows7操作系统中,kettle版本为8.2,系统内存为8G,启动内存分配如下: ``` set PENTAHO_DI_JAVA_OPTIONS="-Xms1024m" "-Xmx2048m" "-XX:MaxPermSize=256m" ``` 目前实施过的方法有: 1. kettle最小内存从1G增加到2G,最大内存从2G增加到3G 2. 目标表从1000条一提交改为50000条一提交 3. 转换设置-->杂项-->记录集合里的记录数 从10000上调为11000 只有第3种方法,能使效率提高20%左右,但也是杯水车薪。 ![图片说明](https://img-ask.csdn.net/upload/201906/14/1560503266_286284.png) 希望大神能指点下,调整什么地方可以提高效率,或者还需要我提供什么信息。

kettle8.0右上角没有connect按钮,不能创建资源库,kettle下面也没有xml文件

![图片说明](https://img-ask.csdn.net/upload/201905/20/1558345100_695465.jpg) ![图片说明](https://img-ask.csdn.net/upload/201905/20/1558345119_658373.png)

KETTLE 如何删除“获取文件名”后的文件?

我有一个transformation, 想定期监听某个文件目录,如果有文件,就输出到数据库中。但需要把已处理过的文件,删除或移动到另一个目录夹。 使用“获取文件名”已成功得到指定目录下的用统配符匹配的文件,然后,处理完,插入到数据库,想把它们已处理过的文件删除。 这个要怎么处理?

Kettle7.0如何使用java执行一个转换的ktr文件

kettle-engine这个jar包中确实存在TransMeta.class,但是却缺少这个类,其他Trans,KettleEnvironment这些类也都存在。 是我jar包出错了,还是7.0不用TransMeta这个类了。最重要的是,Kettle7.0如何使用java执行一个转换的ktr文件。

kettle 启动时间的问题

大神们好, 我查了昨天的kettle运行日志,发现 INFO 17-08 02:10:17-Repositoriesmeta-Reading repositories XML file:/wls/kettle/.kettle/repositories.xml INFO 17-08 02:36:35 -XXX-Start of job execution 为什么会等那么长时间才启动呢?请大神们指教,可能是什么原因造成的。谢谢!

kettle如何用命令行导出zip文件

导出时提示不能将XML文件导出成ZIP文件,我操作的时候是将资源库(根目录下/HOME/TEST)中的文件文件在图形界面下通过另存为(VFS)保存在本地,提示报下面的错,但是如果我直接在资源库中保存的时候,在操作kitchen /file:/home/test/test.kjb /export:d:/test.zip 又提示Unable to read file [file:///D:/home/test/test.kjb] Could not read from "file:///D:/home/test/test.kjb" because it is a not a file. ERROR: Kitchen can't continue because the job couldn't be loaded. 然后将资源库的导出XML时又报下面这个错,请问如何导出呢?这个资源库目录下的文件时存在什么地方呢? D:\software\pdi-ee-client-4.4.2-GA\data-integration>kitchen /file:/kettle_tmp/ test.kjb /export:d:/test.zip DEBUG: Using JAVA_HOME DEBUG: _PENTAHO_JAVA_HOME=C:\Oracle\Middleware\jdk160_14_R27.6.5-32 DEBUG: _PENTAHO_JAVA=C:\Oracle\Middleware\jdk160_14_R27.6.5-32\bin\java.exe DEBUG: PENTAHO_INSTALLED_LICENSE_PATH= WARN 13-09 10:43:02,390 - Unable to load Hadoop Configuration from "file:///D:/ software/pdi-ee-client-4.4.2-GA/data-integration/plugins/pentaho-big-data-plugin /hadoop-configurations/mapr21". For more information enable debug logging. INFO 13-09 10:43:02,413 - Kitchen - Start of run. INFO 13-09 10:43:02,703 - - Loading transformation from repository [test] in d irectory [/home/test] org.pentaho.di.core.exception.KettleException: Error serializing export interface [D:/kettle_tmp/test.kjb : test] Unexpected error during transformation metadata load No repository defined! at org.pentaho.di.resource.ResourceUtil.serializeResourceExportInterface (ResourceUtil.java:118) at org.pentaho.di.resource.ResourceUtil.serializeResourceExportInterface (ResourceUtil.java:56) at org.pentaho.di.kitchen.Kitchen.main(Kitchen.java:313) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl. java:39) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAcces sorImpl.java:25) at java.lang.reflect.Method.invoke(Method.java:597) at org.pentaho.commons.launcher.Launcher.main(Launcher.java:134) Caused by: org.pentaho.di.core.exception.KettleException: Unexpected error during transformation metadata load No repository defined! at org.pentaho.di.job.entries.trans.JobEntryTrans.getTransMeta(JobEntryT rans.java:1208) at org.pentaho.di.job.entries.trans.JobEntryTrans.exportResources(JobEnt ryTrans.java:1311) at org.pentaho.di.job.JobMeta.exportResources(JobMeta.java:3104) at org.pentaho.di.resource.ResourceUtil.serializeResourceExportInterface (ResourceUtil.java:87) ... 7 more Caused by: org.pentaho.di.core.exception.KettleException: No repository defined! at org.pentaho.di.job.entries.trans.JobEntryTrans.getTransMeta(JobEntryT rans.java:1181) ... 10 more

在中国程序员是青春饭吗?

今年,我也32了 ,为了不给大家误导,咨询了猎头、圈内好友,以及年过35岁的几位老程序员……舍了老脸去揭人家伤疤……希望能给大家以帮助,记得帮我点赞哦。 目录: 你以为的人生 一次又一次的伤害 猎头界的真相 如何应对互联网行业的「中年危机」 一、你以为的人生 刚入行时,拿着傲人的工资,想着好好干,以为我们的人生是这样的: 等真到了那一天,你会发现,你的人生很可能是这样的: ...

程序员请照顾好自己,周末病魔差点一套带走我。

程序员在一个周末的时间,得了重病,差点当场去世,还好及时挽救回来了。

和黑客斗争的 6 天!

互联网公司工作,很难避免不和黑客们打交道,我呆过的两家互联网公司,几乎每月每天每分钟都有黑客在公司网站上扫描。有的是寻找 Sql 注入的缺口,有的是寻找线上服务器可能存在的漏洞,大部分都...

点沙成金:英特尔芯片制造全过程揭密

“亚马逊丛林里的蝴蝶扇动几下翅膀就可能引起两周后美国德州的一次飓风……” 这句人人皆知的话最初用来描述非线性系统中微小参数的变化所引起的系统极大变化。 而在更长的时间尺度内,我们所生活的这个世界就是这样一个异常复杂的非线性系统…… 水泥、穹顶、透视——关于时间与技艺的蝴蝶效应 公元前3000年,古埃及人将尼罗河中挖出的泥浆与纳特龙盐湖中的矿物盐混合,再掺入煅烧石灰石制成的石灰,由此得来了人...

上班一个月,后悔当初着急入职的选择了

最近有个老铁,告诉我说,上班一个月,后悔当初着急入职现在公司了。他之前在美图做手机研发,今年美图那边今年也有一波组织优化调整,他是其中一个,在协商离职后,当时捉急找工作上班,因为有房贷供着,不能没有收入来源。所以匆忙选了一家公司,实际上是一个大型外包公司,主要派遣给其他手机厂商做外包项目。**当时承诺待遇还不错,所以就立马入职去上班了。但是后面入职后,发现薪酬待遇这块并不是HR所说那样,那个HR自...

女程序员,为什么比男程序员少???

昨天看到一档综艺节目,讨论了两个话题:(1)中国学生的数学成绩,平均下来看,会比国外好?为什么?(2)男生的数学成绩,平均下来看,会比女生好?为什么?同时,我又联想到了一个技术圈经常讨...

副业收入是我做程序媛的3倍,工作外的B面人生是怎样的?

提到“程序员”,多数人脑海里首先想到的大约是:为人木讷、薪水超高、工作枯燥…… 然而,当离开工作岗位,撕去层层标签,脱下“程序员”这身外套,有的人生动又有趣,马上展现出了完全不同的A/B面人生! 不论是简单的爱好,还是正经的副业,他们都干得同样出色。偶尔,还能和程序员的特质结合,产生奇妙的“化学反应”。 @Charlotte:平日素颜示人,周末美妆博主 大家都以为程序媛也个个不修边幅,但我们也许...

如果你是老板,你会不会踢了这样的员工?

有个好朋友ZS,是技术总监,昨天问我:“有一个老下属,跟了我很多年,做事勤勤恳恳,主动性也很好。但随着公司的发展,他的进步速度,跟不上团队的步伐了,有点...

我入职阿里后,才知道原来简历这么写

私下里,有不少读者问我:“二哥,如何才能写出一份专业的技术简历呢?我总感觉自己写的简历太烂了,所以投了无数份,都石沉大海了。”说实话,我自己好多年没有写过简历了,但我认识的一个同行,他在阿里,给我说了一些他当年写简历的方法论,我感觉太牛逼了,实在是忍不住,就分享了出来,希望能够帮助到你。 01、简历的本质 作为简历的撰写者,你必须要搞清楚一点,简历的本质是什么,它就是为了来销售你的价值主张的。往深...

外包程序员的幸福生活

今天给你们讲述一个外包程序员的幸福生活。男主是Z哥,不是在外包公司上班的那种,是一名自由职业者,接外包项目自己干。接下来讲的都是真人真事。 先给大家介绍一下男主,Z哥,老程序员,是我十多年前的老同事,技术大牛,当过CTO,也创过业。因为我俩都爱好喝酒、踢球,再加上住的距离不算远,所以一直也断断续续的联系着,我对Z哥的状况也有大概了解。 Z哥几年前创业失败,后来他开始干起了外包,利用自己的技术能...

C++11:一些微小的变化(新的数据类型、template表达式内的空格、nullptr、std::nullptr_t)

本文介绍一些C++的两个新特性,它们虽然微小,但对你的编程十分重要 一、Template表达式内的空格 C++11标准之前建议在“在两个template表达式的闭符之间放一个空格”的要求已经过时了 例如: vector<list<int> >; //C++11之前 vector<list<int>>; //C++11 二、nullptr ...

优雅的替换if-else语句

场景 日常开发,if-else语句写的不少吧??当逻辑分支非常多的时候,if-else套了一层又一层,虽然业务功能倒是实现了,但是看起来是真的很不优雅,尤其是对于我这种有强迫症的程序"猿",看到这么多if-else,脑袋瓜子就嗡嗡的,总想着解锁新姿势:干掉过多的if-else!!!本文将介绍三板斧手段: 优先判断条件,条件不满足的,逻辑及时中断返回; 采用策略模式+工厂模式; 结合注解,锦...

深入剖析Springboot启动原理的底层源码,再也不怕面试官问了!

大家现在应该都对Springboot很熟悉,但是你对他的启动原理了解吗?

离职半年了,老东家又发 offer,回不回?

有小伙伴问松哥这个问题,他在上海某公司,在离职了几个月后,前公司的领导联系到他,希望他能够返聘回去,他很纠结要不要回去? 俗话说好马不吃回头草,但是这个小伙伴既然感到纠结了,我觉得至少说明了两个问题:1.曾经的公司还不错;2.现在的日子也不是很如意。否则应该就不会纠结了。 老实说,松哥之前也有过类似的经历,今天就来和小伙伴们聊聊回头草到底吃不吃。 首先一个基本观点,就是离职了也没必要和老东家弄的苦...

为什么你不想学习?只想玩?人是如何一步一步废掉的

不知道是不是只有我这样子,还是你们也有过类似的经历。 上学的时候总有很多光辉历史,学年名列前茅,或者单科目大佬,但是虽然慢慢地长大了,你开始懈怠了,开始废掉了。。。 什么?你说不知道具体的情况是怎么样的? 我来告诉你: 你常常潜意识里或者心理觉得,自己真正的生活或者奋斗还没有开始。总是幻想着自己还拥有大把时间,还有无限的可能,自己还能逆风翻盘,只不是自己还没开始罢了,自己以后肯定会变得特别厉害...

为什么程序员做外包会被瞧不起?

二哥,有个事想询问下您的意见,您觉得应届生值得去外包吗?公司虽然挺大的,中xx,但待遇感觉挺低,马上要报到,挺纠结的。

当HR压你价,说你只值7K,你该怎么回答?

当HR压你价,说你只值7K时,你可以流畅地回答,记住,是流畅,不能犹豫。 礼貌地说:“7K是吗?了解了。嗯~其实我对贵司的面试官印象很好。只不过,现在我的手头上已经有一份11K的offer。来面试,主要也是自己对贵司挺有兴趣的,所以过来看看……”(未完) 这段话主要是陪HR互诈的同时,从公司兴趣,公司职员印象上,都给予对方正面的肯定,既能提升HR的好感度,又能让谈判气氛融洽,为后面的发挥留足空间。...

面试:第十六章:Java中级开发(16k)

HashMap底层实现原理,红黑树,B+树,B树的结构原理 Spring的AOP和IOC是什么?它们常见的使用场景有哪些?Spring事务,事务的属性,传播行为,数据库隔离级别 Spring和SpringMVC,MyBatis以及SpringBoot的注解分别有哪些?SpringMVC的工作原理,SpringBoot框架的优点,MyBatis框架的优点 SpringCould组件有哪些,他们...

面试阿里p7,被按在地上摩擦,鬼知道我经历了什么?

面试阿里p7被问到的问题(当时我只知道第一个):@Conditional是做什么的?@Conditional多个条件是什么逻辑关系?条件判断在什么时候执...

面试了一个 31 岁程序员,让我有所触动,30岁以上的程序员该何去何从?

最近面试了一个31岁8年经验的程序猿,让我有点感慨,大龄程序猿该何去何从。

【阿里P6面经】二本,curd两年,疯狂复习,拿下阿里offer

二本的读者,在老东家不断学习,最后逆袭

大三实习生,字节跳动面经分享,已拿Offer

说实话,自己的算法,我一个不会,太难了吧

程序员垃圾简历长什么样?

已经连续五年参加大厂校招、社招的技术面试工作,简历看的不下于万份 这篇文章会用实例告诉你,什么是差的程序员简历! 疫情快要结束了,各个公司也都开始春招了,作为即将红遍大江南北的新晋UP主,那当然要为小伙伴们做点事(手动狗头)。 就在公众号里公开征简历,义务帮大家看,并一一点评。《启舰:春招在即,义务帮大家看看简历吧》 一石激起千层浪,三天收到两百多封简历。 花光了两个星期的所有空闲时...

《经典算法案例》01-08:如何使用质数设计扫雷(Minesweeper)游戏

我们都玩过Windows操作系统中的经典游戏扫雷(Minesweeper),如果把质数当作一颗雷,那么,表格中红色的数字哪些是雷(质数)?您能找出多少个呢?文中用列表的方式罗列了10000以内的自然数、质数(素数),6的倍数等,方便大家观察质数的分布规律及特性,以便对算法求解有指导意义。另外,判断质数是初学算法,理解算法重要性的一个非常好的案例。

《Oracle Java SE编程自学与面试指南》最佳学习路线图(2020最新版)

正确选择比瞎努力更重要!

面试官:你连SSO都不懂,就别来面试了

大厂竟然要考我SSO,卧槽。

微软为一人收购一公司?破解索尼程序、写黑客小说,看他彪悍的程序人生!...

作者 | 伍杏玲出品 | CSDN(ID:CSDNnews)格子衬衫、常掉发、双肩包、修电脑、加班多……这些似乎成了大众给程序员的固定标签。近几年流行的“跨界风”开始刷新人们对程序员的...

终于,月薪过5万了!

来看几个问题想不想月薪超过5万?想不想进入公司架构组?想不想成为项目组的负责人?想不想成为spring的高手,超越99%的对手?那么本文内容是你必须要掌握的。本文主要详解bean的生命...

我说我懂多线程,面试官立马给我发了offer

不小心拿了几个offer,有点烦

自从喜欢上了B站这12个UP主,我越来越觉得自己是个废柴了!

不怕告诉你,我自从喜欢上了这12个UP主,哔哩哔哩成为了我手机上最耗电的软件,几乎每天都会看,可是吧,看的越多,我就越觉得自己是个废柴,唉,老天不公啊,不信你看看…… 间接性踌躇满志,持续性混吃等死,都是因为你们……但是,自己的学习力在慢慢变强,这是不容忽视的,推荐给你们! 都说B站是个宝,可是有人不会挖啊,没事,今天咱挖好的送你一箩筐,首先啊,我在B站上最喜欢看这个家伙的视频了,为啥 ,咱撇...

立即提问
相关内容推荐