吃鸡骑士 2022-02-21 14:51 采纳率: 100%
浏览 126
已结题

kettle向数据库表中插入数据抛出异常数据问题

最近在做数据迁移，计划使用kettle做数据装载，数据输入使用文本文件输入，然后使用表输出，将数据插入到数据库中，在表输出这一步可以设置提交记录数量，默认为1000。然后设置异常抛出处理，此时问题就来了：
提交记录数量为1000时，异常抛出会一下抛出1000条，正确的数据也会抛出。
如果要想精确的抛出异常数据，只能给提交数量设置为1，也就是逐条提交，这样装载的时候效率巨慢无比
我不知道这个是kettle本身的设计问题还是我哪调的参数不对，希望能够为我解惑，不胜感激！

  • 写回答

1条回答 默认 最新

  • 三千烦恼丝xzh 2022-02-22 15:34
    关注

    记录数量批处理的原理是使用了insert后面多个values的语句，实际是一条SQL提交，so 一个values出错所有都会回滚

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？

问题事件

  • 系统已结题 3月2日
  • 已采纳回答 2月22日
  • 修改了问题 2月21日
  • 创建了问题 2月21日