吃鸡骑士 2022-02-21 14:51 采纳率: 100%
浏览 124
已结题

kettle向数据库表中插入数据抛出异常数据问题

最近在做数据迁移，计划使用kettle做数据装载，数据输入使用文本文件输入，然后使用表输出，将数据插入到数据库中，在表输出这一步可以设置提交记录数量，默认为1000。然后设置异常抛出处理，此时问题就来了：
提交记录数量为1000时，异常抛出会一下抛出1000条，正确的数据也会抛出。
如果要想精确的抛出异常数据，只能给提交数量设置为1，也就是逐条提交，这样装载的时候效率巨慢无比
我不知道这个是kettle本身的设计问题还是我哪调的参数不对，希望能够为我解惑，不胜感激！

  • 写回答

1条回答 默认 最新

  • 三千烦恼丝xzh 2022-02-22 15:34
    关注

    记录数量批处理的原理是使用了insert后面多个values的语句，实际是一条SQL提交，so 一个values出错所有都会回滚

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？

问题事件

  • 系统已结题 3月2日
  • 已采纳回答 2月22日
  • 修改了问题 2月21日
  • 创建了问题 2月21日

悬赏问题

  • ¥15 metadata提取的PDF元数据，如何转换为一个Excel
  • ¥15 关于arduino编程toCharArray()函数的使用
  • ¥100 vc++混合CEF采用CLR方式编译报错
  • ¥15 coze 的插件输入飞书多维表格 app_token 后一直显示错误，如何解决？
  • ¥15 vite+vue3+plyr播放本地public文件夹下视频无法加载
  • ¥15 c#逐行读取txt文本，但是每一行里面数据之间空格数量不同
  • ¥50 如何openEuler 22.03上安装配置drbd
  • ¥20 ING91680C BLE5.3 芯片怎么实现串口收发数据
  • ¥15 无线连接树莓派，无法执行update，如何解决？（相关搜索：软件下载）
  • ¥15 Windows11, backspace, enter, space键失灵