吃鸡骑士 2022-02-21 14:51 采纳率: 100%
浏览 106
已结题

kettle向数据库表中插入数据抛出异常数据问题

最近在做数据迁移,计划使用kettle做数据装载,数据输入使用文本文件输入,然后使用表输出,将数据插入到数据库中,在表输出这一步可以设置提交记录数量,默认为1000。然后设置异常抛出处理,此时问题就来了:
提交记录数量为1000时,异常抛出会一下抛出1000条,正确的数据也会抛出。
如果要想精确的抛出异常数据,只能给提交数量设置为1,也就是逐条提交,这样装载的时候效率巨慢无比
我不知道这个是kettle本身的设计问题还是我哪调的参数不对,希望能够为我解惑,不胜感激!

  • 写回答

1条回答 默认 最新

  • 关注

    记录数量批处理的原理是使用了insert后面多个values的语句,实际是一条SQL提交,so 一个values出错所有都会回滚

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

    报告相同问题?

    问题事件

    • 系统已结题 3月2日
    • 已采纳回答 2月22日
    • 修改了问题 2月21日
    • 创建了问题 2月21日

    悬赏问题

    • ¥15 求苹果推信imessage批量推信技术
    • ¥15 ubuntu 22.04 系统盘空间不足。隐藏的docker空间占用?(相关搜索:移动硬盘|管理系统)
    • ¥15 利用加权最小二乘法求亚马逊各类商品的价格指标?怎么求?
    • ¥15 c++ word自动化,为什么可用接口是空的?
    • ¥15 Matlab计算100000*100000的矩阵运算问题:
    • ¥50 VB6.0如何识别粘连的不规则的数字图片验证码
    • ¥16 需要完整的这份订单所有的代码,可以加钱
    • ¥15 Stata数据分析请教
    • ¥15 请教如何为VS2022搭建 Debug|win32的openCV环境?
    • ¥15 关于#c++#的问题:c++如何使用websocketpp实现websocket接口调用,求示例代码和相关资料