请问各位大神，如果有某种原因使得每天抽一次的kettle抽取挂了，那么后面几天内时间没有抽取的数据，你们是怎么处理的
1条回答 默认 最新
- 「已注销」 2020-04-03 00:35关注
一般抽取数据都是根据自增主键或者时间来的，每次抽取大于前一次的纪录。
漏抽的数据可以根据唯一主键，使用插入更新控件，然后勾选不执行更新解决 无用评论 打赏举报
分享
- 2018-11-26 05:31回答 3 已采纳 已经解决了，设置环境变量即可解决
- 2018-06-20 07:47回答 5 已采纳 写java代码吧， 选择java代码选项，做分表插入操作 1.直接用java代码处理 2.使用sql语句的视图做处理
- 2020-07-08 23:27回答 1 已采纳 接是没办法接了，只能把已经录入的数据删掉，然后重新抽了。
- 2020-12-14 21:27需求: 增量抽取MongoDB数据并加载到MSSQL 由于不能使用关系型数据库的自定义SQL， 所以主要遇到的问题有: 1、增量时间的查询和参数控制 2、ETL的批次信息和调用参数的写入 第一个问题的解决如下: ...
- 2022-02-21 14:51回答 1 已采纳 记录数量批处理的原理是使用了insert后面多个values的语句，实际是一条SQL提交，so 一个values出错所有都会回滚
- 2022-08-08 17:40回答 1 已采纳 都可以抽Oracle写Kafka重点是你要怎么做数据抽取，增量变更捕获或者就是全量抽
- 2018-01-25 09:39回答 4 已采纳 问题很明显啊 ，table'mysql.demo'doesn't exist ;demo这个表在mysql不存在啊，新建一个就可以了
- 2019-06-17 10:22使用kettle（etl工具）将mysql的数据抽取到hadoop的文件系统中。
- 2019-04-09 10:55回答 1 已采纳 不会，kettle只是个ETL工具，从源库获取数据的过程类似于select过程，访问一下而已。
- 2020-07-01 15:05回答 2 已采纳 转换里的脚本优先级很高，按照你这个流程是不可能实现的，调度功能要放到job里，sql脚本要放到job里，不要放到转换里，转换里的脚本即使加上箭头也是先执行。
- 2021-08-16 09:45回答 1 已采纳 关于kettle读取excel的网上应该有很多，可以详细了解下。这里简单示例。kettle有个输入为：excel输入用来读取excel示例如下：1.excel数据如下 2.修改excel文件信息
- 2021-11-10 17:11通过kettle循环抽取整库数据至CSV文件，可根据该程序修改抽取至数据至数据库等。
- 2020-10-26 09:56回答 2 已采纳 通过获取变量的方式实现，首先获取code字段是空的行数，作为一个变量，然后加一个条件判断的组件，如果这个变量大于1，就直接成功。否则就跑trans。 不知道为什么mac系统上传图片点击无效。我只能打
- 2019-11-27 10:27使用Kettle实现多数据表全量数据抽取，前提是两边表结构一模一样，维护的话请注意月度里面的readMe.md文件
- 2018-10-26 17:20kettle数据清洗抽取，全量对比记录，包含列转行，增加序列，字段拆分，对比记录
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 乘性高斯噪声在深度学习网络中的应用
- ¥15 运筹学排序问题中的在线排序
- ¥15 关于docker部署flink集成hadoop的yarn，请教个问题 flink启动yarn-session.sh连不上hadoop，这个整了好几天一直不行，求帮忙看一下怎么解决
- ¥30 求一段fortran代码用IVF编译运行的结果
- ¥15 深度学习根据CNN网络模型，搭建BP模型并训练MNIST数据集
- ¥15 C++ 头文件/宏冲突问题解决
- ¥15 用comsol模拟大气湍流通过底部加热（温度不同）的腔体
- ¥50 安卓adb backup备份子用户应用数据失败
- ¥20 有人能用聚类分析帮我分析一下文本内容嘛
- ¥30 python代码，帮调试，帮帮忙吧