使用sqoop导入数据到hive,增量导入lastmodified和merge-key,但是一直报错Unrecognized argument
sqoop版本1.4.7.3.1.0.0-78
ods表里最后一条数据时间为2023-04-26 06:30:00.0,我把最后一条数据时间处理成2023-04-26 06:30:00也不行还是一样的报错,从时间戳空格后面就Unrecognized argument
我检查过很多遍sqoop代码确定没有多空格,也重写过很多遍,所以怀疑是因为时间戳有空格,sqoop认为空格前后是两个东西导致的报错,我百度了有些说1.46版本不支持lastmodified导入到hive的,但也有说把--hive部分删除只指定--target-dir就可以完成导入
以下部分是sqoop代码和报错截图
sqoop import -D \
mapred.job.name=xxx\
--null-string '\\N' \
--null-non-string '\\N' \
--check-column starttime \
--incremental lastmodified \
--last-value ${d_timestamp} \
--merge-key starttime \
-m 1 \
--connect "jdbc:db2://xxxxxxx:xxxxxxxx/xxxxxxxx" \
--username root --password 123456 \
--target-dir /warehouse/tablespace/managed/hive/data.db/xxxxxxxxx