解决方法:导入数据时加上--hive-drop-import-delims选项,会删除字段中的\n,\r,\01。参考官方文档:1.sqoop导入到HDFS1.1执行sqoop job,会自动更新last value说明:--append 参数是必须的,要不然第二次运行job 会报错,如下:至此,sqoop job 已建设完毕!第一次全量加载,整条路线完全OK,hive表可以查询到数据。总结:使用lastmodified格式,进行sqoop增量导入时,1.注意--append的使用;2.last-value为job运行的系统时间,在数据测试时,要保证数据的准确,数据的自增长。
暂无评论