1. 程式人生 > >Sqoop 日期欄位匯出報錯

Sqoop 日期欄位匯出報錯

想用sqoop 把匯入到hive的基礎表匯出到另一個數據庫。
Sqoop 匯出資料時報如下錯誤:

java.lang.RuntimeException: Can't parse input data: '2018-07-18' at  
....
....
org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:89) ... 10 more Caused by: java.lang.IllegalArgumentException: Timestamp format must be yyyy-mm-dd hh:mm:ss[.fffffffff] at
java.sql.Timestamp.valueOf(Timestamp.java:204)
java.lang.RuntimeException: Can't parse input data: '2018-07-18 14:14:59.0' at 

欄位在mysql中是datetime 型別
解決辦法:
在import 時使用 –map-column-java 和 –map-column-hive 兩個引數, 多個欄位用逗號隔開

 --map-column-java  create_time=java.sql.Date, update_time=java.sql.Date 
 --
map-column-hive create_time=TIMESTAMP, update_time=TIMESTAMP

在export 時 使用

--map-column-java create_time=java.sql.Date,update_time=java.sql.Date 

這樣日期匯出後會只有年月日,目前可以接受,後續再研究一下。