Sqoop 日期欄位匯出報錯
阿新 • • 發佈:2019-02-08
想用sqoop 把匯入到hive的基礎表匯出到另一個數據庫。
Sqoop 匯出資料時報如下錯誤:
java.lang.RuntimeException: Can't parse input data: '2018-07-18' at
....
....
org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.java:89) ... 10 more Caused by: java.lang.IllegalArgumentException: Timestamp format must be yyyy-mm-dd hh:mm:ss[.fffffffff] at java.sql.Timestamp.valueOf(Timestamp.java:204)
java.lang.RuntimeException: Can't parse input data: '2018-07-18 14:14:59.0' at
欄位在mysql中是datetime 型別
解決辦法:
在import 時使用 –map-column-java 和 –map-column-hive 兩個引數, 多個欄位用逗號隔開
--map-column-java create_time=java.sql.Date, update_time=java.sql.Date
-- map-column-hive create_time=TIMESTAMP, update_time=TIMESTAMP
在export 時 使用
--map-column-java create_time=java.sql.Date,update_time=java.sql.Date
這樣日期匯出後會只有年月日,目前可以接受,後續再研究一下。