1. 程式人生 > 實用技巧 >Kettle+MongoDB 資料同步到MySQL

Kettle+MongoDB 資料同步到MySQL

Kettle+MongoDB 資料同步到MySQL


1、前言:

MongoDB中的date型別以UTC(Coordinated Universal Time)儲存,isodate型別,就等於GMT(格林尼治標準時)時間。而北京所處的是+8區,所以mongo shell會將當前的GMT+0800時間減去8,儲存成GMT時間。


2、抽取作業概述

wKiom1gcMc_CAetyAAAa3XTzyqU778.png-wh_50

3、元件選擇:

wKiom1gcMmCSvfeCAAB2KBt8RfU414.png-wh_50

4、增量處理:

wKioL1gcMhjAiRZ-AABJJuEeWGY991.png-wh_50

wKioL1gcP4uzlQs-AAAoztvowqs375.png-wh_50

在MongoDB中查詢如下是正確的:

>db.xamessages.find({created_at:{$gte:ISODate("2016-08-1618:33:36")},yy_id:48}).sort({created_at:1}).limit(1)

但是在kettle mongodb中查詢則會報錯。

解決辦法:

{"$query":{"created_at":{"$gte":{"$date":"2016-11-03T00:00:00Z"}}}}


kettle維基百科:http://wiki.pentaho.com/display/BAD/Create+a+Parameterized+Report+with+MongoDB

轉載於:https://blog.51cto.com/chenhuican/1869505