Kettle+MongoDB 數據同步到MySQL
1、前言:
MongoDB中的date類型以UTC(Coordinated Universal Time)存儲,isodate類型,就等於GMT(格林尼治標準時)時間。而北京所處的是+8區,所以mongo shell會將當前的GMT+0800時間減去8,存儲成GMT時間。
2、抽取作業概述
3、組件選擇:
4、增量處理:
在MongoDB中查詢如下是正確的:
> db.xamessages.find({created_at:{$gte:ISODate("2016-08-16 18:33:36")},yy_id:48}).sort({created_at:1}).limit(1)
但是在kettle mongodb中查詢則會報錯。
解決辦法:
{"$query":{"created_at":{"$gte":{"$date":"2016-11-03T00:00:00Z"}}}}
kettle維基百科:http://wiki.pentaho.com/display/BAD/Create+a+Parameterized+Report+with+MongoDB