原创 otter進行數據同步

安裝otter:http://blog.csdn.net/u012689336/article/details/53514475 1、添加數據庫,點擊配置管理,選擇數據源配置    a、源庫,編輯完後可以驗證。 在mysql上面創建庫 C

原创 java抓mongodb數據遇到的問題

最近公司需要把mongodb中的數據抽到HDFS上,剛開始使用kettle,好像kettle對於mongodb只會全量抓取數據,沒有分頁的功能。 於是需要用代碼實現從mongodb分頁抓數據的功能。 1、公司的mongodb是主從配置的,

原创 java在linux中創建目錄遇到的問題

1、如果要在linux中創建多級目錄的話 File dir = new File("/cloud/test/"); if(!dir.exists()){     dir.mkdirs(); } 創建多級目錄的話要使用mkdirs()。 /

原创 hive的基本命令一

1、創建外部分區表 create external  table people( id bigint, date string, type string ) PARTITIONED BY (log_day  string) ROW FOR

原创 合併兩個排序的鏈表

輸入兩個單調遞增的鏈表,輸出兩個鏈表合成後的鏈表,當然我們需要合成後的鏈表滿足單調不減規則。 首先分析合併兩個鏈表的過程。 鏈表1的頭結點的值小於鏈表2的頭結點的值,因此鏈表1的頭結點將是合併後鏈表的頭結點。 我們繼續合併兩個鏈表中剩餘