原创 sqoop v1.4.5 使用舉例（postgresql）
1、Sqoop簡介 Apache sqoop是一個專門爲高效在Apache hadoop和結構化數據庫之間傳輸大規模數據的工具，可以用來在MySQL,postgresql,Oracle和HDFS之間傳輸數據。Sqoop開始於2012年3月份
2019-09-19 18:26:13
原创 hive正則解析日誌
背景工作中接觸到流量日誌解析，原有的解析流程是將日誌文件從存儲池上傳到hdfs，然後通過hadoop mr 任務去解析，解析後的數據導入特定的hive表對應的目錄中。這個流程存在幾個問題： 1.日誌上傳的過程較長，例如某業務線主站的系統45
2019-09-19 18:26:02
原创 postgresql的一些固定用法
工作中用pg,有些語法和其他的並不一樣，記錄下。 查看數據庫中各個表（索引）大小 select (n.nspname::text), c.relname::text as relation, pg_size_pret
2019-09-09 16:34:59
原创 postgresql中的ltree類型使用方法
這篇文章主要給大家介紹了關於postgresql中ltree類型使用的相關資料，文中通過示例代碼介紹的非常詳細，對大家學習或者使用postgresql具有一定的參考學習價值，需要的朋友們下面來一起學習學習吧 pos
2019-09-08 15:13:24
原创 postgresql 的ltree類型使用
postgresql有很多比較妖的數據類型，ltree算一個。簡介ltree是Postgresql的一個擴展類型 http://www.sai.msu.su/~megera...，在解決樹形結構的數據存儲上使用。查看是否安裝了插件selec
2019-09-05 17:05:05