原创 接口與抽象類的理解日誌
我自己的理解是: 接口: 如果你想定義一組方法,而這些方法你需要每個調用他們時都要全部統一實現,這樣就需要用接口。每個實現這個接口的,都需要實現該接口定義好的所有方法,哪怕實現其中某個方法時,裏面留空,也要實現它。這樣對外就可以說,我們
原创 impala+hue
下載impala 和 hue http://www.cloudera.com/documentation/enterprise/latest/topics/cdh_vd_cdh_package_tarball.html https://a
原创 性能測試 hive Use ANALYZE table columns
測試記錄數: 346804534 數據大小:20GB select eventchannel from event8 where pdate = '2015-09-01' and lower(eventchannel) rlike '
原创 恢復window遠程複製功能
在日常操作Windows服務器的時候,會經常用到遠程桌面的複製、粘貼功能,但是有時候還是無法Windows服務器上覆制內容到本地,也無法從本地複製內容到遠程桌面連接的Windows服務器。 根據微軟的
原创 hadoop2.6安裝篇(hadoop平臺搭建)
上篇已經介紹完CentOS7的安裝。現在來說說hadoop的安裝. 上 hadoop.apache.org 下載2.6的版本。 安裝jdk, ssh, rsync, wget >yum -y install java-1.8.0-ope
原创 CentOS7安裝篇(hadoop平臺搭建)
爲了更好學習大數據,需要搭建一個學習的環境。有誤的地方希望大家共同指教。 首先介紹下我的硬件: 2臺VM namenode 192.168.1.10 datanode 192.168.1.11 ======================
原创 Hive tips optimil query on maper and reducer
hive優化之------控制hive任務中的map數和reduce數 一、 控制hive任務中的map數: 1. 通常情況下,作業會通過input的目錄產生一個或者多個map任務。 主要
原创 簡單說說MapReduce, Tez, Spark
雲碼最近邀請來yunmar老師來做培訓,其浮誇的授課方式略接受不了。其強烈推崇Spark技術,宣稱Spark是大數據的未來,同時宣佈了Hadoop的死刑。 那麼與Hadoop相比,Spark技術如何?現工業界大數據技術都在使用何種技術?