原创 接口與抽象類的理解日誌

我自己的理解是: 接口: 如果你想定義一組方法,而這些方法你需要每個調用他們時都要全部統一實現,這樣就需要用接口。每個實現這個接口的,都需要實現該接口定義好的所有方法,哪怕實現其中某個方法時,裏面留空,也要實現它。這樣對外就可以說,我們

原创 impala+hue

下載impala 和 hue http://www.cloudera.com/documentation/enterprise/latest/topics/cdh_vd_cdh_package_tarball.html https://a

原创 性能測試 hive Use ANALYZE table columns

測試記錄數: 346804534  數據大小:20GB select eventchannel from event8 where pdate = '2015-09-01' and lower(eventchannel) rlike '

原创 恢復window遠程複製功能

在日常操作Windows服務器的時候,會經常用到遠程桌面的複製、粘貼功能,但是有時候還是無法Windows服務器上覆制內容到本地,也無法從本地複製內容到遠程桌面連接的Windows服務器。   根據微軟的

原创 hadoop2.6安裝篇(hadoop平臺搭建)

上篇已經介紹完CentOS7的安裝。現在來說說hadoop的安裝. 上 hadoop.apache.org 下載2.6的版本。 安裝jdk, ssh, rsync, wget >yum -y install java-1.8.0-ope

原创 CentOS7安裝篇(hadoop平臺搭建)

爲了更好學習大數據,需要搭建一個學習的環境。有誤的地方希望大家共同指教。 首先介紹下我的硬件: 2臺VM namenode 192.168.1.10 datanode 192.168.1.11 ======================

原创 Hive tips optimil query on maper and reducer

hive優化之------控制hive任務中的map數和reduce數 一、    控制hive任務中的map數: 1.    通常情況下,作業會通過input的目錄產生一個或者多個map任務。 主要

原创 簡單說說MapReduce, Tez, Spark

雲碼最近邀請來yunmar老師來做培訓,其浮誇的授課方式略接受不了。其強烈推崇Spark技術,宣稱Spark是大數據的未來,同時宣佈了Hadoop的死刑。 那麼與Hadoop相比,Spark技術如何?現工業界大數據技術都在使用何種技術?