原创 Log01

#OFF,systemOut,logFile,logDailyFile,logRollingFile,logMail,logDB,ALL  log4

原创 HBase+ZooKeeper+Hadoop2.6.0的ResourceManager HA集羣高可用配置

問題導讀:         0、瞭解常規JDK安裝以及Linux系統配置         1、瞭解集羣規劃以及集羣場景         2、熟悉HBase的集羣搭建         3、熟悉ZooKeeper集羣搭建       

原创 Hadoop01-搭建

一、大數據的概念舉例:城市男女比例調查【抽樣統計】100個人-》51男生-》49女生-》51:49-》並不完全-》結果不準確-》範圍太小-》結果偏差樣本數據-》全量數據1、特點:大數據-》傳統關係型數據庫

原创 Linux01

二、Linux初始1、發行版內核-》二次開發-》加入自己的特性功能-》最終推出商業發行版2、服務器Linux -》考慮安全性、穩定性https://www.netcraft.com/  嵌入式:智慧型手機、平板   ios   unix

原创 Hadoop2.4的ResourceManager HA高可用配置

問題導讀1.ResourceManager HA需要修改哪些配置?2.如何強制切換HA? Hadoop 2.2沒怎麼關注過,太新,bug太多。2.4出來以後關注了一些東西,比如2.4裏面直接帶了ResourceManager

原创 Hadoop02-MapReduce

一、Hadoop環境部署常見錯誤1、在格式化namenode之後在自定義創建的tmp目錄只會生成name的文件夾2、name代表的就是namenode這塊的信息3、data代表的就是datanode這塊的信息4、tmp/dfs/name

原创 Linux02

一、回顧1、瞭解認識Linux-》版本-》應用領域2、部署Linux環境-》靜態IP:NAT模式-》主機名:hostname-》系統內核變量# cat /proc/sys/kernel/hostname/etc/sysconfig/ne