原创 關於MBR分區--來自鳥哥的linux私房菜
Linux 中的設備硬件號文件 在 /dev 中 IDE硬盤 /dev/hd[a-d] SCSI/SATA/USB硬盤 /dev/sd[a-p] U盤 /dev/sd[a-p](與SCS
2020-06-08 08:26:27
原创 開啓hadoop和Hbase集羣的lzo壓縮功能
安裝前： # yum -y install lzo-devel zlib-devel gcc autoconf automakelibtool 1.(all) 在集羣的所有節點上安裝Lzo庫， tar -zxvf lzo-2.
2018-08-24 20:44:00
2
原创 第一個MapReduce應用：WordCount
http://www.cnblogs.com/NicholasLee/archive/2012/08/28/2660046.html MapReduce採用"分而治之"的思想，把對大規模數據集的操作，分發給一個主節點管理下的
2018-08-24 20:43:44
原创 2-0三臺PC集羣的搭建(HA+backupmaster)
說明： 本文檔實現hdfs的HA功能，其中zookeeper的配置不變，hbase的配置略作修改，同時啓用backup master 主要是修改hadoop的配置，相關內容： 參見：1-0三臺PC集羣的搭建（noHA）。 1.HAD
2018-08-24 20:43:40
5
原创 1-0 三臺PC集羣的搭建（noHA）
1.部署 搭建方案(no_HA)： project hadoop hadoop Hbase zookeeper 主機 master1 Namenode datanode（NM） HMaster HR
2018-08-24 20:43:35
原创 0-1 僞分佈hadoop和hbase搭建
Hadoop-2.2.0僞分佈式和hbase-0.96.0-hadoop2僞分佈式搭建 1. 部署 （1）主機名 gedit /etc/hostname master1 sudo gedit /etc/hosts 127
2018-08-24 20:43:34
2
原创 win7下 ，CentOS-6.5-x86_64硬盤安裝兩個問題
1.下載ISO CentOS-6.5-x86_64-bin-DVD1.iso (4.16G)， CentOS-6.5-x86_64-bin-DVD2.iso(1.9G)， 2. 由於不識別NTFS，只識別FAT32，所以格式
2018-08-24 20:43:33
1
原创 0-2編譯打包wordcount例子
1.編譯打包 #創建一個放 class 文件的目錄 $ mkdir class #編譯 WordCount 源文件 javac -classpath/opt/hadoop-2.2.0/share/hadoop/common/ha
2018-08-24 20:43:32
原创 0-0 編譯hadoop2.2.0
編譯hadoop-2.2.0（ubuntux86_64） ############################################### 1.一些準備 sudo apt-get install cmake make -y
2018-08-24 20:43:31
原创 1-2 集羣Kerberos安全配置
在集羣hadoop2.2.0( 無HA)+zookeeper-3.3.5+hbase-0.96.0-hadoop2 正常運行的情況下，添加kerberos認證。 一.部署 目錄/opt用於存放*.keytab文件 mkdir -p
2018-08-24 20:43:28
2
原创 性能監控Ganglia搭建
Ganglia3.6.0監控hadoop-2.20集羣和hbase-0.96.0集羣 ganglia介紹： Ganglia 是 UC Berkeley 發起的一個開源監視項目，設計用於測量數以千計的節點。每臺計算機都運行一個收集和發送度量
2018-08-24 20:43:28