Hadoop（一）Hadoop環境搭建

環境要求

• JDK8
• Hadoop2.6

步驟

一、下載

點擊 Hadoop下載

二、安裝Hadoop

安裝Hadoop之前先確保JDK已經安裝好

新建一個名爲hadoop的目錄將安裝包解壓到該目錄下

mkdir hadoop
tar -zxvf hadoop-2.6.5.tar.gz

三、配置環境變量

編輯/etc/profile,加入如下配置：

export HADOOP_HOME=/root/hadoop/hadoop-2.6.5   
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

刷新一下

source /etc/profile

輸入hadoop version測試是否生效：

四、配置文件

• 配置 /hadoop-2.6.5/etc/hadoop/core-site.xml

<configuration>
<!-- 配置地址與端口-->
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://centos:9000</value>
    </property>
<!-- 配置數據存放路徑-->
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/hadoop/hadoopData</value>
    </property>
</configuration>

• 配置/hadoop-2.6.5/etc/hadoop/hdfs-site.xml

<configuration>
<!-- 配置副本數爲1，如果不配置默認是3-->
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
</configuration>

五、啓動、測試

啓動hdfs步驟：

• 啓動之前需要先格式化hdfs（這一步操作一般是用於第一次啓動hdfs時候初始化，只需操作一次以後都不用在操作）

hadoop namenode -format

• 啓動hdfs

start-dfs.sh

這一條命令執行後將會要求輸入3次密碼，分別啓動一個SecondaryNameNode、NameNode、DataNode

• 使用瀏覽器訪問 http://localhost:50070/ 將會看見如下界面
  

• stop-dfs.sh停止hdfs

stop-dfs.sh

搭建完成