linux安裝hadoop詳細步驟（僞分佈式）

原創

恋你毅生

2020-07-04 06:47

今天重裝了下hadoop，特在此記錄下！

一.準備好hdk和hadoop安裝文件，上傳到linux

二.安裝jdk，我之前博客有專門寫過安裝jdk步驟，這裏就不重複了，有需要的小夥伴可以去翻翻之前的

三.安裝hadoop

1.解壓hadoop tar -zxvf hadoop文件

2.修改配置文件/usr/wangjian/software/hadoop/hadoop-2.10.0/etc/hadoop

  第一個：hadoop-env.sh
       vim hadoop-env.sh
  export JAVA_HOME=/usr/wangjian/software/jdk/jdk1.8.0_241

第二個：core-site.xml

<property>
           <name>fs.defaultFS</name>
           <value>hdfs://wangjian:9000</value>
       </property>
       
       <property>
           <name>hadoop.tmp.dir</name>
           <value>/usr/wangjian/software/hadoop/hadoop-2.10.0/data</value>
</property>

第三個：hdfs-site.xml
       
       <property>
           <name>dfs.replication</name>
           <value>1</value>
</property>

第四個：mapred-site.xml (mv mapred-site.xml.template mapred-site.xml)
       mv mapred-site.xml.template mapred-site.xml
       vim mapred-site.xml
       
       <property>
           <name>mapreduce.framework.name</name>
           <value>yarn</value>
</property>

第五個：yarn-site.xml
       
       <property>
           <name>yarn.resourcemanager.hostname</name>
           <value>wangjian</value>
</property>
       
<property>
           <name>yarn.nodemanager.aux-services</name>
           <value>mapreduce_shuffle</value>
</property>

3.將hadoop添加到環境變量