Hadoop配置文件

hadoop需要配置五个文件

第一个:

hadoop-env.sh

把里面的下面一行改为真正的java路径

export JAVA_HOME=/usr/local/java/jdk1.7.0_79



第二个:

core-site.xml

<configuration>
	<!-- 指定HDFS的namenode的通信地址 -->
	<property>
		<name>fs.default.name</name>
		<value>hdfs://itcast:9000</value>
	</property>
	<!-- 指定hadoop运行时产生文件的存放目录 -->
	<property>
		<name>hadoop.tmp.dir</name>
		<value>/itcast/hadoop-2.7.3/tmp</value>
	</property>
</configuration>

第三个:

hdfs-site.xml

<configuration>
	<!-- 配置HDFS副本的数量 -->
	<property>
		<name>dfs.replication</name>
		<value>1</value>
	</property>
</configuration>

第四个:

mapred-site.xml

注意这个要拷贝一个副本,或改名源文件mapred-site.xml.template为mapred-site.xml





<configuration>
	<!--告诉hadoop以后MR运行在yarn上-->
	<property>
		<name>mapreduce.framework.name</name>
		<value>yarn</value>
	</property>
</configuration>


第五个:

yarn-site.xml 


<configuration>
	<property>
		<name>yarn.resourcemanager.hostname</name>
		<value>localhost</value>
	</property>
	<property>
		<name>yarn.nodemanager.aux-services</name>
		<value>mapreduce_shuffle</value>
	</property>
</configuration>


 








發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章