在hadoop平台运行任务出错,想查看日志,但是点击logs显示一段提示信息。
查阅资料后得知,是未开启historyserver服务,其默认关闭,是一个独立的服务,网页查看端口号默认:19888,可在yarn-site.xml中配置,配置完后将配置文件复制到其他节点上,同时注意,我指定的是newmaster地址,所以需要在newmaster机器上启动(你也可以指定其他地址,启动时必须是在指定的地址节点上)
<property>
<name>mapreduce.jobhistory.address</name>
<value>newmaster:10020</value>
</property>
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>newmaster:19888</value>
</property>
配置后在hadoop根目录下的sbin目录下,执行命令:mr-jobhistory-daemon.sh start historyserver,然后通过jps查看是否成功