PriviledgedActionException as:root (auth:SIMPLE) cause:0: No such file or directory

剛學MapReduce.
寫WordCount的代碼(代碼沒問題的情況下) , 運行後報錯:

錯誤代碼

19/11/12 07:57:19 INFO Configuration.deprecation: session.id is deprecated. Instead, use dfs.metrics.session-id
19/11/12 07:57:19 INFO jvm.JvmMetrics: Initializing JVM Metrics with processName=JobTracker, sessionId=
19/11/12 07:57:19 WARN mapred.JobClient: Use GenericOptionsParser for parsing the arguments. Applications should implement Tool for the same.
19/11/12 07:57:19 INFO mapred.JobClient: Cleaning up the staging area file:/tmp/hadoop-root/mapred/staging/okakio637697353/.staging/job_local637697353_0001
19/11/12 07:57:19 WARN security.UserGroupInformation: PriviledgedActionException as:root (auth:SIMPLE) cause:0: No such file or directory
Exception in thread "main" 0: No such file or directory

在百度搜索後,有以下解決方案:

1:
錯誤原因:mapred-site.xml配置有問題:
正確配置如下

 <property>
<name>mapreduce.framework.name</name>
 <value>yarn</value>
 </property>

試過之後不行

2:
每個NM的core-site.xml設置下下面的屬性就可以了

  <property>
    <name>dfs.permissions</name>
    <value>false</value>
  </property>

試過之後不行

3:
加入各種代碼:
如:System.setProperty("HADOOP_USER_NAME","root");,
conf.set("dfs.permissions","false");
運行後依然報錯

最終解決方案:

打開everything搜索/tmp/hadoop-root/,把這個tmp文件移到hadoop相同的磁盤下,再次運行即可成功
備註: 可能有人用戶名是中文的 , 就會導致亂碼的情況, Hadoop不會幫你創建tmp目錄, 在代碼里加入: conf.set(“hadoop.tmp.dir”,“自己的路徑名”)
如:conf.set(“hadoop.tmp.dir”,“E:\tmp\hadoop-abc”);
在這裏插入圖片描述
在這裏插入圖片描述

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章