【hadoop學習筆記】3.hadoop eclipse 開發

eclipse中hadoop開發

 

安裝hadoop插件。hadoop插件可以從網上下載,也可以自己編譯,我用的是1.0.2,編譯後再hadoop-1.0.2\build\contrib\eclipse-plugin可以找到

 

安裝完hadoop的eclipse插件之後,需要配置hadoop的安裝地址。如下圖。

 

打開map/reduce視圖

 

新建一個hadoop連接配置

Map/Reduce Master的配置就是conf/mapred-site.xml裏面的配置

DFS Master的配置是core-site.xml  裏面的配置端口,

user name最好填寫linux環境的用戶名,可以不是hadoop(有的人搭建教程裏強調一定將用戶名填寫爲hadoop,主要是爲了方便)

 

這個配置好之後,要配置一下高級參數裏面的配置項,否則可能會鏈接錯誤,如下圖:

大部分配置都可以默認,主要是有些目錄路徑要和自己的linux上的路徑一致,否則會報錯

 

上面都配置好之後,可以打開peoject explore視圖,連接hadoop服務器,就可以了

如圖:

 

下面是一個利用eclipse運行hadoop wordcount的例子

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章