eclipse中hadoop開發
安裝hadoop插件。hadoop插件可以從網上下載,也可以自己編譯,我用的是1.0.2,編譯後再hadoop-1.0.2\build\contrib\eclipse-plugin可以找到
安裝完hadoop的eclipse插件之後,需要配置hadoop的安裝地址。如下圖。
打開map/reduce視圖
新建一個hadoop連接配置
Map/Reduce Master的配置就是conf/mapred-site.xml裏面的配置
DFS Master的配置是core-site.xml 裏面的配置端口,
user name最好填寫linux環境的用戶名,可以不是hadoop(有的人搭建教程裏強調一定將用戶名填寫爲hadoop,主要是爲了方便)
這個配置好之後,要配置一下高級參數裏面的配置項,否則可能會鏈接錯誤,如下圖:
大部分配置都可以默認,主要是有些目錄路徑要和自己的linux上的路徑一致,否則會報錯
上面都配置好之後,可以打開peoject explore視圖,連接hadoop服務器,就可以了
如圖:
下面是一個利用eclipse運行hadoop wordcount的例子