概述

本文記錄windows下hadoop本地開發環境的搭建：

OS：windows
hadoop運行模式：獨立模式

安裝包結構：

Hadoop-2.6.0-Windows.zip
    - cygwinInstall // cygwin離線安裝包
    - hadoop-2.6.0-windows.tar.gz // hadoop-2.6.0 windows安裝包

PS:

hadoop-2.6.0-windows.tar.gz是基於官方發行包hadoop-2.6.0.tar.gz，併爲windows單機測試而自定義的包，改動如下：
1. 在bin目錄下，添加了hadoop.dll和winutils.exe
2. 修改了org\apache\hadoop\io\nativeio\NativeIO.java源碼第558行

*由於源碼有改動，此包不能用於生產環境，只限於windows環境下的開發測試

1. 安裝cygwin

雙擊cygwinInstall下的setup-x86_64.exe
選擇從本地安裝
選擇安裝位置
選擇本地安裝文件位置
點擊All旁邊的default，使其變爲Install，再點擊下一步即可開始安裝

2. 安裝hadoop

在cygwin的根目錄下，建立opt目錄，並把安裝包拷貝到opt目錄下

cd /; mkdir opt
解壓

cd /opt; tar xzf hadoop-2.6.0-windows.tar.gz
設置環境變量

設置windows環境變量HADOOP_PREFIX指向hadoop安裝目錄

設置windows環境變量HADOOP_HOME指向hadoop安裝目錄

設置windows環境變量JAVA_HOME指向java安裝目錄

Path環境變量後追加：;%HADOOP_HOME%\bin
~/.bashrc中設置以下環境變量：

export HADOOP_CLASSPATH=$(cygpath -pw $(hadoop classpath)):$HADOOP_CLASSPATH
使~/.bashrc生效，並驗證hadoop是否工作

source ~/.bashrc

驗證hadoop：

hadoop version

若正常顯示版本信息則安裝成功
運行示例代碼，驗證hadoop是否能夠運行mapreduce

cd /opt/hadoop-2.6.0; mkdir input; cd input; echo "Hello World" > test

hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-*.jar wordcount input output

若正常執行則顯示：

在/opt/hadoop-2.6.0/output下會生成part-r-00000文件，包含以下內容：
```
Hello   1
world   1
```