windows下使用Hadoop Eclipse plugin运行map reduce

1. 安装Cygwin，并设置Cygwin_HOME/bin到windows Path变量
2. Cygwin下安装SSH
3. 复制Hadoop文件
4. 拷贝Hadoop项目中的eclipse plugin jar文件到eclipse plugin下
5. eclipse 在选项设置hadoop home路径，添加hadoop location（主要设置namenode 机器名端口和jobtracker端口即可）
6. 新建map reduce project
7. 从hadoop项目拷贝WordCount.java文件到新的项目
8. 右键WordCount.java，设置运行参数
9. 右键WordCount.java=> run on hadoop

 

注意：

• windows下跑Hadoop Eclipse plugin，无论是连接本地还是远程，Cygwin是必须的安装的，调试远程不需要配置ssh。
• 每个hadoop版本必须和Hadoop Eclipse plugin一直否则无法进行连接和执行程序