【甘道夫】Win7x64环境下编译Apache Hadoop2.2.0的Eclipse插件


目标： 编译Apache Hadoop2.2.0在win7x64环境下的Eclipse插件
环境： win7x64家庭普通版 eclipse-jee-kepler-SR1-win32-x86_64.zip Apache Ant(TM) version 1.8.4 compiled on May 22 2012 java version "1.7.0_45"
参考文章： http://kangfoo.u.qiniudn.com/article/2013/12/build-hadoop2x-eclipse-plugin/
插件源码下载： https://github.com/winghc/hadoop2x-eclipse-plugin
前提： ant、jdk、eclipse、Apache hadoop 2.2.0安装包都准备好 插件源码包已经下载好 在虚拟机上已经部署好Apache hadoop 2.2.0环境
步骤1： 将Apache Hadoop 2.2.0的安装包拷贝至任意windows目录，我使用的目录是D:\Development_ProgramFiles_2014\hadoop-2.2.0 切记：整个路径不能出现空格，否则ant编译过程会出错！
步骤2（该步骤应该可以省略）： 将Hadoop集群上存配置文件的文件夹hadooproot/etc/hadoop/拷贝到D:\Development_ProgramFiles_2014\hadoop-2.2.0\etc下
步骤3： 运行cmd，进入插件源码根目录，执行 cd src/contrib/eclipse-plugin
步骤4： 执行ant jar -Dversion=2.2.0 -Declipse.home=D:\Development_ProgramFiles_2014\eclipse2014 -Dhadoop.home=D:\Development_ProgramFiles_2014\hadoop-2.2.0 注意：命令中需要指定需编译插件的目标eclipse安装目录、hadoop安装目录。 切记：两个目录的全路径中都不能带有空格。
步骤5： 然后就是漫长等待了，主要慢的target:ivy-download，ivy-resolve-common这两步。 最后生成的插件在 hadoop2x-eclipse-plugin-master\build\contrib\eclipse-plugin\hadoop-eclipse-plugin-2.2.0.jar
步骤6： 将hadoop-eclipse-plugin-2.2.0.jar拷贝到eclipse的plugins目录下，启动eclipse
步骤7： Window--》Preferences 配置hadoop根目录：
注意：配置该路径仅仅是为了执行MR程序过程中，eclipse能找到相应的jar包。
步骤8： 打开mapreduce的view：
配置location：
注意：MR Master和DFS Master配置必需和mapred-site.xml和core-site.xml等配置文件一致。
步骤9： 打开Project Explorer，查看HDFS文件系统：


步骤10： 新建mapreduce项目

创建mapreduce程序：

运行MR程序，提示无法连接集群，请参见后续文章：
【甘道夫】Win7环境Eclipse连接Hadoop2.2.0 http://blog.csdn.net/u010967382/article/details/25368313

相关内容