centOS6.3(64bit)Hadoop的Eclipse开发环境搭建,centos6.3hadoop


操作系统centos6.3(64位) 一个namenode 两个datanode

Hadoop版本:hadoop-1.1.2

Eclipse版本:eclipse-standard-kepler-SR2-linux-gtk-x86_64.tar.zip(

Eclipse SDK For Linux 4.4 RC 2(64 Bit )

JDK:版本

[work@master ~]$ java -version
java version "1.7.0_67"
Java(TM) SE Runtime Environment (build 1.7.0_67-b01)
Java HotSpot(TM) 64-Bit Server VM (build 24.65-b04, mixed mode)

第一步:Hadoop已经安装并且成功启动。

第二步:在eclipse上安装hadoop插件

1.这个hadoop-eclipse-plugin-1.1.2.jar包下载到本地,然后拷贝到 eclipse安装目录/plugins/ 下。 

2.重启eclipse,配置hadoop installation directory。 
如果安装插件成功,打开Window-->Preferens,你会发现Hadoop Map/Reduce选项,在这个选项里你需要配置Hadoop installation directory。配置完成后退出。


3.配置Map/Reduce Locations。 
在Window-->Show View中打开Map/Reduce Locations。 
在Map/Reduce Locations中新建一个Hadoop Location。在这个View中,右键-->New Hadoop Location。在弹出的对话框中你需要配置Location name,如Hadoop,还有Map/Reduce Master和DFS Master。这里面的Host、Port分别为你在mapred-site.xml、core-site.xml中配置的地址及端口。如:


单击finish

出现以下画面


这个文件夹出现(2),证明配置成功。


有对于Linux环境下的Eclipse开发hadoop程序的问题

并不是所有的Hadoop版本和在各个Eclipse版本下都可以搭建成功插件,你这个问题可能是版本不兼容导致。关于教程网上好多,自己去查看一下。
另外,建议采用hadoop 0.20.2+Eclipse 3.3去搭建,这个版本我自己试验过能行。
 

eclipse搭建hadoop开发环境怎读取linux文件

不是太懂,你搭建hadoop环境是想把Linux系统下的文件上传到hdfs吗,这样的话你需要在linux操作系统下进行操作,然后从本地读取文件上传到hdfs即可,但是如果你要想在windows下连接Hadoop然后读取虚拟机中也就是hadoop所在的机器上的文件的话是不行的
 

相关内容