hadoop本地模式配置,hadoop模式配置


我使用的是VMware虚拟机,ubuntu14.04LTS,64位,已经安装java,如果不知道如何配置网上有很多教程,不再赘述,我安装的是1.6.0_30版本。建议不要安装太高版本,我原来安装了1.8版本的,尝试配置hadoop-2.6,死活都不成功,最后改成1.7版本的才配置成功。

此处再温馨提示一下,很多人使用命令:wget  http://www.us.apache....... 去下载压缩包,但是总是下载失败,原因是时间隔太久下载地址变了。在我写这篇博文的时候可以通过以下地址下载到2.6版本的。

命令:wget http://apache.fayea.com/hadoop/common/current/hadoop-2.6.0.tar.gz

1.下载hadoop-0.20.2版本。由于目前最新的是2.6版本,使用wget命令下载0.20.2不易下到,所以直接百度下载了0.20.2版本。百度云盘:http://pan.baidu.com/s/1sjJR3AX

2.解压。下载成功以后,将压缩包移动到:/usr/local 目录,在/usr/local目录下使用tar -xzf hadoop-0.20.2.tar.gz 解压。

3.添加环境变量。继续执行命令:

sudo echo "export HADOOP_HOME=$PWD/hadoop-0.20.2" > /etc/profile.d/hadoop.sh

sudo echo "PATH=$PATH:$HADOOP_HOME/bin" >> /etc/profile.d/hadoop.sh

. /etc/profile

注意:在执行以上命令时会报错,主要是权限问题。在root权限下可以正确执行,但是不方便使用,每次都需输入绝对路径。一通尝试以后成功了!解决办法如下:

4.测试。命令:hadoop dfs -ls /

配置成功!!!

总结:有时候直接使用hadoop命令会找不到命令,可以进入hadoop文件夹,不进入bin文件夹,使用bin/hadoop命令。

相关内容