Hadoop本地模式配置


我使用的是VMware虚拟机,Ubuntu14.04 LTS,64位,已经安装Java,如果不知道如何配置网上有很多教程,不再赘述,我安装的是1.6.0_30版本。建议不要安装太高版本,我原来安装了1.8版本的,尝试配置Hadoop-2.6,死活都不成功,最后改成1.7版本的才配置成功。

此处再温馨提示一下,很多人使用命令:wget  http://www.us.apache....... 去下载压缩包,但是总是下载失败,原因是时间隔太久下载地址变了。在我写这篇博文的时候可以通过以下地址下载到2.6版本的。

命令:wget http://apache.fayea.com/hadoop/common/current/hadoop-2.6.0.tar.gz

1.下载hadoop-0.20.2版本。由于目前最新的是2.6版本,使用wget命令下载0.20.2不易下到,所以直接百度下载了0.20.2版本。百度云盘:http://pan.baidu.com/s/1gdrf8Wz

2.解压。下载成功以后,将压缩包移动到:/usr/local 目录,在/usr/local目录下使用tar -xzf hadoop-0.20.2.tar.gz 解压。

3.添加环境变量。继续执行命令:

sudo echo "export HADOOP_HOME=$PWD/hadoop-0.20.2" > /etc/profile.d/hadoop.sh

sudo echo "PATH=$PATH:$HADOOP_HOME/bin" >> /etc/profile.d/hadoop.sh

. /etc/profile

注意:在执行以上命令时会报错,主要是权限问题。在root权限下可以正确执行,但是不方便使用,每次都需输入绝对路径。一通尝试以后成功了!解决办法如下:

4.测试。命令:hadoop dfs -ls /

配置成功!!!

总结:有时候直接使用hadoop命令会找不到命令,可以进入hadoop文件夹,不进入bin文件夹,使用bin/hadoop命令。

Ubuntu14.04下Hadoop2.4.1单机/伪分布式安装配置教程 

CentOS安装和配置Hadoop2.2.0 

Ubuntu 13.04上搭建Hadoop环境

Ubuntu 12.10 +Hadoop 1.2.1版本集群配置

Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)

Ubuntu下Hadoop环境的配置

单机版搭建Hadoop环境图文教程详解

搭建Hadoop环境(在Winodws环境下用虚拟机虚拟两个Ubuntu系统进行搭建)

相关内容