hadoop1.X安装


1.      配置主机的名称

master,slave1,slave2

2.      安装JDK:

3.      配置IP与主机名称的映射:

192.168.0.100 master

192.168.0.101 slave1

192.168.0.103 slave2

4.      配置ssh免密码登陆:

Ssh-keygen –t rsa

5.      解压hadoop的安装文件

6.      修改hadoop-env.sh, core-site.xml, hdfs-site.xml, mapred-site.xml

7.      格式化分布式文件系统:

[hadoop@master hadoop-1.2.1]$bin/hadoop namenode -format


8.      启动守护进程:

[hadoop@master hadoop-1.2.1]$bin/start-all.sh


9.      检测守护进程的启动情况:

[hadoop@master hadoop-1.2.1]$/data/java/jdk1.6.0_13/bin/jps

master:

Slave1:


Slave2:


该命令也可以查看:

[hadoop@master hadoop-1.2.1]$ bin/hadoopdfsadmin -report


http://192.168.0.100:50070/dfshealth.jsp


http://192.168.0.100:50030/jobtracker.jsp


10.   问题:

A.主节点没有NameNode:需要重新格式化,格式化前必须删除相关tmp文件;

B.从节点的DataNode无法启动,需要查看cat /data/hadoop/hadoop-1.2.1/logs 中的日志,查明无法启动的原因,

WARNorg.apache.hadoop.hdfs.server.datanode.DataNode: Invalid directory indfs.data.dir: Incorrect permission for /data /hadoop/data, expected: rwxr-xr-x,while actual: rwxrwxr-x 该问题的解决方法是chmod 755  /data /hadoop/data

参考连接:http://www.cnblogs.com/Cilimer/p/3764579.html

有问题百度还是比较靠谱的,能学到好多东西!!!

相关内容