Hadoop集群搭建(1)

Hadoop集群搭建(1)

首先说一下配置环境：三台电脑

192.168.30.149 hadoop149 namenode和jobtracker ###因为149机器稍微好一点

1. 192.168.30.150  hadoop150 datanode和TaskTracker  
2. 192.168.30.148  hadoop150 datanode和TaskTracker  

配置ssh无需密码登陆：

 

1. $ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa  
2. $ cat~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys  

 

1. 我的master在149可以吧149的.pub文件拷贝到150和148上 然后执行

我用的hadoop版本是hadoop-0.20.2 下载地址：

 

 

1. google吧 过两天弄个网盘都放在上面再写到这里。

   下载后：编辑几个文件：

   在/root/hadoop-0.20.2/conf中(这里注意的是几台电脑的hadoop文件路径必须相同)：加入如下一句话

   [root@localhostconf]# vim 

 

   [root@localhostconf]# vim core-site.xml 

 

 

1. fs.default.name  
2. hdfs://192.168.30.149:9000 ###具体的意义之后会讲解  

[root@localhostconf]# vim mapred-site.xml 

mapred.job.tracker