CentOS 下 Hadoop+Hbase 安装手册

安装前必看

因为Hadoop本身的优势的将 文件的存储 和 任务处理 分布化,Hadoop分布式架构中有如下两种负责不同功能的服务器,master服务器 和 slave服务器。所以,本安装手册将从二者 的 共体到个体的说明。

安装假定

安装时假设要为2台服务 器安装Hadoop架构,那么我们假设:

1、两台服务器名称为masterslave

2、两台服务器操作系统均为CentOS5.* 且版本数大于等于 5.4

3、Master将作为master主服务器使用,slave将作为slave从服务器使用;

4、Masterslave均正常运行 且 正常联网;

5、Masterslavewget命令均可正常使用;

6、Masterslave空间足够;

7、Masterslave已获取root权限;

8、Master ip地址为 192.168.229.133slaveip地址为 192.168.229.134

安装&配置

说明:此部分将安装masterslave共同的部分,以下操作请在masterslave上分别进行。

1、设置Hosts 和 Hostname

Masterslave/etc/hosts下共同增加:

192.168.229.133 master

192.168.229.134 slave

修改masterhostname文件:

vi /etc/hostname

master

修改slavehostname文件:

vi /etc/hostname

slave

2、下载安装jdk 1.6, 并配置,命令为 

wget  'http://download.Oracle.com/otn-pub/java/jdk/6u26-b03/jdk-6u26-linux-i586-rpm.bin'

./jdk-6u26-linux-i586-rpm.bin

ln -s /usr/java/jdk1.6.6-26 /usr/java/jdk

[配置java环境变量]

vi  /etc/profile 

[在文件末添加]

export JAVA_HOME=/usr/java/jdk
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH:$HOME/bin 

[保存退出,使设置生效]

source  /etc/profile

3、安装openssh,命令为:

yum install openssh

[设置ssh无密码连接]

ssh-keygen -t rsa -P '' -f /root/.ssh/id_dsa

cat /root/.ssh/id_dsa.pub >> /root/.ssh/authorized_keys

[masterid_dsa.pub 传给slave,命名为master_id_dsa ]

[slave 上执行操作 cat master_id_dsa.pub >> /root/.ssh/authorized_keys ]

4、下载安装 Hadoop,命令为:

wget  'http://labs.renren.com/apache-mirror//hadoop/core/hadoop-0.20.2/hadoop-0.20.2.tar.gz'

tar zxvf hadoop-0.20.2.tar.gz

cp -r  hadoop-0.20.2  /opt/hadoop

相关推荐