Hadoop2.6+HA+Zookeeper3.4.6+HBase1.0.0集群安装 - 图文

Hadoop2.6+HA+Zookeeper3.4.6+Hbase1.0.0安装

安装hadoop2.6+HA

?

1.准备一台CentOS6.4系统

?

2.环境CentOS6.4 共5台 机器名ip地址安装软件运行进程

master1 192.168.3.141 hadoop、Zookeeper、hbase NN、RM、DFSZKFC、journalNode、HMaster、QuorumPeerMain

master2 192.168.3.142 hadoop、Zookeeper、hbase NN、RM、DFSZKFC、journalNode、HRegionServer、QuorumPeerMain

slave1 192.168.3.143 hadoop、Zookeeper、hbase DN、NM、journalNode、HRegionServer、QuorumPeerMain

slave2 192.168.3.144 hadoop、Zookeeper、hbase DN、NM、journalNode、HRegionServer、QuorumPeerMain

slave3 192.168.3.145 hadoop、Zookeeper、hbase DN、NM、journalNode、HRegionServer、QuorumPeerMain

?

3.此时我们先对第一台机器做修改，其他的后期克隆该机器即可

?

4.修改/etc/hosts文件

修改/etc/sysconfig/network

?

5.重启机器

或者

临时修改hostname

?

6.安装JDK 将JDK解压

编辑/etc/profile 添加jdk路径

保存退出

修改CentOS里的java优先级

此时JDK已经安装完成

?

7.解压hadoop并修改环境变量

?

8.修改配置文件

8.1 修改$HADOOP_HOME/etc/hadoop/slaves文件 加入所有slave节点的hostname

8.2 修改$HADOOP_HOME/etc/hadoop/hadoop-env.sh文件 修改JAVA_HOME路径

8.3 修改$HADOOP_HOME/etc/hadoop/yarn-env.sh文件 修改JAVA_HOME路径

8.4 修改HADOOPHOME/etc/hadoop/core?site.xml文件详见附件8.5修改HADOOP_HOME/etc/hadoop/hdfs-site.xml文件 详见附件

8.6 修改HADOOPHOME/etc/hadoop/mapred?site.xml文件详见附件8.7修改HADOOP_HOME/etc/hadoop/yarn-site.xml文件

详见附件（yarn.resourcemanager.ha.id的属性值在master2机器中需要更改为rm2） 8.8 添加$HADOOP_HOME/etc/hadoop/fairscheduler.xml文件 详见附件

8.9 创建相关文件夹

根据xml配置文件，建立相应的文件夹

此时Hadoop+HA配置文件已经配好，就差ssh免密码登录+格式化Hadoop系统。 等我们装完所有软件（Zookeeper+hbase），克隆机器后再进行ssh免密码登录及Hadoop格式化。克隆后还需要更改每个节点的/etc/sysconfig/network中的hostname，以及更改master2中$HADOOP_HOME/etc/hadoop/yarn-site.xml文件的yarn.resourcemanager.ha.id属性值为rm2

安装Zookeeper3.4.6

?

1.解压Zookeeper

?

2.Zookeeper环境变量的配置

本文来源：https://www.bwwdw.com/article/3t0v.html