【郑州校区】hbase集群结构及集群搭建 hbase集群结构 REGION:是HBASE中对表进行切割的单元 HMASTER:HBASE的主节点,负责整个集群的状态感知,负载分配、负责用户表的元数据管理 (可以配置多个用来实现HA) REGION-SERVER:HBASE中真正负责管理region的服务器,也就是负责为客户端进行表数据读写的服务器 ZOOKEEPER:整个HBASE中的主从节点协调,主节点之间的选举,集群节点之间的上下线感知……都是通过zookeeper来实现 hbase集群搭建 ----先部署一个zookeeper集群 (1)上传hbase安装包 (2)解压 (3)配置hbase集群,要修改3个文件 注意:要把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下 (3.1)修改hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_55 //告诉hbase使用外部的zk export HBASE_MANAGES_ZK=false |
(3.2)修改 hbase-site.xml <configuration> <!-- 指定hbase在HDFS上存储的路径 --> <property> <name>hbase.rootdir</name> <value>hdfs://ns1/hbase</value> </property> <!-- 指定hbase是分布式的 --> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <!-- 指定zk的地址,多个用“,”分割 --> <property> <name>hbase.zookeeper.quorum</name> <value>weekend05:2181,weekend06:2181,weekend07:2181</value> </property> </configuration> |
(3.3)修改 regionservers weekend03 weekend04 weekend05 weekend06 |
(3.3) 修改 backup-masters来指定备用的主节点 [root@mini1 conf]# vi backup-masters mini2 |
(3.4) 拷贝hbase到其他节点 scp -r /weekend/hbase-0.96.2-hadoop2/ weekend02:/weekend/ scp -r /weekend/hbase-0.96.2-hadoop2/ weekend03:/weekend/ scp -r /weekend/hbase-0.96.2-hadoop2/ weekend04:/weekend/ scp -r /weekend/hbase-0.96.2-hadoop2/ weekend05:/weekend/ scp -r /weekend/hbase-0.96.2-hadoop2/ weekend06:/weekend/ (4) 将配置好的HBase拷贝到每一个节点并同步时间。 (5) 启动所有的hbase进程 首先启动zk集群 ./zkServer.sh start 启动hdfs集群 start-dfs.sh 启动hbase,在主节点上运行: start-hbase.sh (6) 通过浏览器访问hbase管理页面 192.168.1.201:60010 (7) 为保证集群的可靠性,要启动多个HMaster hbase-daemon.sh start master 传智播客·黑马程序员郑州校区地址 河南省郑州市 高新区长椿路11号大学科技园(西区)东门8号楼三层
|