A股上市公司传智教育(股票代码 003032)旗下技术交流社区北京昌平校区

 找回密码
 加入黑马

QQ登录

只需一步,快速开始

【郑州校区】hbase集群结构及集群搭建
hbase集群结构
REGION:是HBASE中对表进行切割的单元
HMASTER:HBASE的主节点,负责整个集群的状态感知,负载分配、负责用户表的元数据管理
(可以配置多个用来实现HA)
REGION-SERVER:HBASE中真正负责管理region的服务器,也就是负责为客户端进行表数据读写的服务器
ZOOKEEPER:整个HBASE中的主从节点协调,主节点之间的选举,集群节点之间的上下线感知……都是通过zookeeper来实现
hbase集群搭建
----先部署一个zookeeper集群
(1)上传hbase安装包
(2)解压
(3)配置hbase集群,要修改3个文件
        注意:要把hadoophdfs-site.xmlcore-site.xml 放到hbase/conf
       
        (3.1)修改hbase-env.sh
        export JAVA_HOME=/usr/java/jdk1.7.0_55
        //告诉hbase使用外部的zk
        export HBASE_MANAGES_ZK=false
       
        (3.2)修改 hbase-site.xml
        <configuration>
                <!-- 指定hbase在HDFS上存储的路径 -->
        <property>
                <name>hbase.rootdir</name>
                <value>hdfs://ns1/hbase</value>
        </property>
                <!-- 指定hbase是分布式的 -->
        <property>
                <name>hbase.cluster.distributed</name>
                <value>true</value>
        </property>
                <!-- 指定zk的地址,多个用“,”分割 -->
        <property>
                <name>hbase.zookeeper.quorum</name>
                <value>weekend05:2181,weekend06:2181,weekend07:2181</value>
        </property>
        </configuration>
(3.3)修改 regionservers
        weekend03
        weekend04
        weekend05
        weekend06
(3.3) 修改 backup-masters来指定备用的主节点
[root@mini1 conf]# vi backup-masters
mini2
(3.4) 拷贝hbase到其他节点
                scp -r /weekend/hbase-0.96.2-hadoop2/ weekend02:/weekend/
                scp -r /weekend/hbase-0.96.2-hadoop2/ weekend03:/weekend/
                scp -r /weekend/hbase-0.96.2-hadoop2/ weekend04:/weekend/
                scp -r /weekend/hbase-0.96.2-hadoop2/ weekend05:/weekend/
                scp -r /weekend/hbase-0.96.2-hadoop2/ weekend06:/weekend/
(4) 将配置好的HBase拷贝到每一个节点并同步时间。
(5) 启动所有的hbase进程
        首先启动zk集群
                ./zkServer.sh start
        启动hdfs集群
                start-dfs.sh
        启动hbase,在主节点上运行:
                start-hbase.sh
(6) 通过浏览器访问hbase管理页面
        192.168.1.201:60010
(7) 为保证集群的可靠性,要启动多个HMaster
        hbase-daemon.sh start master
传智播客·黑马程序员郑州校区地址
河南省郑州市 高新区长椿路11号大学科技园(西区)东门8号楼三层
联系电话 0371-56061160/61/62
来校路线  地铁一号线梧桐街站A口出

0 个回复

您需要登录后才可以回帖 登录 | 加入黑马