资讯

精准传达 • 有效沟通

从品牌网站建设到网络营销策划，从策略到执行的一站式服务

网站建设 >

查看其它板块

HBase理论知识点有哪些

今天就跟大家聊聊有关HBase理论知识点有哪些，可能很多人都不太了解，为了让大家更加了解，小编给大家总结了以下内容，希望大家根据这篇文章可以有所收获。

创新互联建站是一家专注于成都网站建设、成都做网站与策划设计,宽甸网站建设哪家好?创新互联建站做网站,专注于网站建设10余年,网设计领域的专业建站公司;建站业务涵盖:宽甸等地区。宽甸做网站价格咨询:13518219792

一、数据存储

  • 数据存储：HBase数据存储依赖于HDFS，自身不存储数据，所以HBase其实是个表数据管理的工具。

  • 数据备份：HBase的数据可靠性完全依赖于HDFS进行数据备份（三副本），因此，HBase无需关心数据的可靠性，只需要关心服务的可靠性即可

二、HBase的服务可靠性如和保证？

通过转移管理权限。

HBase中的Region（真实数据存在HDFS）由Region Server进行管理，当ZooKeeper发现RS挂掉后，HMaster会将此RS上的Region数据进行迁移（其实所谓的迁移，只是将Region的管理权限迁移到其它的RS上，数据存储的位置仍然在HDFS上，没有改变）

二、数据结构和查询

索引：HBase只在rowkey有索引，所以主要面向于基于rowkey进行简单的查询，HBase不适合复杂查询，如根据多个字段查询（没有索引，查询很慢），表关联直接不支持。

HBase是三维有序存储的，通过rowkey（行键），column key（column family和qualifier）和TimeStamp（时间戳）这个三个维度可以对HBase中的数据进行快速定位。

HBase中rowkey可以唯一标识一行记录，在HBase查询的时候，有以下几种方式：

  1. 通过get方式，指定rowkey获取唯一一条记录

  2. 通过scan方式，设置startRow和stopRow参数进行范围匹配

  3. 全表扫描，即直接扫描整张表中所有行记录

三、HDFS

HDFS：存储和计算分离的架构

HBase依赖HDFS提供最终的底层数据存储服务，多副本（三副本）保证高可用性 .

  • HBase表的HDFS目录结构如下

/hbase
    /data
        /                    (集群里的Namespaces)
            /                    (该集群的Tables)
                /               (该table的Regions)
                    /     (该Region的列族)
                        /    (该列族的StoreFiles)
  • HLog的HDFS目录结构如下
/hbase
    /WALs
        /    (RegionServers)
            /         (WAL files for the RegionServer)
四、Hbase中HMaster作用
HMaster在功能上主要负责Table表和HRegion的管理工作，具体包括：
1、管理用户对Table表的增、删、改、查操作；
2、管理HRegion服务器的负载均衡，调整HRegion分布；
3、在HRegion分裂后，负责新HRegion的分配；
4、在HRegion服务器停机后，负责失效HRegion服务器上的HRegion迁移。
五、MemStore存储了哪些数据？
每一个Store由一个MemStore和多个StoreFile组成。为什么有MenStore和这么多个StoreFile是因为不可能每次来一条数据就刷新一次到磁盘，频繁写磁盘会造成效率不高且数据不连续。所以一般是在内存中将数据缓存到一定量，然后在一口气flush到磁盘。每次flush会将内存中的数据flush到磁盘，但是内存中会存储多个CF的数据，所以一次flush会生成多个StoreFile，并且有些StoreFile可能很小。
这就是为什么要求HBase的CF不能设置太多，太多的话会频繁刷新磁盘，而且小文件会触发耗时的Compact操作
六、HFile逻辑结构
HBase理论知识点有哪些
六、HMaster与Zookeeper与HDFS的namenode
看完上述内容，你们对HBase理论知识点有哪些有进一步的了解吗？如果还想了解更多知识或者相关内容，请关注创新互联行业资讯频道，感谢大家的支持。
            
            
                        

            当前题目：HBase理论知识点有哪些            

            网站URL：http://cdkjz.cn/article/jgpiij.html
        
        

            返回首页
            了解更多建站资讯
        

    



    
相关资讯

    

        
    





    

        

            

                多年建站经验
            

            

                
多一份参考，总有益处

                
 联系快上网，免费获得专属《策划方案》及报价

                

                    
咨询相关问题或预约面谈，可以通过以下方式与我们联系

                    
 大客户专线   成都：13518219792
                          座机：028-86922220
                    

                

            

        

        

            在线咨询
            提交需求
        

    





    

        

            

                友情链接
                交换友情链接
            

            

                

                    品牌网站建设成都app开发丹棱网站建设温江网站设计卖友情链接java虚拟主机成都网站建设成都网络营销短视频拍摄瑞杰管理                

            

        

    

    

        

            
成都网站建设公司地址：成都市青羊区太升南路288号锦天国际A座10层 建设咨询028-86922220

            

                成都快上网科技有限公司-四川网站建设设计公司 | 蜀ICP备19037934号 Copyright 2020,ALL Rights Reserved cdkjz.cn | 成都网站建设 | © Copyright 2020版权所有.

            
专家团队为您提供成都网站建设,成都网站设计,成都品牌网站设计,成都营销型网站制作等服务,成都建网站就找快上网！ | 成都网站建设哪家好？ | 网站建设地图