Java大数据Hbase分布式存储入门

　　之前的系列文章当中，已经为大家介绍了大数据存储当中的MongoDB、Redis等数据库，今天接着来讲Hbase。Hbase在大数据存储当中，与Hadoop生态紧密相关，也是Hadoop生态当中必学的重要组件。下面我们从基础入门开始，来讲讲Hbase。
　　支持大数据处理的第一代框架，以Hadoop为主流代表，而基于Hadoop，产生了比较完善的大数据技术生态，发展至今已有二十多个组件。这其中，Hbase主要在大数据存储环节，发挥着重要作用。Hbase简介
　　HBase，根据官方给出的定义，是面向列的非关系型分布式数据库，在Hadoop体系当中，基于分布式文件系统HDFS来工作。
　　Hbase的原型，来自于谷歌的BigTable，采用Java语言编程，实现了BigTable论文提到的一些压缩算法、内存操作和布隆过滤器等，这使得Hbase在海量数据存储、高性能读写场景当中，具备相当的优势。Hbase特性基于列式存储模型，实现数据高度压缩，节省存储成本；采用LSM机制而不是B（）树，更加适合海量数据实时写入；高可靠，数据存储为多个副本（默认是3副本），且具备自动故障转移功能；高扩展，支持分片扩展能力（基于Region），可实现自动、数据均衡；强一致性读写，数据的读写都针对主Region上进行，属于CP型系统；易操作，HBase提供了JavaAPI、RestAPIThriftAPI等接口查询优化，采用BlockCache和布隆过滤器来支持海量数据的快速查找。Hbase整体架构
　　Hbase集群架构，通常涉及到HBaseMaster、RegionServer、Zookeeper、HDFS等几个配合。
　　一个Hbase集群，由一个Master和几个RegionServer组成。其中，Master负责维护表结构信息；实际的数据存储在RegionServer上，最终RegionServer保存的表数据会直接存储在HDFS上。
　　HBaseMaster
　　HBaseMaster作为管理节点，通常在集群当中会设置有一个主Master，一个备Master，主Master和备Master的管理，由Zookeeper实现。
　　Master的职责，包括：管理监控所有的RegionServer，负责RegionServer故障转移；负责表的相关操作（create、modify、remove、enable、disable），列族的相关操作（add、modify、remove），还有Region的move、assign、unassign；平衡集群负载并定期检查并清理hbase：meta表。
　　RegionServer
　　RegionServer，主要负责服务和管理Region。在分布式集群中，RegionServer与DataNode通常按1：1比例安装，从而实现利用HDFS中的短路径读取（ShortCircuit），来降低延时。
　　RegionServer的职责，包括：数据的读取和写入，比如：get，put，delete，next等；Region的拆分和压缩；检查拆分并处理轻微压缩；检查主要的压缩；定期刷新MemStore到StoreFiles中的内存中写入；定期检查RegionServer的WAL。
　　Zookeeper
　　在集群环境当中，Zookeeper总是扮演着管家的角色，而Hbase的RegionServer非常依赖Zookeeper服务，ZooKeeper管理HBase所有RegionServer的信息，包括具体的数据段存放在哪个RegionServer上。
　　具体来说，ZooKeeper存储着hbase：meta信息。hbase：meta表记录着HBase中所有Region的相关信息。
　　HDFS
　　在Hadoop集群环境下，Hbase是运行于HDFS上的，所以对于HDFS的架构也建议要有比较清晰的了解和认知。尤其是在存储文件，处理故障转移和复制块的方面，HDFS当中的NameNode和DataNode，可以联动起来学习。
　　关于Java大数据，Hbase分布式存储入门，以上就为大家做了简单的介绍了。Hbase在大数据技术生态体系当中，重要性不言而喻，学习当中也应当给予相应的重视。