hbase工作原理-hbase运行模式包括(1-12-48)

HBase本文目录一览：

• 1、hbase是一种什么数据库
• 2、hbase中的数据以什么形式存储
• 3、hbase模式里的逻辑实体有哪些
• 4、Hbase知识点总结?
• 5、HBase数据格式都可以包括哪些?

hbase是一种什么数据库

1、考点是大数据的关键技术，HBase是一个分布式、面向列的开源数据库，不同于一般的关系数据库，它是一个适合于非结构化数据存储的数据库，从定义看选B。

2、是分布式数据库。具有高可靠、高性能、面向列、可伸缩的特点。是谷歌BigTable的开源实现，主要用来存储非结构化和半结构化的松散数据。

3、HBase是一个列式存储的分布式数据库，它支持的数据格式包括以下几种：字符串类型（String）：HBase中的字符串类型是最常见的一种数据类型，可以存储任何字符串，不论是ASCII字符还是Unicode字符。

4、Hbase是一种NoSQL数据库，这意味着它不像传统的RDBMS数据库那样支持SQL作为查询语言。

hbase中的数据以什么形式存储

1、由于在HBase中数据存储是Key-Value形式，若向HBase中同一张表插入相同RowKey的数据，则原先存在的数据会被新的数据覆盖。设计的RowKey应均匀的分布在各个HBase节点上，避免数据热点现象。

2、HBase是一个列式存储的分布式数据库，它支持的数据格式包括以下几种：字符串类型（String）：HBase中的字符串类型是最常见的一种数据类型，可以存储任何字符串，不论是ASCII字符还是Unicode字符。

3、HBase是介于MapEntry（key&value）和DBRow之间的一种数据存储方式。hbase使用的是jdk提供的ConcurrentSkipListMap，并对其进行了的封装，Map结构是KeyValue，KeyValue的形式。Concurrent表示线程安全。

4、在底层实现上，HBase使用了基于Hadoop的分布式文件系统HDFS来存储数据，并且使用了一种称为LSM-Tree（Log-Structured Merge-Tree）的数据结构来管理数据。

5、因为hbase是以文件的形式存储数据，最大文件句柄数影响着hbase的并发量。

6、关系数据库采用关系模型，具有丰富的数据类型和储存方式。

hbase模式里的逻辑实体有哪些

Hbase有两种运行模式：standalone和distributed。StandaloneMode 默认的运行模式。在该模式下，Hbase不会使用HDFS，而是使用本地文件系统。它在同一个虚拟机中运行所有Hbasedaemon和本地ZooKeeper。

物理模型主要从实现Hbase的角度来讨论 HBase数据模型逻辑结构逻辑上，HBase 的数据模型同关系型数据库很类似，数据存储在一张表中，有行有列。

默认，HBase 在创建表的时候，会自动为表分配一个 Region，正处于混沌时期，start-end key 无边界，所有 RowKey 都往这个 Region里分配。

首先Hbase是依赖于HDFS和zookeeper的。 Zookeeper分担了Hmaster的一部分功能，客户端进行DML语句的时候，都是先跟ZK交互。

LSM-Tree模式的设计让hbase的写入性能非常良好，单次写入通常在1-3ms内即可响应完成，且性能不随数据量的增长而 下降。region（相当于数据库的分表）可以ms级动态的切分和移动，保证了负载均衡性。

在引擎之上封装了 HBase 的基本 API，用户只需要配置主备机房的 ZK 地址即可，所有的降级熔断逻辑最终封装到 ha-hbase-client 中。

Hbase知识点总结?

1、容量大：HBase 分布式数据库中的表可以存储成千上万的行和列组成的数据。面向列：HBase 的数据在表中是按照某列存储的，根据数据动态地增加列，并且可以单独对列进行各种操作。

2、hbase：适合大型数据存储，其作用可以类比于传统数据库的作用，主要关注的数据的存取。hive：适合大数据的管理，统计，处理，其作用类比于传统的数据仓库，主要关注的数据的处理。

3、JVM也提供了参数 -XX： UseCMSCompactAtFullCollection来减少碎片的产生，这个参数表示会在每次CMS回收垃圾之后执行一次碎片整理，很显然，这个参数会对性能有比较大的影响，对HBase这种对延迟敏感的业务来说并不是一个完美解决方案。

HBase数据格式都可以包括哪些?

1、hbase的核心数据结构为LSM树。LSM树分为内存部分和磁盘部分。内存部分是一个维护有序数据集合的数据结构。RowKey与nosql数据库们一样，RowKey是用来检索记录的主键。

2、HBase 通过 Put 操作和 Result 操作支持 “byte-in / bytes-out” 接口，所以任何可以转换为字节数组的内容都可以作为一个值存储。输入可以是字符串、数字、复杂对象、甚至可以是图像，只要它们可以呈现为字节。

3、LSM-Tree是一种支持高写入吞吐量的数据结构，它把数据分成多个层，每层采用不同的策略来管理数据，包括内存中的缓存、写入磁盘的SSTable、和合并SSTable的操作。

4、内存部分是一个维护有序数据集合的数据结构。一般来讲，内存数据结构可以选择平衡二叉树、红黑树、跳跃表（SkipList）等维护有序集的数据结构，由于考虑并发性能，HBase选择了表现更优秀的跳跃表。

5、properties.sh：在里面配置hbase，hadoop等环境变量，里面目前默认是我们测试集群的配置作为参考。注意一些基础的jar包一定要有。config：xml格式的配置hbase导出数据的信息。在海量导出数据或根据rowkey到处数据的时候使用。