hbase的组件和功能-hbase包含的组件(6-10-61)

HBase本文目录一览：

• 1、hbase使用面向行的存储方式
• 2、region下所有的hfile默认存放
• 3、hbase(分布式、可扩展的NoSQL数据库)
• 4、hbase中regionserver没有请求
• 5、region的定位需要哪些功能组件
• 6、HBase存储架构

hbase使用面向行的存储方式

HBase采用了列式存储的方式，将数据按列存储，适合存储大规模、稀疏的数据。传统数据库则采用了行式存储，将数据按行存储，适合存储结构化的数据。

hbase使用的是jdk提供的ConcurrentSkipListMap，并对其进行了的封装，Map结构是KeyValue，KeyValue的形式。Concurrent表示线程安全。

数据模型：HBase采用列式存储模型，数据被组织成行和列的形式，每一行都有一个唯一的行键来标识。行键是按照字典顺序排序的，方便进行范围查询。每个列族包含一系列列，列被动态定义，可以根据实际需要灵活增减。

region下所有的hfile默认存放

1、/hbase/.archive HBase 在做 Split或者 compact 操作完成之后，会将 HFile 移到.archive 目录中，然后将之前的 hfile 删除掉，该目录由 HMaster 上的一个定时任务定期去清理。

2、每一个hfile当达到一定大小的时候就会拆分成两个hfile所以一个store目录中会包含多个hfile。

3、依次加载各部分的HFileBlock（load-on-open所有部分都是以HFileBlock格式存储）：data index block、meta index block、FileInfo block、generate bloom filter index、和delete bloom filter。HFileBlock的格式会在下面介绍。

4、即HFile和region不在同一个DataNode。这种情况会在major compaction 之后得到解决。

hbase(分布式、可扩展的NoSQL数据库)

1、HBase是一种分布式、可扩展的NoSQL数据库，它是基于Hadoop的HDFS文件系统构建的。HBase被设计用来处理海量数据，并提供高可靠性、高性能的读写操作。

2、数据存储方式不同、适用场景不同。HBase是一种分布式、面向列的NoSQL数据库，而传统数据库通常是基于关系模型的关系型数据库。这两种数据库在数据存储方式上有所区别。

3、Hbase是一种NoSQL数据库，这意味着它不像传统的RDBMS数据库那样支持SQL作为查询语言。

4、HBase 是典型的 NoSQL 数据库，通常被描述成稀疏的、分布式的、持久化的，由行键、列键和时间戳进行索引的多维有序映射数据库，主要用来存储非结构化和半结构化的数据。

5、配置错误。HBase是一种分布式、可扩展、支持海量数据存储的NoSQL数据库，可以解决HDFS随机写的问题，关闭时有省略号表示HBase配置错误，应去检修。

hbase中regionserver没有请求

检查一下HADOOP集群是否正常，DATANODE是否正常。具体问题可根据日期进行排查。HRegionServer是HBase中最主要的组件，负责table数据的实际读写，管理Region。

在该节点GC完毕，恢复正常，请求Zookeeper重新将该节点加入集群。 然后超过timeout阈值，导致WAL无法被找到，恢复失败。 同理，直至所有节点都被Zookeeper标记为异常节点，导致整个集群的region server都无法工作。

继昨天解决Kafka的位移问题后，今天又发现一个hbase的region server无法重新启动的问题。这个server本身是有问题的，目前问题还未查。但是再重启的时候，会报三组错。

region的定位需要哪些功能组件

springcloud五大组件为：Eureka、Ribbon、Hystrix、Zuul、Config。Eureka 一个RESTful服务，用来定位运行在AWS地区（Region）中的中间层服务。由两个组件组成：Eureka服务器和Eureka客户端。Eureka服务器用作服务注册服务器。

便于组织代码，将相同功能的代码块包含其中，可以展开或关闭。

Region 二个重要的属性：StartKey 与 EndKey 表示这个 Region 维护的 RowKey 范围，当读/写数据时，如果 RowKey 落在某个 start-end key 范围内，那么就会定位到目标region并且读/写到相关的数据。

火灾探测器。组成区域报警系统的组件主要有火灾探测器，因为火灾探测器能够探测火灾并及时发出报警信号，是区域报警系统中的核心组件之一。

含义不同：Region指不同的物理区域。 如亚洲区，北美区等等。AZ指在某个特定的Region里能提供服务的区域。区域不同：Region区域较广。AZ的区域是特定的。

首先你需要提交你的公司的资料信息，地址信息 ，公司名称 以及电话信息，门脸照片给官方，提交给官方后，他们会审核的，一般都是 1-7个工作日审核 审核通过后1-3天时间展现 如果发现地图有错误，可以进行纠错处理。

HBase存储架构

1、hbase的核心数据结构为LSM树。LSM树分为内存部分和磁盘部分。内存部分是一个维护有序数据集合的数据结构。

2、hbase的核心数据结构为LSM树。LSM树分为内存部分和磁盘部分。内存部分是一个维护有序数据集合的数据结构。RowKey与nosql数据库们一样，RowKey是用来检索记录的主键。

3、HBase采用了类似Google Bigtable的数据模型，即一个稀疏的、分布式的、持久化的多维映射表，每个表都由行键、列族、列限定符和时间戳组成。

4、在面向行的存储方式中，每个用户的所有信息都会存储在一起。但在HBase中，所有的基本信息（如姓名）会存储在一起，所有的联系信息（如电子邮件）也会存储在一起。这种面向列的存储方式对于许多大数据应用非常有利。

5、Hbase在单机环境也能运行，但是请在开发环境的时候使用。内部应用 存储业务数据：车辆GPS信息，司机点位信息，用户操作信息，设备访问信息。。