阿里云api接口使用-阿里云hbase接口(5-6-26)

HBase本文目录一览：

• 1、如何将hbase中的数据导出到hdfs
• 2、HBase服务高可用之路的探索
• 3、hbase模式运行包括
• 4、在hbase访问接口中,pig主要用在哪个场合
• 5、WindowsSAM数据库是什么?
• 6、hbase中的数据以什么形式存储

如何将hbase中的数据导出到hdfs

1、hadoop jar /../hbase/hbase-.jar import mytest /export/mybakup 导出：hadoop jar /../hbase/hbase-.jar import mytest /import/mybackup 直接将数据导出到hdfs目录中，当不指定file前缀时。

2、Put API Put API可能是将数据快速导入HBase表的最直接的方法。但是在导入【大量数据】时不建议使用！但是可以作为简单数据迁移的选择，直接写个代码批量处理，开发简单、方便、可控强。

3、将数据导入HBase中有如下几种方式：使用HBase的API中的Put方法 使用HBase 的bulk load 工具 使用定制的MapReduce Job方式 使用HBase的API中的Put是最直接的方法，用法也很容易学习。

4、但是如果需要的HDFS上的文件或者HBASE的表进行查询，需要自定义MapReduce方法。那么Hive其实就是在HDFS上面的一个中间层，它可以让业务人员直接使用SQL进行查询。

5、Loader是实现FusionInsightHD与关系型数据库、文件系统之间交换数据和文件的数据加载工具。通过Loader，我们可以从关系型数据库或文件系统中把数据导入HBase或者Hive、HDFS中。

HBase服务高可用之路的探索

这里的高可用并不是指HBase本身的高可用机制。而是HBase主备双服务的高可用，线上业务依赖于主备HBase集群来提供数据支持，主集群首要的任务时负责数据的读写，备集群只是为了容灾。

NoSQL概念随着web0的快速发展，非关系型、分布式数据存储得到了快速的发展，它们不保证关系数据的ACID特性。NoSQL概念在2009年被提了出来。NoSQL最常见的解释是“non-relational”，“Not Only SQL”也被很多人接受。

目前支持：NoSQLAPI、关系PhoenixSQL、时序OpenTSDB、全文检索Solr/ES、时空GeoMesa、图HGraph、分析Spark on HBase等。随着NoSQL的高速发展，NoSQL用户群体越来越庞大，未来NoSQL及NoSQL生态也会更好的满足各种业务场景。

由于存储方式的不同，HBase在读取和查询大规模数据时具有较高的性能优势，而传统数据库在处理事务和复杂查询时较为擅长。此外，HBase和传统数据库在适用场景上也有所区别。

当系统出现分区时，HBase可以通过副本机制来保证数据的可用性。

HBase是一个分布式数据库，它依赖ZooKeeper来提供协调和管理功能。ZooKeeper是一个开源的分布式协调服务，它能够为HBase提供高可用性、一致性和故障恢复机制。因此，HBase必须依赖ZooKeeper来正常运行。

hbase模式运行包括

双机模式。HBase配置模式包括三种，单机模式、伪分布式模式、完全分布式模式，并不包括双机模式。

表、行、列族、列限定符、单元、时间版本。根据查询51cto博客信息显示，hbase模式里的逻辑实体有：表（table）：HBase用表来组织数据，表名是字符串（String），由可以在文件系统路径里使用的字符组成。

整数类型（Integer）：HBase中支持的整数类型包括byte、short、int和long等。浮点数类型（Float）：HBase支持的浮点数类型包括float和double等。布尔类型（Boolean）：HBase支持的布尔类型只有true和false两个取值。

LSM-Tree是一种支持高写入吞吐量的数据结构，它把数据分成多个层，每层采用不同的策略来管理数据，包括内存中的缓存、写入磁盘的SSTable、和合并SSTable的操作。

Hadoop的核心是HDFS（Hadoop Distributed File System），Mapreduce和Hbase，他们分别是Google云计算核心技术GFS，Mapreduce和Bigtable的开源实现。Hadoop集群有三种运行模式，分别为单机模式，伪分布式模式和完全分布式模式。

在hbase访问接口中,pig主要用在哪个场合

1、HBase ：基于Hadoop Distributed File System，是一个开源的，基于列存储模型的可扩展的分布式数据库，支持大型表的存储结构化数据。

2、Amban：一个基于 Web 的工具，用来供应、管理和监测 Hadoop 集群，包括支持 HDFS、MapReduceAHive、HCatalog、HBase、ZooKeeperAOozie、Pig 和 Sqoop 。

3、在配置好Hadoop 集群之后，可以通过浏览器访问 http：//[NameNodeIP]：9870，查询HDFS文件系统。通过该Web界面，可以查看当前文件系统中各个节点的分布信息。

WindowsSAM数据库是什么?

1、SAM是安全账户管理器，全称是Security Account Manager，负责SAM数据库，即Windows用户账户数据库的控制与维护。SAM数据库包含了所有的用户账户、组账户信息以及每个用户密码的两个加密散列值。

2、SAM数据库在磁盘上就保存在%systemroot%system32\config\目录下的sam文件中，在这个目录下还包括一个security文件，是安全数据库的内容，两者有不少关系。SAM数据库中包含所有组、帐户的信息，包括密码HASH、帐户的SID等。

3、HBase X-Pack支持：HBase API（包括RestServerThriftServer）、关系Phoenix SQL、时序OpenTSDB、全文Solr、时空GeoMesa、图HGraph、分析Spark on HBase，是阿里云首个支持多模式的分布式数据库，且协议100%兼容开源协议。

hbase中的数据以什么形式存储

由于在HBase中数据存储是Key-Value形式，若向HBase中同一张表插入相同RowKey的数据，则原先存在的数据会被新的数据覆盖。设计的RowKey应均匀的分布在各个HBase节点上，避免数据热点现象。

HBase是一个列式存储的分布式数据库，它支持的数据格式包括以下几种：字符串类型（String）：HBase中的字符串类型是最常见的一种数据类型，可以存储任何字符串，不论是ASCII字符还是Unicode字符。

HBase是介于MapEntry（key&value）和DBRow之间的一种数据存储方式。hbase使用的是jdk提供的ConcurrentSkipListMap，并对其进行了的封装，Map结构是KeyValue，KeyValue的形式。Concurrent表示线程安全。

在底层实现上，HBase使用了基于Hadoop的分布式文件系统HDFS来存储数据，并且使用了一种称为LSM-Tree（Log-Structured Merge-Tree）的数据结构来管理数据。