hdfs和hbase的区别-hdfshbase区别(5-10-37)

更新时间：2024-08-01 分类：HBase 浏览量：2

HBase本文目录一览：

HBase 是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的 Google 论文“Bigtable”：一个结构化数据的分布式存储系统。

HBase的定位是hadoop的数据库，电脑培训发现是一个典型的Nosql，所以HBase是用来在大量数据中进行低延迟的随机查询的。

HBase是一个基于Apache Hadoop的面向列的NoSQL数据库，是Google BigTable的开源实现。它运行在HDFS之上，为Hadoop提供类似于BigTable规模的服务。

hbase是一种Nosql的分布式数据存储系统。具有可靠性，高能性，列存储，可伸缩的征，可以对大型数据进行实时、随机的读写访问。

关于hbase的描述正确的是是Google的BigTable的开源实现；运行于HDFS文件系统之上；HBase是一个开源的非关系型分布式数据库；主要用来存储非结构化和半结构化的松散数据。

因为edits和fsimage文件是经过序列化的，所以不能直接查看。hadoop0以上提供了查看两种文件的工具。---命令：hdfs oiv 可以将fsimage文件转换成其他格式，如xml和文本文件。-i 表示输入fsimage文件。

HDFS（Hadoop Distributed File System）不被归类为NoSQL数据库，因为它是分布式文件系统而不是数据库。HDFS是Apache Hadoop生态系统的一部分，旨在存储和处理大规模数据集。

① 一般来讲，DataNode与应用交互的大部分情况都是通过网络进行的，而网络数据传输带来的一大问题就是数据是否原样到达。为了保证数据的一致性，HDFS采用了数据校验和（checkSum）机制。

1、hdfs 是一种分布式存储技术，能够存储海量的数据，但是不对数据进行逻辑组织与管理（非结构化）；hbase 是底层基于hdfs，能够存储海量数据，并且对数据进行结构化管理（类似于Oracle，mysql的表结构）。

2、再者，hbase还支持高效的数据压缩和加密。这可以帮助用户在存储大量数据时降低成本，并保护数据的隐私性。通过压缩数据，可以减少存储空间的占用；通过加密数据，可以保护数据的安全性。此外，hbase还支持灵活的数据模型。

3、因为 HBase 基于 Hadoop 的 HDFS 完成分布式存储，以及 MapReduce 完成分布式并行计算，所以它的一些特点与 Hadoop 相同，依靠横向扩展，通过不断增加性价比高的商业服务器来增加计算和存储能力。

在配置好Hadoop 集群之后，可以通过浏览器访问 http：//[NameNodeIP]：9870，查询HDFS文件系统。通过该Web界面，可以查看当前文件系统中各个节点的分布信息。

HadoopDistributedFileSystem（HDFS）是高容错、高吞吐量、用于处理海量数据的分布式文件系统。HDFS一般由成百上千的机器组成，每个机器存储整个数据集的一部分数据，机器故障的快速发现与恢复是HDFS的核心目标。

fs.defaultFs hdfs：//node1：9000 hadoop.tmp.dir file：/home/hduser/hadoop/tmp 这里给出了两个常用的配置属性，fs.defaultFS表示客户端连接HDFS时，默认路径前缀，9000是HDFS工作的端口。