hbase使用教程-hbase单机模式安装(2-18-69)

更新时间：2024-06-20 分类：HBase 浏览量：2

HBase本文目录一览：

hadoop是一个由Apache基金会所开发的分布式系统基础架构。它可以使用户在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的威力进行高速运算和存储。

【Java语言】基础包括Java开发介绍、Java语言基础、Eclipse开发工具等。HTML、CSS与Java：网站页面布局、HTML5+CSS3基础、jQuery应用、Ajax异步交互等。

Apache Hadoop是入门点，或者我们可以说是进入整个大数据生态系统的基础。它是大数据生态系统中大多数高级工具，应用程序和框架的基础，但是在学习Apache Hadoop时，还需要事先知道一些事情。

大数据专业主要学什么大数据需要学的：Java编程技术；Linux命令；Hadoop；Hive；Avro与Protobuf；ZooKeeper；HBase；phoenix等。

阶段一：学习入门知识。在学习之前需要先掌握基本的数据库知识。阶段二：【Java基础】。Java是目前使用最为广泛的编程语言，适合作为大数据应用的开发语言。阶段三：Scala基础。Scala是一种多范式的编程语言。

大数据的学习阶段第一阶段：大数据前沿知识及hadoop入门，大数据前言知识的介绍，课程的介绍，Linux和unbuntu系统基础，hadoop的单机和伪分布模式的安装配置。第二阶段：hadoop部署进阶。

1、目前主流的数据库或者NoSQL要么在CAP里面选择AP，比较典型的例子是Cassandra，要么选择CP比如HBase，这两个是目前用得非常多的NoSQL的实现。

2、因为我们是好多hbase集群共用一个zookeeper的，其中一个集群需要从hbase 0.90.2 升级到hbase 0.92上，自然，包也要更新。

3、启动HBase，直接run org.apache.hadoop.hbase.LocalHBaseCluster就可以，run config不需要没有什么别的配置。当然就也可以debug了。

4、HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用hbase技术可以在廉价的PC上搭建起大规模结构化存储集群。

zookeeper是hbase必不可少的，它提供了分布式系统当中的高效协调服务。 hbase内置了zookeeper，但效果一般不好，一般都选择外置独立的zookeeper。好长时间不整这个了，其实这些东西自己搭建一遍就能明白个八九了。

Hadoop 是可靠的，因为它假设计算元素和存储会失败，因此它维护多个工作数据副本，确保能够针对失败的节点重新分布处理。Hadoop 是高效的，因为它以并行的方式工作，通过并行处理加快处理速度。

需要说明的是，相关的jar包比较多，需要给全了，否则会有各种ClassNotFoundException。完整的jar列表为：这些jar最好与hive环境版本一致，我们用的是CDH版，所以都是从CDH目录下找到的jar。

本来也是没有问题的，想想吧，系统里也只有hbase在用zookeeper。先启动zookeeper，再将hbase起来就好了HBase的安装包里面有自带zookeeper的。很多系统部署也是直接启动上面的zookeeper。

1、在配置好Hadoop 集群之后，可以通过浏览器访问 http：//[NameNodeIP]：9870，查询HDFS文件系统。通过该Web界面，可以查看当前文件系统中各个节点的分布信息。

2、HadoopDistributedFileSystem（HDFS）是高容错、高吞吐量、用于处理海量数据的分布式文件系统。HDFS一般由成百上千的机器组成，每个机器存储整个数据集的一部分数据，机器故障的快速发现与恢复是HDFS的核心目标。

3、fs.defaultFs hdfs：//node1：9000 hadoop.tmp.dir file：/home/hduser/hadoop/tmp 这里给出了两个常用的配置属性，fs.defaultFS表示客户端连接HDFS时，默认路径前缀，9000是HDFS工作的端口。

4、Hadoop Distributed File System（HDFS）是高容错、高吞吐量、用于处理海量数据的分布式文件系统。 HDFS一般由成百上千的机器组成，每个机器存储整个数据集的一部分数据，机器故障的快速发现与恢复是HDFS的核心目标。