hbase的主要用途是什么

一、hbase的主要用途是什么

HBase的主要用途是作为大数据存储系统，用于存储非结构化和半结构化的稀疏数据。

1.大数据存储：HBase是一个分布式、可伸缩的大数据存储系统，能够存储数十亿行甚至更多的数据。它不同于传统的关系型数据库，不需要预先定义数据结构，因此非常适合存储大量且快速变化的数据。这使得HBase成为许多大数据应用的首选存储解决方案。

2.非结构化和半结构化数据：HBase可以灵活地存储各种类型的数据，包括文本、图片、音频、视频等非结构化数据，以及JSON、XML等半结构化数据。这些数据在现代应用中越来越常见，而传统的关系型数据库往往难以有效处理。

3.稀疏数据：HBase非常适合存储稀疏数据，即其中大部分元素都是空的数据集。在很多情况下，稀疏数据在传统数据库中会占用大量空间，并且处理效率低下。而HBase通过列式存储和高效的压缩机制，能够高效地处理这类数据。

举例来说，假设有一个大型的电子商务网站，需要存储用户的浏览记录、购买记录、搜索记录等信息。这些数据量巨大，且快速增长，同时包含大量的非结构化和半结构化数据（如用户评论、图片等）。在这种情况下，使用HBase作为存储系统可能是一个很好的选择。HBase可以灵活地存储这些数据，并且可以很容易地扩展存储容量和处理能力。同时，HBase提供的高效查询和数据处理功能，可以帮助电子商务网站实现实时推荐、用户画像等高级功能。

二、hbase的特点,以及和其他nosql数据库的异同

NoSQL太火，冒出太多产品了，保守估计也成百上千了。

互联网公司常用的基本集中在以下几种，每种只举一个比较常见或者应用比较成功的例子吧。

in memory key-value store，同时提供了更加丰富的数据结构和运算的能力，成功用法是替代memcached，通过checkpoint和commit log提供了快速的宕机恢复，同时支持replication提供读可扩展和高可用。

2. Disk-Based KV Store: Leveldb

真正基于磁盘的key-value storage,模型单一简单，数据量不受限于内存大小，数据落盘高可靠，Google的几位大神出品的精品，LSM模型天然写优化，顺序写盘的方式对于新硬件ssd再适合不过了，不足是仅提供了一个库，需要自己封装server端。

分布式nosql，具备了区别mysql的最大亮点：可扩展性。mongodb最新引人的莫过于提供了sql接口，是目前nosql里最像mysql的，只是没有ACID的特性，发展很快，支持了索引等特性，上手容易，对于数据量远超内存限制的场景来说，还需要慎重。

这个富二代似乎不用赘述了，最大的优势是开源，对于普通的scan和基于行的get等基本查询，性能完全不是问题，只是只提供裸的api,易用性上是短板，可扩展性方面是最强的，其次坐上了Hadoop的快车，社区发展很快，各种基于其上的开源产品不少，来解决诸如join、聚集运算等复杂查询。

三、Hbase知识点总结

1、非结构化的分布式的面向列存储非关系型的开源的数据库，根据谷歌的三大论文之一的bigtable

2、为了解决大规模数据集合多重数据种类带来的挑战，尤其是大数据应用难题。

3、存储大量结果集数据，低延迟的随机查询。

4、非关系型数据库，列存储和文档存储(查询低延迟),hbase是nosql的一个种类，其特点是列式存储。

5、非关系型数据库--文档存储(MongoDB)

6、非关系型数据库--内存式存储(redis)

7、非关系型数据库--图形模型(graph)

8、Hive的定位是数据仓库，虽然也有增删改查，但其删改查对应的是整张表而不是单行数据，查询的延迟较高。其本质是更加方便的使用mr的威力来进行离线分析的一个数据分析工具。

9、HBase的定位是hadoop的数据库，电脑培训发现是一个典型的Nosql，所以HBase是用来在大量数据中进行低延迟的随机查询的。

10、单节点:单独的进程运行在同一台机器上

11、hbase行一行在hbase中由行健和一个或多个列的值组成，按行健字母顺序排序的存储。