博客
关于我
HBase基本概念
阅读量:576 次
发布时间:2019-03-11

本文共 1036 字,大约阅读时间需要 3 分钟。

一、HBase基本概念

1、模型的逻辑实体

包括6大概念,要始终牢记,基本描述了hbase的基本特点

  1. 表(table):组织数据。
  2. 行(row):表里数据按行存储,行键是唯一标示。行键没有数据类型,总是视为字节数组byte[]。
  3. 列族(column family):行里的数据按列族分组,列族同时确定了物理存放,列族的设计很重要。
  4. 列限定符(column qualifier):简称列。列族里的数据通过列定位。列不必提前定义。【无模式db】
  5. 单元(cell):行键、列族、列3个指标确定一个单元,用来存放单元值。单元值没有数据类型,总是视为byte[]。【无模式db】
  6. 时间版本(version):值可以保存多个版本,用时间戳标识。默认有3个版本。

rdbms中是二维坐标,行+列;hbase中是4维坐标,行+列族+列+版本

hbase是key-value数据库库。

2、HBase的存储模型:

  1. Region:是表按行键水平分割的存储单位,相当于rdbms的分区。在RegionServer上,是逻辑单元,是hbase分布的最小单位。
  2. Store:每个列族对应一个store。Region包含多个列族,即Region包含多个Store。
  3. StoreFile:每个store包含memStore和Stofile,MemStore是写缓存,写满后内存刷出就是StoreFile。 HFile:HFile是HBase数据存储在Hadoop上才有的概念,HBase底层存储结构可以不是Hadoop,上面引进StoreFile就是由于这个原因对底层存储文件做的一次封装。HFile通过hbase的dfsClient写入到hdfs。
    Alt

3、功能组件

  1. Client:访问hbase;缓存Cache。
  2. Zookeeper:确保唯一master;保存region地址;监控regionserver;存储hbase的元数据。
  3. Master:分配region;发现失效的regionserver;管理用户对table的操作。
  4. RegionServer:维护region;处理对region的IO;切分过大region。
    Alt

二、hbase特点

分布式、列式、nosql数据库

三、hbase的适应场景

1)存储海量数据2)高写入3)大数据的高效随即访问4)高扩展性scale gracefully with data5)结构或半结构化数据6)不需要rdbms的全部特性,如跨表、跨行的事务;join?

转载地址:http://nnmvz.baihongyu.com/

你可能感兴趣的文章
NLP学习笔记:使用 Python 进行NLTK
查看>>
NLP度量指标BELU真的完美么?
查看>>
NLP的不同研究领域和最新发展的概述
查看>>
NLP的神经网络训练的新模式
查看>>
NLP采用Bert进行简单文本情感分类
查看>>
NLP问答系统:使用 Deepset SQUAD 和 SQuAD v2 度量评估
查看>>
NLP项目:维基百科文章爬虫和分类【02】 - 语料库转换管道
查看>>
NLP:从头开始的文本矢量化方法
查看>>
NLP:使用 SciKit Learn 的文本矢量化方法
查看>>
NLTK - 停用词下载
查看>>
nmap 使用总结
查看>>
nmap 使用方法详细介绍
查看>>
nmap使用
查看>>
nmap使用实战(附nmap安装包)
查看>>
Nmap哪些想不到的姿势
查看>>
Nmap扫描教程之Nmap基础知识
查看>>
nmap指纹识别要点以及又快又准之方法
查看>>
Nmap渗透测试指南之指纹识别与探测、伺机而动
查看>>
Nmap端口扫描工具Windows安装和命令大全(非常详细)零基础入门到精通,收藏这篇就够了
查看>>
NMAP网络扫描工具的安装与使用
查看>>