类似传统数据库中的DDL 和 DML

模式定义

表

表描述符 HTableDescriptor

Writable 和无参数的构造函数

大部分类都有一个无参数的构造函数，这些类都实现了Hadoop 的 Writable接口。

任意不相交系统间的远程通信：

例如客户端与服务端或者服务端之间彼此通信，都使用了Hadoop RPC框架。框架中需要远程方法的参数都实现 Writable接口，进而能够序列化对象并进行传输。writable接口有两个实现方法

void write(DataOutput out)
void readFields(Datainput in)

数据接收服务器先读取元数据信息，并创建类的无参数实例，然后调用readFields方法将字节流中的信息读取到对应对象的字段中。

所以如果用户开发并扩展了HBase的基础实现，例如，过滤器和协处理器，则必须

在RPC两端都必须可用
实现writable接口
拥有无参数的构造函数

没有任何参数的构造函数仅仅是为了反序列化，并且不应该被直接使用

列族

HTableDescriptor 虽然名字叫 HTable但是其实是针对列族的

压缩

HBase支持插件式的压缩算法，这个功能允许用户选择合适的压缩算法

支持的压缩算法

算法	描述
NONE	不压缩（默认）
GZ	使用Java提供的或者本地库的 GZIP
LZO	启用LZO压缩，需要安装LZO的类库
SNAPPY	启用SNAPPY压缩，需要独立安装

压缩类型是 Compression.Algorithm枚举

压缩分为一般压缩和合并压缩

块大小

默认为64KB

列族的块，或者说HFile的块不同HDFS层面的块。HDFS中的块默认是64MB, HBase中的HFile的块大小默认是64KB

in-memory

默认为false。如果为true，则块数据会以较高优先级被加载到内存中，除非堆压力大，这个时候才会强制从内存卸载这部分数据

这个参数非常适合数据量小的列族，例如，保存登录账号和密码的用户表

布隆过滤器

是HBase中的高级功能，能够减少特定访问模式下的查询时间，但是由于这种模式增加了内存和存储的负担，这个模式默认为关闭。

复制范围

复制（replication）提供了跨集群的同步的功能。replication scope默认为0，意味着是关闭的。setScope(1)可以开启该功能

HBaseAdmin

HBaseAdmin实例的生命周期不宜太长。
getMaster() 可以获取HMasterInterface 接口的RPC代理实例。除非用户确定自身的调用时安全的，否则不要显式调用 getMaster。
另一种高级建表的方式是伴随建表操作进行预分区
createTableAsync 是异步建表命令

关于异步命令：其实大多数命令都是异步的，同步的命令也只是对异步模式的封装，增加了不断检查这个任务是否已经完成的循环操作，例如 createTable 方法其实包装了 createTableAsync

集群管理

checkHBaseAvailable(conf) 可以验证客户端能否与远程HBase集群进行通信
flush(tableNameOrRegionName) 可以在memstore 达到 memstore flush size 之前显示的让数据flush到磁盘上
compact 让表或者region合并
majorCompact 会迭代这张表的所有region，并顺序调用合并操作
split 可以提供 splitPoint 进行制定键的拆分
assign 和 unassign 可以控制region的上线和下线
move 可以移动region
balanceSwitch 可以控制是否开启负载均衡算法
balancer 主动运行负载均衡
shutdown stopMaster stopRegionServer 可以关闭集群，master，某个region server

《HBase权威指南》读书笔记5:第五章客户端API: 管理功能相关推荐

mysql数据库权威指南_MySQL_MySQL权威指南读书笔记(三)，第二章：MYSQL数据库里面的数 - phpStudy...
MySQL权威指南读书笔记(三) 第二章:MYSQL数据库里面的数据用想用好MYSQL,就必须透彻理解MYSQL是如何看待和处理数据的.本章主要讨论了两个问题:一是SQL所能处理的数据值的类型:二是 ...
《HTTP 权威指南》笔记:第十五章实体与编码
如果把「HTTP 报文」想象为因特网货运系统的「箱子」,那么「HTTP 实体」就是报文中的实际的「货物」. 其中,实体又包含了「实体首部」和「实体主体」,实体首部用于描述各种参数,实体主体就 ...
HTML5权威指南----读书笔记
<!DOCTYPE html> <html> <head><meta name = 'keywords' content="HTML5权威指南--- ...
MongoDB权威指南读书笔记——CRUD
插入并保存文档插入是向MongoDB中添加数据的基本方法.可以使用Insert方法向目标集合插入一个文档:db.foo.insert({"bar" : "baz&quo ...
HTTP权威指南读书笔记
<<HTTP权威指南>>读书笔记第一部分:Web的基础第1章:HTTP概述主要内容 1.什么是HTTP 2.HTTP的基本组件 HTTP HTTP:HTTP(Hypert ...
【Python自然语言处理】读书笔记：第五章：分类和标注词汇
jupyter 版请见我的github:https://github.com/JackKuo666/Python_nlp_notes [Python自然语言处理]读书笔记:第五章:分类和标注词汇本章 ...
黑帽python第二版（Black Hat Python 2nd Edition）读书笔记之第五章 WEB黑客（3）暴力破解目录与文件位置
黑帽python第二版(Black Hat Python 2nd Edition)读书笔记之第五章 WEB黑客(3)暴力破解目录与文件位置文章目录黑帽python第二版(Black Hat P ...
黑帽python第二版（Black Hat Python 2nd Edition）读书笔记之第五章 WEB黑客（4）暴力破解HTML表单身份验证
黑帽python第二版(Black Hat Python 2nd Edition)读书笔记之第五章 WEB黑客(4)暴力破解HTML表单身份验证文章目录黑帽python第二版(Black Ha ...
计算机网络和http权威指南读书笔记
计算机网络笔记网络层网络层向上提供无连接的,尽最大努力交付的数据报服务网络层不提供数据质量承诺物理层使用的中间设备叫转发器repeater 数据链路层叫网桥bridge 网络层叫路由器rout ...

《HBase权威指南》读书笔记5:第五章客户端API: 管理功能

模式定义

表

Writable 和无参数的构造函数

列族

压缩

块大小

in-memory

布隆过滤器

复制范围

HBaseAdmin

集群管理

《HBase权威指南》读书笔记5:第五章客户端API: 管理功能相关推荐

最新文章

热门文章

《HBase权威指南》读书笔记5:第五章 客户端API: 管理功能

模式定义

表

Writable 和无参数的构造函数

列族

压缩

块大小

in-memory

布隆过滤器

复制范围

HBaseAdmin

集群管理

《HBase权威指南》读书笔记5:第五章 客户端API: 管理功能相关推荐

最新文章

热门文章

《HBase权威指南》读书笔记5:第五章客户端API: 管理功能

《HBase权威指南》读书笔记5:第五章客户端API: 管理功能相关推荐