即通过尽量多的使用内存，和尽量多的顺序读写磁盘实现高吞吐。因此大规模使用内存引起的Java GC问题就成为了一个普遍问题。翻译这篇文章的初衷是：该系列文章以Hadoop为例介绍了GC停顿带来的问题，比较生动。比较详细的介绍了GC原理，特别是CMS错误产生的

本文的测试环境为hbase-0.96.0 + yarn + pig-0.12.0。在测试前，先创建了一张名为test的hbase表，它内容非常简单，就只有一行数据：。HBase export工具导出的数据的格式是sequence file。当然，对于这类S

hbase所谓的三维有序存储的三维是指：rowkey（行主键），column key，timestamp(时间戳)三部分组成的三维有序存储。所以 rowkey的设计是至关重要的，关系到你应用层的查询效率。我们知道，rowkey是以字典顺序排序的。我们可以通

hdfs的优化: 设置hdfs中data的存储路径为多路径 ----> 对IO进行了分摊，这样IO优化下， 一台主机上有多个挂载点，修改hdfs-site.xml中的dfs.data.dir,设置java垃圾回收时的heap修改hbase-env.s

hbase分页功能的几种实现方案。分页功能是线上系统的常用功能，对hbase，有以下几个方案可以选择。1client分页，scan查到N*M条，过滤掉N*M-M条，返回M条。对于M,N较小时比较适合。2自定义Filter，该filter可以传递offset

//块的大小，默认值是65536//加载到内存当中的数据块越小，随机查找性能更好,越大，连续读性能更好

由client将scan分解为面向多个region的请求，并行发送请求到多个region，然后client做一个reduce的操作，得到最后的结果。先看一个例子，使用hbase的AggregationClient可以做到简单的面向单个column的统计。m

hbase 查询相当简单，提供了get和scan两种方式，也不存在多表联合查询的问题。复杂查询需通过hive创建相应外部表，用sql语句自动生成mapreduce进行。但是这种简单，有时为了达到目的，也不是那么顺手。至少和sql查询方式相差较大。hbase

HRegionServer内部管理了一系列HRegion对象，每个HRegion对应了Table中的一个Region，HRegion中由多个HStore组成。每个HStore对应了Table中的一个Column Family的存储，可以看出每个Column

create'表名称','列名称1','列名称2','列名称N'. 查看表中的记录总数。先要屏蔽该表，才能对该表进行删除，第一步disable'表名称'第二步drop'表名称'. scan"表名称",['列名称:']. 就是重写一遍进行

用hadoop0.20版本做hbase的bulkload测试，发现importtsv的过程出现些问题，关于importtsv网上有很多资料，这里不待言表。先大概表述出现的问题，当使用两步的方式导入数据时，这一步提醒两个地方，c1,c2列是需要指明列族和列名

eBay在Hadoop世界大会的主题演讲中展示了一种全新的搜索引擎Cassini的架构，该引擎预计在2012年上线。它对所有的内容和用户的元数据进行索引来得到更好的排名，并每小时刷新索引。它使用ApacheHadoop来支持每小时进行的索引更新，使用Apa

它有两种构造方式：。没有这两个文件，就需要你自己设置配置。过期数据会被自动删除。指定是否放在内存中，对小表有用，可用于提高效率。设定数据压缩类型。指定数据最大保存的版本个数。这是一个非常耗时的操作，所以不建议频繁删除表。

近日对hbase进行稳定性测试，因为主机资源有限，所以使用多个虚拟机搭了一个分布式hbase集群，无意中停了一个虚拟机，然后启动hbase发现整个集群无法启动，hmaster报了一个网络异常之后，就直接退出了。于是开始跟踪hmaster启动部分的源码。现在

hbase中的缓存分了两层：memstore和blockcache。其中memstore供写使用，写请求会先写入memstore，regionserver会给每个region提供一个memstore，当memstore满64MB以后，会启动flush刷新到

启动master时创建一个Server的实例,利用反射机制提供HMaster的方法调用服务;Server继承自抽象类HBaseServer;对新连接连接,因为采用异步方式处理,所以为新连接创建一个Connection的实例维持连接状态,并在Selector

在HBase中，namespace命名空间指对一组表的逻辑分组，类似RDBMS中的database，方便对表在业务上划分。ApacheHBase从0.98.0,0.95.2两个版本开始支持namespace级别的授权操作，HBase全局管理员可以创建、修改

如果有kerberos认证，需要事先使用相应的keytab进行一下认证，认证成功之后再使用hbaseshell进入可以使用whoami命令可查看当前用户。#权限用五个字母表示："RWXCA".#例如，给用户‘test'分配对表t1有读写

#cd/home/hbase-0.94.7-security/conf/(进入hbase的conf目录). #cd/home/hbase-0.94.7-security/bin/(进入hbase的bin目录). root@aly:/home/hbase-0

备注： 本次安装是在hbase docker 镜像的基础上配置的,主要是为了方便学习，而hbase搭建有觉得 有点费事，用镜像简单。