Arena Allocation，是一种GC优化技术，它可以有效地减少因内存碎片导致的Full GC，从而提高系统的整体性能。本文介绍Arena Allocation的原理及其在Hbase中的应用-MSLAB。假设有1G内存，我顺序创建了1百万个对象，每个

maper中写入库逻辑，reduce是用hbase自带的，outputformat用的是hfileoutputformat

2007.2 inital HBase prototype created as Hadoop contrib. 2008.1 Hadoop become Apache top-level project and Hbase becomes subproj

前者适合于少量数据入库，后者主要面向海量数据入库。首先说下HFILE，HFILE是有序的KEYVALUE集合，对于入库HBASE，HFILE需要按照Key进行排序，排序后，HFILE就有个startKey和endKey，她的所有key是再这两者之间的。导入

现象：60020中有许多连接，并且长久不放；BlockLocations. Not retrying because failovers exceeded maximum allowed

" after a delay of " + randomDelay);//Throttle the flushes by putting a delay. If we don't throttle, and there. //is a

在启动region之后，memflush之后，用户compact调用compact. 最小的tts到时间了，进行major compact. 选择sum大小最小的作为第一个组合，选择能合并更多的hfile，并且sum大小更小的。如，只有一个region，1

我们在向hadoop写入文件时，这个文件的“replication”个数到底该如何控制？在hadoop server端，core-site.xml中有个参数为“file.replication”,同时在hdfs-site.xml中也有个“dfs.repli

本文主要介绍软件层面的性能调优。故，在此之前，请检查硬件状况。硬盘推荐SSD，一般SATA即可。可以安装Ganglia等工具，检查各节点的各硬件的运作状态：CPU,Memo,网络等等。投入小，回报快。* 必须禁止auto flush。原理HBase Cli

Couchbase(1)Introduction and Installation1. DocumentsCouchdb + Membase = CouchbaseSmart Clientload all the node information, dec

比如，在旧版本的Hbase中，统计数据表的总行数，需要使用Counter方法，执行一次MapReduce Job才能得到。虽然HBase在数据存储层中集成了MapReduce，能够有效用于数据表的分布式计算。然而在很多情况下，做一些简单的相加或者聚合计算的

两个问题解决方法：

Hbase提供一个计数器工具可以方便快速的进行计数的操作，而免去了加锁等保证原子性的操作。但是实质上，计数器还是列，有自己的簇和列名。值得注意的是，维护计数器的值最好是用Hbase提供的API，直接操作更新很容易引起数据的混乱。计数器的增量可以是正数负数，

1 包含访问hbase的接口，client维护着一些cache来加快对hbase的访问，比如regione的位置信息。2 存贮所有Region的寻址入口。3 实时监控Region Server的状态，将Region server的上线和下线信息实时通知给M

time stampkey typevalueHbase的存储数据结构是基于B+Tree的LSM tree. 所以设计好rowkey cf cq是提高hbase查询速度的关键，尤其是rowkey，因为如果一次匹配只在rowkey就可以前缀匹配出，则将省略了

新建student表，该表有两列 名称和地址，名称只有一个，address可以有多个，

本文来自于NoSQLFan联合作者@koven2049，他在淘宝从事Hadoop及HBase相关的应用和优化。对Hadoop、HBase都有深入的了解，本文就是其在工作中对HBase的应用优化小结，分享给大家。hbase是从hadoop中分离出来的apac

split;//调用方法分裂该region. region.forceSplit;//设置了两个值this.splitRequest=true和splitPoint=sp

首先用discoverLoadQueue方法扫描出hfofDir下有哪些fhile文件，再循环调用tryLoad方法把每个文件load进去，这是一个串行的过程。hfofDir下是两层目录结构family-->hfile，因此二重循环遍历每个hfile

hbase机群重启后不能正常工作，通过web接口访问时，500Exception的样子。hbasehbck显示很多region没有被服务。某些情况下下，比如系统压力比较大，或者master意外kill掉了，master会被快速重启。这个时候regionse