关于Hbase客户端和regionserver之间的单连接

 

2013年02月17日 17:45:27 杨步涛的博客 阅读数:4417更多

所属专栏: 大数据 HBase存储

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/yangbutao/article/details/8585841

利用Hbase的客户端进行Get或者scan操作时,在regionserver端用netstat -anp|grep 60020时,发现每一个Hbase客户端只有一个和该regionserver的连接,无论hbase client是否开启了多个线程进行并发操作。 后来翻了一下源码,果然是这样的。参见下面的源码截图,

关于Hbase客户端和regionserver之间的单连接

关于Hbase客户端和regionserver之间的单连接

对同一个目的地的RegionServer来说,connection只有一个。这样设计的初衷是为了共享连接,减少维护多个连接的开销。

当然也可以用在hbase client的 API中设置采用多个连接的方式,如

conf.set("hbase.client.ipc.pool.type","RoundRobin");

conf.set("hbase.client.ipc.pool.size", "200");

table = new HTablePool(conf, 400,PoolType.RoundRobin);

 

可以参考一下两个链接

http://comments.gmane.org/gmane.comp.java.hadoop.hbase.user/11534

https://issues.apache.org/jira/browse/HBASE-2939