hbase
作者:互联网
1、提高Hbase API写入操作效率:
- Write Buffer Size Hbase Client会在数据累积到设置的阈值后才提交Region
Server。这样做的好处在于可以减少RPC连接次数 - Compression 压缩
HColumnDescriptor hcd = new HColumnDescriptor(familyName);
hcd.setCompressionType(Algorithm.SNAPPY); 数据量大,边压边写也会提升性能的,毕竟IO是大数据最严重的瓶颈,哪怕使用了SSD也一样。压缩方式推荐使用SNAPPY。从压缩率和压缩速度来看,性价比最高。 - 预分区和rowkey散列:防止热点写
标签:压缩,HColumnDescriptor,SNAPPY,hcd,文章,hbase,Hbase 来源: https://blog.csdn.net/laojingyao/article/details/104439250