HBase在CentOS上的性能测试

在CentOS上进行HBase性能测试，可参考以下方法：

一、测试工具

1. YCSB（推荐）
   • 适用于模拟多种负载场景（如读写混合、批量写入），支持自定义Workload。
   • 步骤：安装工具→创建表（含预分区）→加载数据→执行压测→通过nohup.out查看结果。
2. HBase自带工具
   • HBase Shell：手动执行读写操作，记录响应时间。
   • PE（Performance Evaluation）：支持多线程压测，适合简单场景。
   • JMX：监控集群实时指标（如吞吐量、延迟、GC情况）。

二、测试步骤

1. 环境准备
   • 确保CentOS系统资源充足（CPU、内存、SSD存储），配置好HBase集群参数（如hbase.regionserver.handler.count）。
   • 创建测试表，设置压缩（如SNAPPY）、预分区以优化性能。
2. 执行压测
   • 以YCSB为例：

     # 加载数据  
     $YCSB_HOME/bin/ycsb load hbase20 -p columnfamily=cf -P workloads/workloada  
     # 执行压测（如100万次读写，3线程）  
     nohup $YCSB_HOME/bin/ycsb run hbase20 -p recordcount=1000000 -p operationcount=1000000 -p threads=3 -s &> nohup.out &  
     

3. 结果分析
   • 重点关注吞吐量（ops/sec）、延迟（平均/99分位）、CPU/内存使用率，识别瓶颈。

三、注意事项

• 非生产环境：避免对线上集群造成影响。
• 参数调优：根据测试结果调整hbase.hregion.memstore.flush.size、hbase.hstore.blockingStoreFiles等参数。
• 持续监控：结合Ganglia、Prometheus等工具监控集群稳定性。

四、参考资料