Debian 上 HBase 集群扩容实操指南
一 扩容方式与前置检查
- 方式选择
- 水平扩容：新增 RegionServer 节点，提升存储与计算能力，业务一般不中断，适合长期增长。
- 垂直扩容：提升现有节点的 CPU/内存/磁盘，CPU/内存变更通常会引起短暂中断，磁盘扩容通常不影响业务。
- 前置检查
- 集群健康：使用 HBase Shell 执行 status ‘detailed’，确认 RegionServers 全部在线、负载相对均衡、无长时间 Region in transition。
- 依赖服务：确认 HDFS 与 ZooKeeper 正常（HDFS 空间充足、ZK 会话稳定）。
- 系统环境：新节点与集群时间同步（如 NTP）、JDK 版本一致、域名解析正常（建议用 /etc/hosts 或 DNS）、防火墙/安全组放通 HBase/ZooKeeper/HDFS 端口。
二 水平扩容 增加 RegionServer（推荐）
- 在新节点（Debian）准备环境
- 安装与现有集群一致的 JDK，配置 SSH 免密 到集群各节点。
- 安装相同版本的 HBase（建议直接从现有 Master 分发安装目录，避免版本不一致）。
- 同步集群时间（如 chrony/ntp），确保 /etc/hosts 或 DNS 能正确解析 Master 与所有 RegionServer 主机名。
- 配置分发
- 在 Master 节点将新节点加入 $HBASE_HOME/conf/regionservers（每行一个主机名）。
- 如使用 HBase on HDFS，确保 HDFS 已纳入新节点（加入 DataNode，并完成数据均衡）。
- 启动与注册
- 在新节点启动 RegionServer：
- 方式 A：仅启动 RegionServer
- 命令：$HBASE_HOME/bin/hbase-daemon.sh start regionserver
- 方式 B：随集群脚本启动（需已在 regionservers 中配置）
- 命令：$HBASE_HOME/bin/start-hbase.sh
- 观察 Master UI 与新节点日志，确认 RegionServer 已注册且 Region 开始迁入。
- 负载均衡
- 在 HBase Shell 检查并开启均衡器（默认开启，扩容后建议触发一次均衡）：
- 查看：balance_switch
- 开启：balance_switch true
- 触发均衡（可选）：balancer（均衡会按策略逐步迁移 Region，避免一次性大规模移动）。
三 垂直扩容 提升节点规格
- 适用场景
- 现有节点 CPU/内存 成为瓶颈或需要临时提升处理能力。
- 操作要点
- CPU/内存：通常需短暂停止 RegionServer/HMaster 或相关服务，建议在业务低峰窗口执行，并提前通知业务方。
- 磁盘：多数平台支持在线扩容磁盘，通常不影响业务运行；扩容后按需执行 HDFS 与 Region 均衡以利用新增空间。
- 变更完成后，逐步恢复服务并观察 延迟、吞吐、GC 等指标是否改善。
四 扩容后的验证与常见问题处理
- 验证清单
- HBase Shell：status ‘detailed’ 检查 RegionServers 数量、负载分布、是否有 RIT。
- Master UI：确认新节点 StoreFiles/Regions 增长，请求延迟稳定。
- HDFS：检查 DataNode 正常、Used/Remaining 空间合理。
- 业务侧：抽样验证读写 延迟/成功率 与基线一致或更优。
- 常见问题与处理
- 新节点未注册：检查 regionservers 是否一致、主机名解析、SSH、防火墙、HBase 版本与 ZooKeeper 会话。
- Region 迁移缓慢或不均衡：确认 balancer 已开启，必要时手动触发；关注 网络/磁盘 IO 是否瓶颈。
- 短暂延迟上升：扩容触发 Region 移动 与 Block 重建，属正常现象；均衡完成后通常恢复。
- 回滚方案：如采用托管服务，通常支持 自动回滚；自建集群建议提前准备 备份/回滚 计划（如快照、导出关键表）。