ubuntu上hbase集群搭建 - 问答

在Ubuntu上搭建HBase集群涉及多个步骤，包括安装Java、配置Hadoop、安装HBase以及配置HBase集群。以下是一个基本的指南：

1. 安装Java

HBase需要Java环境，首先确保你的系统上安装了Java。

sudo apt update
sudo apt install openjdk-8-jdk

验证Java安装：

java -version

2. 配置Hadoop

HBase依赖于Hadoop，所以你需要先配置Hadoop。

下载并解压Hadoop

wget https://archive.apache.org/dist/hadoop/common/hadoop-3.3.1/hadoop-3.3.1.tar.gz
tar -xzvf hadoop-3.3.1.tar.gz -C /usr/local/

配置Hadoop

编辑/usr/local/hadoop/etc/hadoop/hadoop-env.sh文件，设置JAVA_HOME：

export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64

编辑/usr/local/hadoop/etc/hadoop/core-site.xml文件，添加以下内容：

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

编辑/usr/local/hadoop/etc/hadoop/hdfs-site.xml文件，添加以下内容：

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>3</value>
    </property>
</configuration>

启动Hadoop

start-dfs.sh

验证Hadoop是否启动成功：

jps

你应该能看到NameNode、DataNode和SecondaryNameNode等进程。

3. 安装HBase

下载并解压HBase

wget https://archive.apache.org/dist/hbase/2.4.9/hbase-2.4.9-bin.tar.gz
tar -xzvf hbase-2.4.9-bin.tar.gz -C /usr/local/

配置HBase

编辑/usr/local/hbase/conf/hbase-site.xml文件，添加以下内容：

<configuration>
    <property>
        <name>hbase.rootdir</name>
        <value>hdfs://localhost:9000/hbase</value>
    </property>
    <property>
        <name>hbase.cluster.distributed</name>
        <value>true</value>
    </property>
    <property>
        <name>hbase.zookeeper.quorum</name>
        <value>localhost</value>
    </property>
    <property>
        <name>hbase.zookeeper.property.dataDir</name>
        <value>/usr/local/hbase/zookeeper</value>
    </property>
</configuration>

mkdir -p /usr/local/hbase/data
mkdir -p /usr/local/hbase/logs

启动HBase

start-hbase.sh

验证HBase是否启动成功：

jps

你应该能看到HMaster、HRegionServer和QuorumPeerMain等进程。

4. 配置HBase集群

如果你有多个节点，需要在每个节点上进行相同的配置，并确保它们能够相互通信。

配置Hadoop集群

在每个节点上编辑/usr/local/hadoop/etc/hadoop/core-site.xml和/usr/local/hadoop/etc/hadoop/hdfs-site.xml文件，确保它们指向正确的NameNode和DataNode。

配置HBase集群

在每个节点上编辑/usr/local/hbase/conf/hbase-site.xml文件，确保hbase.zookeeper.quorum包含所有节点的地址。

例如：

<property>
    <name>hbase.zookeeper.quorum</name>
    <value>node1,node2,node3</value>
</property>

启动HBase集群

在主节点上启动HBase Master：

start-hbase-master.sh

在每个RegionServer节点上启动HBase RegionServer：

start-hbase-regionserver.sh

验证集群状态：

hbase shell
status 'simple'

你应该能看到集群的状态信息。

5. 验证集群

使用HBase shell连接到集群并创建一个表来验证集群是否正常工作：

hbase shell
create 'test_table', 'cf'
put 'test_table', 'row1', 'cf:col1', 'value1'
get 'test_table', 'row1'

如果一切正常，你应该能够看到插入的数据。

通过以上步骤，你应该能够在Ubuntu上成功搭建一个HBase集群。

0 赞

0 踩