如何搭建Hadoop-zookeeper环境

发布时间:2021-12-09 14:54:13 作者:小新
来源:亿速云 阅读:95

这篇文章主要介绍了如何搭建Hadoop-zookeeper环境,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。

1、安装zookeeper前先安装JDK8:
    rpm -ivh jdk-8u65-linux-x64.rpm

    1.1、配置环境变量:

    vim /etc/profile

    JAVA_HOME=/usr/java/jdk1.8.0_65
    CLASSPATH=$JAVA_HOME/lib/tools.jar
    PATH=$JAVA_HOME/bin:$PATH
    export JAVA_HOME CLASSPATH PATH

    1.2、配置静态IP地址:

    vim /etc/sysconfig/network-scripts/ifcfg-eno16777736

如何搭建Hadoop-zookeeper环境

    1.3、修改mac地址:

    vmware查看虚拟机mac地址:

    右键-设置-网络适配器-高级-MAC地址

    vim /etc/sysconfig/network-scripts/ifcfg-eno16777736

    添加MACADDR=00:0C:29:36:97:20(虚拟机所对应的mac地址)
     注释掉原来的HWADDR
   :wq 保存退出。

zk集群搭建:

zookeeper下载地址:
http://www.apache.org/dyn/closer.cgi/zookeeper/

如何搭建Hadoop-zookeeper环境

如何搭建Hadoop-zookeeper环境

如何搭建Hadoop-zookeeper环境

下载zookeeper到本地系统:
wget http://apache.fayea.com/zookeeper/stable/zookeeper-3.4.8.tar.gz

pwd:查看当前所在目录的全路径

1、解压:tar -zxvf zookeeper-3.4.8.tar.gz
    复制解压文件到 /usr/local/
    cp -r zookeeper-3.4.8 /usr/local/
2、复制示例文件:
    cp /usr/local/zookeeper-3.4.8/conf/zoo_sample.cfg /usr/local/zookeeper-3.4.8/conf/zoo.cfg
3、修改zoo.cfg:
    vim zoo.cfg
    修改数据存放目录dataDir为:
    dataDir=/usr/local/zookeeper-3.4.8/data

    3.1、配置3台zk服务器
    增加:
    server.1=server1:2888:3888
    server.2=server2:2888:3888
    server.3=server3:2888:3888

4、创建data文件夹:
mkdir /usr/local/zookeeper-3.4.8/data

5、data目录下 创建myid文件:

    vi myid -->内容为1
    有表示符1,代表第server.1台server

6、发送文件到其它机器:

    scp zookeeper:
    -r:复制目录 -q:不显示传输进度
     scp -r zookeeper-3.4.8 root@192.168.0.108:/usr/local/
     yes
     输入密码

     scp -rq zookeeper-3.4.8/ root@192.168.0.109:/usr/local/

7、修改myid文件:(三台服务器都要修改)

    vim myid
    或者
    echo 2 > /usr/local/zookeeper-3.4.8/data/myid

    编辑“myid”文件,并在对应的IP的机器上输入对应的编号。如在server1上,“myid”文件内容就是1(多个主机的myid 内容都不一样,和zoo.cfg配置文件(server.*)一致即可)。 

8、启动执行zk:

    cd /usr/local/

    zookeeper-3.4.8/bin/zkServer.sh start (三台机器要同时启动)

9、查看zk状态:

    zookeeper-3.4.8/bin/zkServer.sh status

    zookeeper-3.4.8/bin/zkServer.sh stop (停止)

    查看status时报错:
    Error contacting service. It is probably not running
    将zoo.cfg的hostname修改为相对应的IP地址:
    server.1=192.168.0.107:2888:3888
    server.2=192.168.0.108:2888:3888
    server.3=192.168.0.109:2888:3888

10、进入zk客户端:

进入zookeeper的Cli客户端:
zookeeper-3.4.8/bin/zkCli.sh

与linux命令相似:

ls /

帮助命令:

help

创建节点:

create /path data
ls /path

获取节点数据信息:
get /path [代表节点,每个节点存放信息]

删除节点:

delete /path
ls /

退出:
quit

进入用户文件夹:

cd ~

感谢你能够认真阅读完这篇文章,希望小编分享的“如何搭建Hadoop-zookeeper环境”这篇文章对大家有帮助,同时也希望大家多多支持亿速云,关注亿速云行业资讯频道,更多相关知识等着你来学习!

推荐阅读:
  1. 搭建 LAMP 环境
  2. 如何搭建python环境

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

hadoop zookeeper

上一篇:hadoop中如何确定map和reduce数目

下一篇:hadoop 2.7.1如何动态添加节点

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》