如何配置Hadoop分布式集群环境

发布时间:2021-12-16 14:37:00 作者:iii
来源:亿速云 阅读:124

本篇内容主要讲解“如何配置Hadoop分布式集群环境”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“如何配置Hadoop分布式集群环境”吧!

在VMWare 中准备第二、第三台运行Ubuntu系统的机器;

在VMWare中构建第二、三台运行Ubuntu的机器和构建第一台机器完全一样,再次不在赘述。。

与安装第一台Ubuntu机器不同的几点是:

第一点:我们把第二、三台Ubuntu机器命名为了Slave1、Slave2,如下图所示:

创建完的VMware中就有三台虚拟机了:

如何配置Hadoop分布式集群环境

第二点:为了简化Hadoop的配置,保持最小化的Hadoop集群,在构建第二、三台机器的时候使用相同的root超级用户的方式登录系统。

按照配置伪分布式模式的方式配置新创建运行Ubuntu系统的机器;

按照配置伪分布式模式的方式配置新创建运行Ubuntu系统的机器和配置第一台机器完全相同, 

      下图是家林完全安装好后的截图:

如何配置Hadoop分布式集群环境

如何配置Hadoop分布式集群环境

配置Hadoop分布式集群环境

根据前面的配置,我们现在已经有三台运行在VMware中装有Ubuntu系统的机器,分别是:Master、Slave1、Slave2;

下面开始配置Hadoop分布式集群环境:

Step 1:在/etc/hostname中修改主机名并在/etc/hosts中配置主机名和IP地址的对应关系:

我们把Master这台机器作为Hadoop的主节点,首先看一下Master这台机器的IP地址:

如何配置Hadoop分布式集群环境

可以看到当前主机的ip地址是“192.168.184.133”.

我们在/etc/hostname中修改主机名:

如何配置Hadoop分布式集群环境

进入配置文件:

如何配置Hadoop分布式集群环境

可以看到按照我们装Ubuntu系统时候的默认名称,配置文件中的机器的名称是” rocky-virtual-machine”,我们把” rocky-virtual-machine”改为“Master”作为Hadoop分布式集群环境的主节点:

如何配置Hadoop分布式集群环境

保存退出。此时使用以下命令查看当前主机的主机名:

如何配置Hadoop分布式集群环境

发现修改的主机名没有生效,为使得新修改的主机名生效,我们重新启动系统后再次查看主机名:

如何配置Hadoop分布式集群环境

发现我们的主机名成为了修改后的“Master”,表明修改成功。

打开在/etc/hosts 文件:

如何配置Hadoop分布式集群环境

此时我们发现文件中只有Ubuntu系统的原始ip(127.0.0.1)地址和主机名(localhost)的对应关系:

如何配置Hadoop分布式集群环境

我们在/etc/hosts中配置主机名和IP地址的对应关系:

如何配置Hadoop分布式集群环境

修改之后保存退出。

接下来我们使用“ping”命令看一下主机名和IP地址只见的转换关系是否正确:

如何配置Hadoop分布式集群环境

可以看到此时我们的主机“Master”对应的IP地址是“192.168.184.133”,这表明我们的配置和运行都是正确的。

到此,相信大家对“如何配置Hadoop分布式集群环境”有了更深的了解,不妨来实际操作一番吧!这里是亿速云网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

推荐阅读:
  1. Hadoop完全分布式配置
  2. Hadoop 系列(五)—— Hadoop 集群环境搭建

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

hadoop

上一篇:redis中如何使用scan

下一篇:Linux sftp命令的用法是怎样的

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》