如何搭建hadoop运行环境

发布时间:2021-12-20 11:51:40 作者:小新
来源:亿速云 阅读:111

这篇文章主要介绍如何搭建hadoop运行环境,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

 

Hadoop作为搭建大数据处理平台的重要“基石”,关于它的分析和讲解的文章已经有很多了。Hadoop本身是一分布式的系统,因此在安装的时候,需要多每一个节点进行组建的安装。并且由于是开源软件,其安装过程相对比较复杂。这也是很多人在搭建hadoop运行环境时总是不能一次性成功的主要原因。

hadoop每个组建都要做很多的配置工作,如果手动去完成这个工作,工作量其实还是非常庞大。正是这一点我觉得很多做国产发行版hadoop软件开发的都没有大快的DKhadoop发行版做的好。我记得在之前写DKHadoop运行环境搭建流程的时候也提到过这个问题,DKH可以说是把易用性做的非常好了,无论是对于老手还是新入门者,上手速度要比其他的一些发行版快的多。

针对hadoop每个组建都要配置的这种情况,DKH提供了自动化安装应用来部署Hadoop。这就大大缩短了Hadoop的安装时间,同时也简化了安装Hadoop的过程。如果你在安装之后想要拓展节点,其实也不用担心。因为DKH中提供了节点管理的功能。

“节点”是集群中的服务器。DKH集群中的节点担任不同服务的不同角色,协同工作。我们可以在DKH管理界面添加节点。 然后在相应的服务中选择“添加角色”,那么新添加的节点就有了该服务的功能。

1、进入管理界面(在“主机”菜单中)

如何搭建hadoop运行环境                                         这里你可以查看节点的基本信息,并且可以添加和删除节点。

2、添加节点:点击“向集群添加主机”进入“添加节点”界面

如何搭建hadoop运行环境 

输入对应节点的IP地址即可。

3、为节点指定服务:在每一个服务界面中,选择“添加角色”如下图所示

如何搭建hadoop运行环境                                         选择要添加的节点,点击“继续”即可完成添加。

如何搭建hadoop运行环境

以上是“如何搭建hadoop运行环境”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注亿速云行业资讯频道!

推荐阅读:
  1. 单机Hadoop搭建
  2. 简单搭建hadoop运行环境

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

hadoop

上一篇:如何进行WebSphere 反序列化远程代码执行漏洞的深度分析

下一篇:如何使用DolphinDB进行淘宝用户行为分析

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》