怎么解决hadoop安装搭建过程中遇到的问题

发布时间:2021-08-17 11:57:34 作者:chen
来源:亿速云 阅读:111

本篇内容主要讲解“怎么解决hadoop安装搭建过程中遇到的问题”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“怎么解决hadoop安装搭建过程中遇到的问题”吧!

  1. 启动hadoop时,slave节点jps之后缺少datanode:

原因:查看普通用户的datanode log,发现datanode clusterID与namenode clusterID(在/home/zoe/hadoopdata/dfs/name/current/VERSION可以查看namenode clusterID)不一致,可能是由于多次配置hadoop环境后格式化造成的

解决:清空master的"~/hadoopdata",重新格式化;

否则进入hadoop配置文件的core-site.xml,如下编辑:

<configuration>

<property>
<name>dfs.replication</name>
<value>1</value>
</property> 

 

<property>
  <name>dfs.datanode.data.dir</name>
 <value>/home/zoe/hadoop/hadoopdata/dfs/name/</value>
</property>  
      
<property>
  <name>dfs.datanode.data.dir</name>
  <value>/home/zoe/hadoop/hadoopdata/dfs/data/</value>

改为:<value>namenode clusterID</value>
</property>

 

</configuration>

    2. 计算pi值时出"no roote to host":

解决:关闭防火墙:service iptables stop

到此,相信大家对“怎么解决hadoop安装搭建过程中遇到的问题”有了更深的了解,不妨来实际操作一番吧!这里是亿速云网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

推荐阅读:
  1. Git 工作过程中遇到的问题小结
  2. hadoop安装遇到的问题

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

hadoop

上一篇:在Python中如何以绝对路径或者相对路径导入文件

下一篇:在Django下如何测试与调试REST API

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》