怎么解决Hadoop2.7启动报WARN util.NativeCodeLoader的问题

发布时间:2021-08-06 22:27:35 作者:chen
来源:亿速云 阅读:149

本篇内容主要讲解“怎么解决Hadoop2.7启动报WARN util.NativeCodeLoader的问题”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“怎么解决Hadoop2.7启动报WARN util.NativeCodeLoader的问题”吧!

配置环境:ubutun14.04 64位

hadoop2.7

今天启动hadoop2.7报 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 问题。

怎么解决Hadoop2.7启动报WARN util.NativeCodeLoader的问题

搜索了一下结果后,网上普遍是如下解决办法:

在.bashr 或/etc/profile添加本地库语句:

export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib"

但是这种办法在我这里不适用。于是查找其他办法,后来详读了一下官网本地库介绍(http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-common/NativeLibraries.html)和网上资料(http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-common/NativeLibraries.html)后,才发现是util.NativeCodeLoader问题,代码参看http://grepcode.com/file/repo1.maven.org/maven2/com.ning/metrics.action/0.2.6/org/apache/hadoop/util/NativeCodeLoader.java/。

于是按照介绍,在$Hadoop_home/etc/hadoop/目录下打开log4j.properties,在里面添加语句:log4j.logger.org.apache.hadoop.util.NativeCodeLoader=DEBUG,启动还报错

DEBUG util.NativeCodeLoader: Failed to load native-hadoop with error: java.lang.UnsatisfiedLinkError: /opt/hadoop/lib/native/libhadoop.so.1.0.0: /lib64/libc.so.6: version `GLIBC_2.14' not found (required by /opt/hadoop/lib/native/libhadoop.so.1.0.0)。

改成log4j.logger.org.apache.hadoop.util.NativeCodeLoader=ERROR后,启动不报错了,结果如下

怎么解决Hadoop2.7启动报WARN util.NativeCodeLoader的问题

这么修改的原因可以自己仔细琢磨。

主要参考:

http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-common/NativeLibraries.html

http://stackoverflow.com/questions/19943766/hadoop-unable-to-load-native-hadoop-library-for-your-platform-warning

到此,相信大家对“怎么解决Hadoop2.7启动报WARN util.NativeCodeLoader的问题”有了更深的了解,不妨来实际操作一番吧!这里是亿速云网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

推荐阅读:
  1. Spark 报错解决--Error initializing SparkContext
  2. 解决librdkafka 报WARN:Protocol read buffer underflow

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

hadoop

上一篇:MongoDB数据库的基本操作讲解

下一篇:如何解决某些HTML字符打不出来的问题

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》