MapReduce 运行时报ClassNotFound 时的解决方法

发布时间:2020-06-05 01:24:33 作者:ComFanWorld
来源:网络 阅读:14018

 直接进入正题了 

MapReduce程序报ClassNotFound的错误如何解决。

如果你也遇到了这个问题可以按照下面方法解决 

1、运行程序就报ClassNotFound ,日志里面没有MapReduce程序运行的任何信息

     这就是job时的异常。

    解决首先本地的Classpath中要存在对应的Jar包  

     也就是必须要能够运行Job 提交任务 当然任务都不能提交成功也就没有第2种情况

2、Map或Reduce运行时出现ClassNotFound     

     这是任务成功提交后 MapReduce程序运行的时候出现的问题  新手遇到这个问题一般不易找到原因(笔者也是借助别人帮忙很难才找到的) 原因是MapReduce的环境和job的运行环境不同 MapReduce是运行在(2.x)Yarn框架上的

    解决hadoop classpath中要存在对应的jar包

   注意 这不是改hadoop-env   而是放在hadoop classpath包含的目录中  如果不放在hadoop classpath包含的目录中  有可能出现Job找到类而MapReduce程序找不到的ClassNotFound


推荐阅读:
  1. HBase-1.0.1学习笔记(四)MapReduce操作HBase
  2. MapReduce架构简介

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

mapreduce hadoop classnotfound

上一篇:linux下压力CPU,内存,IO工具及效果查看命令

下一篇:python模拟队列和堆栈(列表练习)

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》