ubuntu 1604搭建hdp2.4 Hadoop

发布时间:2020-07-11 19:33:19 作者:hiubuntu
来源:网络 阅读:2311

首先参考离线安装版教程:

http://www.jianshu.com/p/debf0e6a3f3b

里面说的是针对ubuntu1404版本,但是1604也可以装。


    在迅雷上下载后拷贝至服务器中,按照教程走,起http服务器,建本地源,apt-get install ambari-server。

    这些都很容易,但是在ambari-server setup开始就有一些需要自己手动设置的,当然你一路回车默认他会帮你下载oraclejdk,用postgresql也很简单,但是如果你作死想用自己的mysql和jdk就有点蛋疼了。

1、首先要在数据库中给它建用户ambari和数据库ambari;

CREATE USER  'ambari'@'localhost'  IDENTIFIED BY 'password';

 UPDATE user SET password=PASSWORD("bigdata") WHERE user='ambari';

Grant all on *.* to 'ambari'@'%' identified by "pass";

flush privileges;

create database ambari;



2、然后按setup中的提示来,选择jdk路径(其实如果你嫌它命令行下jdk慢,也可以手动复制它地址在迅雷中下好在拷贝过来)和mysql,选完mysql后他会要装java-odbc

apt-get install libmysql-java

然后他会要你执行/var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql

登进数据库source下即可,但是会有key过长的报错,“ERROR 1071 (42000) at line 434 in file: '/var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql': Specified key was too long; max key length is 767 bytes”

不知道有没有问题。。

更新:果然在启动ambari之后报表没找到失败了。。

解决:

因为我用的版本字符是utf-8(3byte一个字符)的编码,mysql也是用的这个,但是ambari是国外的。。默认是gbk2312(2byte一个字符)或者是latin1(1byte一个字符),然后会vchar设置的会很大,在不改他的sql脚本情况下,把自己的数据改成latin1就好了。


3、setup执行success之后,就可以ambari-server start,可惜还是有报错,

报错:ambari com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure

link failure如果没有问题的话就是要把mysql的配置文件my.cnf中的地址打开127.0.0.1改成0.0.0.0,重启解决。

又遇到新的原因,是hosts里面的主机名没有改好,改正之后就可以了。。


4、然后我还遇到了ambari access deny的报错,在数据库中把ambari密码改了一下,这次start终于成功。。。


5、现在就可以进入web页面开始安装配置节点组建。

0824更新:

在最后一步开始部署组建的时候他会检查你当前的os版本,这是个巨大的坑,我用的办法是

vim /usr/lib/ambari-agent/lib/ambari_commons/os_check.py

在return distribution之前添加这句

distribution = ('Ubuntu', '14.04', 'trusty')

然后就可以一路畅通了。。。

推荐阅读:
  1. Ubuntu系统搭建单机Spark注意事项
  2. ubuntu docker怎样搭建Hadoop集群环境

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

ubuntu doop had

上一篇:spark基础-rdd特性

下一篇:IOS XML与JSON解析

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》