溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

ubuntu 1604搭建hdp2.4 Hadoop

發(fā)布時(shí)間:2020-07-11 19:33:19 來源:網(wǎng)絡(luò) 閱讀:2300 作者:hiubuntu 欄目:大數(shù)據(jù)

首先參考離線安裝版教程:

http://www.jianshu.com/p/debf0e6a3f3b

里面說的是針對(duì)ubuntu1404版本,但是1604也可以裝。


    在迅雷上下載后拷貝至服務(wù)器中,按照教程走,起http服務(wù)器,建本地源,apt-get install ambari-server。

    這些都很容易,但是在ambari-server setup開始就有一些需要自己手動(dòng)設(shè)置的,當(dāng)然你一路回車默認(rèn)他會(huì)幫你下載oraclejdk,用postgresql也很簡單,但是如果你作死想用自己的mysql和jdk就有點(diǎn)蛋疼了。

1、首先要在數(shù)據(jù)庫中給它建用戶ambari和數(shù)據(jù)庫ambari;

CREATE USER  'ambari'@'localhost'  IDENTIFIED BY 'password';

 UPDATE user SET password=PASSWORD("bigdata") WHERE user='ambari';

Grant all on *.* to 'ambari'@'%' identified by "pass";

flush privileges;

create database ambari;



2、然后按setup中的提示來,選擇jdk路徑(其實(shí)如果你嫌它命令行下jdk慢,也可以手動(dòng)復(fù)制它地址在迅雷中下好在拷貝過來)和mysql,選完mysql后他會(huì)要裝java-odbc

apt-get install libmysql-java

然后他會(huì)要你執(zhí)行/var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql

登進(jìn)數(shù)據(jù)庫source下即可,但是會(huì)有key過長的報(bào)錯(cuò),“ERROR 1071 (42000) at line 434 in file: '/var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql': Specified key was too long; max key length is 767 bytes”

不知道有沒有問題。。

更新:果然在啟動(dòng)ambari之后報(bào)表沒找到失敗了。。

解決:

因?yàn)槲矣玫陌姹咀址莡tf-8(3byte一個(gè)字符)的編碼,mysql也是用的這個(gè),但是ambari是國外的。。默認(rèn)是gbk2312(2byte一個(gè)字符)或者是latin1(1byte一個(gè)字符),然后會(huì)vchar設(shè)置的會(huì)很大,在不改他的sql腳本情況下,把自己的數(shù)據(jù)改成latin1就好了。


3、setup執(zhí)行success之后,就可以ambari-server start,可惜還是有報(bào)錯(cuò),

報(bào)錯(cuò):ambari com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure

link failure如果沒有問題的話就是要把mysql的配置文件my.cnf中的地址打開127.0.0.1改成0.0.0.0,重啟解決。

又遇到新的原因,是hosts里面的主機(jī)名沒有改好,改正之后就可以了。。


4、然后我還遇到了ambari access deny的報(bào)錯(cuò),在數(shù)據(jù)庫中把a(bǔ)mbari密碼改了一下,這次start終于成功。。。


5、現(xiàn)在就可以進(jìn)入web頁面開始安裝配置節(jié)點(diǎn)組建。

0824更新:

在最后一步開始部署組建的時(shí)候他會(huì)檢查你當(dāng)前的os版本,這是個(gè)巨大的坑,我用的辦法是

vim /usr/lib/ambari-agent/lib/ambari_commons/os_check.py

在return distribution之前添加這句

distribution = ('Ubuntu', '14.04', 'trusty')

然后就可以一路暢通了。。。

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI