溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Apache Storm集群如何配置

發(fā)布時間:2021-12-07 14:30:29 來源:億速云 閱讀:172 作者:小新 欄目:云計算

這篇文章主要介紹Apache Storm集群如何配置,文中介紹的非常詳細(xì),具有一定的參考價值,感興趣的小伙伴們一定要看完!

我們使用如下三臺機器搭建Storm集群,此文檔在我們已經(jīng)安裝了zookeeper集群、JDK的前提下有效

192.168.1.96
192.168.1.45
192.168.1.34

下面操作在不說明的情況下都是在96這臺機器上做的操作

安裝配置

首先下載解壓

wget http://mirrors.noc.im/apache/storm/apache-storm-1.0.0/apache-storm-1.0.0.tar.gz  
tar xzvf  apache-storm-1.0.0.tar.gz  
cd apache-storm-1.0.0

其次編輯conf/storm.yaml文件

Apache Storm集群如何配置

1) storm.zookeeper.servers: storm集群使用的zk集群地址,如果zk使用的不是默認(rèn)2181的端口,那么我們還要增加 storm.zookeeper.port的配置項 
2) storm.local.dir 用于存儲少量數(shù)據(jù),需要我們提前創(chuàng)建好目錄   
3) nimbus.seeds 讓工作節(jié)點知道哪個是nimbus以便下載topology的jar和conf  
4) supervisor.slots.ports 對于每個Supervisor工作節(jié)點,需要配置該工作節(jié)點可以運行的worker數(shù)量。
每個worker占用一個單獨的端口用于接收消息,該配置選項即用于定義哪些端口是可被worker使用的。
默認(rèn)情況下,每個節(jié)點上可運行4個workers,分別在6700、6701、6702和6703端口 
5)這里的cluster1對應(yīng)96,cluster2對應(yīng)45,cluster3對應(yīng)34機器,剛開始的時候我這里都是直接寫的ip,
但是storm ui起來之后發(fā)現(xiàn)如下情況,都是localhost而且nimbus里面有兩個,如下圖

Apache Storm集群如何配置6) 如何將ip和cluster1、cluster2、cluster3對應(yīng)起來呢,我們需要配置機器的hosts和hostname,拿96這臺機器來舉例: Apache Storm集群如何配置

Apache Storm集群如何配置

同步storm到其他機器上

scp -r apache-storm-1.0.0/ 192.168.1.45:/data/strawbird/apache-storm-1.0.0
scp -r apache-storm-1.0.0/ 192.168.1.34:/data/strawbird/apache-storm-1.0.0

啟動

在主節(jié)點也就是96這臺機器上啟動Nimbus,在從節(jié)點也就是45和34這兩臺機器上啟動Supervisor服務(wù)
bin/storm nimbus &
bin/storm supervisor &
在主節(jié)點上啟動storm ui,經(jīng)測試storm ui在supervisor節(jié)點上啟動之后訪問URL: http://xxx.xxx.xxx:8080不能正確顯示
bin/storm ui &
起來之后我們就可以看到如下截圖,這就是正常了

Apache Storm集群如何配置

以上是“Apache Storm集群如何配置”這篇文章的所有內(nèi)容,感謝各位的閱讀!希望分享的內(nèi)容對大家有幫助,更多相關(guān)知識,歡迎關(guān)注億速云行業(yè)資訊頻道!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI