Storm常見(jiàn)問(wèn)題及解決方案是什么

這篇文章將為大家詳細(xì)講解有關(guān)Storm常見(jiàn)問(wèn)題及解決方案是什么，文章內(nèi)容質(zhì)量較高，因此小編分享給大家做個(gè)參考，希望大家閱讀完這篇文章后對(duì)相關(guān)知識(shí)有一定的了解。

1、storm集群配置JDK環(huán)境變量問(wèn)題

問(wèn)題分析：在linux系統(tǒng)下配置JDK后一般修改/etc/profile值進(jìn)行環(huán)境變量配置，但是安裝storm集群時(shí)會(huì)出現(xiàn)問(wèn)題

問(wèn)題解決：需要在/etc/.bashrc文件中也加入環(huán)境變量不然安裝的JDK無(wú)法使用。

2、supervisor相關(guān)問(wèn)題

1)安裝后supervisor名稱(chēng)相同并且啟動(dòng)報(bào)錯(cuò)問(wèn)題

問(wèn)題分析：supervisor.cji中有行代碼如下：

此代碼是在啟動(dòng)supervisor時(shí)會(huì)找本機(jī)的hostname。

問(wèn)題解決：修改每天機(jī)器的hostname與其相對(duì)應(yīng)即可。

2)啟動(dòng)Supervisor 時(shí)，出現(xiàn)java.lang.UnsatisfiedLinkError異常

具體錯(cuò)誤信息如下：

啟動(dòng)Supervisor 時(shí)，出現(xiàn)java.lang.UnsatisfiedLinkError:
/usr/local/lib/libjzmq.so.0.0.0: libzmq.so.1: cannot open shared object
file: No such file or directory 異常。

問(wèn)題分析：未找到zmq 動(dòng)態(tài)鏈接庫(kù)。

問(wèn)題解決1：配置環(huán)境變量 export LD_LIBRARY_PATH=/usr/local/lib

問(wèn)題解決2：編輯/etc/ld.so.conf 文件，增加一行：/usr/local/lib，再次執(zhí)行即可

使用sudo ldconfig 命令，重啟Supervisor

3、發(fā)布topologies時(shí)，序列化log4j.Logger異常

問(wèn)題分析：日志系統(tǒng)無(wú)法正確正確處理序列化操作

問(wèn)題解決：使用slf4j替換log4j日志jar包處理

4、提交topology時(shí)出現(xiàn)如下異常：

Exception in thread "main" java.lang.IllegalArgumentException: xxx host is not set 
        at backtype.storm.utils.NimbusClient.<init>(NimbusClient.java:30) 
        at backtype.storm.utils.NimbusClient.getConfiguredClient(NimbusClient.java:17) 
        at backtype.storm.StormSubmitter.submitJar(StormSubmitter.java:78) 
        at backtype.storm.StormSubmitter.submitJar(StormSubmitter.java:71) 
        at backtype.storm.StormSubmitter.submitTopology(StormSubmitter.java:50)

問(wèn)題分析：?jiǎn)?dòng)nimbus沒(méi)有問(wèn)題，異常原因是conf_dir路徑設(shè)置錯(cuò)誤

問(wèn)題解決：修改bin/storm腳本，增加如下代碼：

CONF_DIR = STORM_DIR + "/conf"

5、在使用storm0.7一下版本時(shí)，時(shí)間長(zhǎng)會(huì)出現(xiàn)outofmenmory

問(wèn)題分析：低于storm0.7版本的沒(méi)觸發(fā)一個(gè)tuple會(huì)創(chuàng)建一個(gè)hashmap存儲(chǔ)該tuple所在的消息樹(shù)結(jié)構(gòu)，長(zhǎng)時(shí)間會(huì)給gc造成巨大的壓力導(dǎo)致出現(xiàn)outofmemory

問(wèn)題解決：升級(jí)storm版本即可解決問(wèn)題。

6、storm連接mysql數(shù)據(jù)庫(kù)報(bào)異常

連接遠(yuǎn)程mysql數(shù)據(jù)庫(kù)時(shí)報(bào)如下錯(cuò)誤：

message from server:"Host FILTER" is not allowed to connect to this MySQL server

問(wèn)題分析：可能是沒(méi)有給其IP訪問(wèn)Mysql數(shù)據(jù)庫(kù)權(quán)限導(dǎo)致

問(wèn)題解決：登錄mysql數(shù)據(jù)庫(kù)，執(zhí)行如下命令：

grant all on *.* to root@'%' identified by "123456";

此操作是給任意IP地址賦予訪問(wèn)權(quán)限（命令中*.*是通配任何IP，可指定IP 用戶(hù)名：root 密碼：123456）

關(guān)于Storm常見(jiàn)問(wèn)題及解決方案是什么就分享到這里了，希望以上內(nèi)容可以對(duì)大家有一定的幫助，可以學(xué)到更多知識(shí)。如果覺(jué)得文章不錯(cuò)，可以把它分享出去讓更多的人看到。