溫馨提示×

溫馨提示×

您好，登錄后才能下訂單哦！

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

namenode gc故障及解決辦法記錄

發(fā)布時間：2020-07-15 01:11:42 來源：網(wǎng)絡(luò) 閱讀：659 作者：wx5b10a81d5bb2f 欄目：大數(shù)據(jù)

問題：
WARN org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager: Waited 19016 ms (timeout=20000 ms) for a response for sendEdits. Succeeded so far: [10.80.248.17:8486]

namenode gc overhead limit exceeded
原因：
1，網(wǎng)絡(luò)原因-檢查正常，如果延誤可設(shè)置 hdfs-site.xml dfs.qjournal.write-txns.timeout.ms=60000
2，JVM GC的原因，分析可能集群運行久了，元數(shù)據(jù)信息增長導(dǎo)致超過內(nèi)存配置，一般JVM都有內(nèi)存限制；
查找發(fā)現(xiàn) 默認(rèn)namenode內(nèi)存的大小為1000M
修改：hadoop-env.sh
export HADOOP_HEAPSIZE=20
啟動namenode正常使用。

向AI問一下細(xì)節(jié)

免責(zé)聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀點不代表本網(wǎng)站立場，如果涉及侵權(quán)請聯(lián)系站長郵箱：is@yisu.com進(jìn)行舉報，并提供相關(guān)證據(jù)，一經(jīng)查實，將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI
助
手