溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

TODO如何模擬namenode崩潰并恢復(fù)

發(fā)布時(shí)間:2021-12-30 10:41:02 來源:億速云 閱讀:139 作者:小新 欄目:云計(jì)算

這篇文章主要為大家展示了“TODO如何模擬namenode崩潰并恢復(fù)”,內(nèi)容簡而易懂,條理清晰,希望能夠幫助大家解決疑惑,下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“TODO如何模擬namenode崩潰并恢復(fù)”這篇文章吧。

TODO: 還有沒搞清楚的地方。

1、為了方便演示,先做好namenode檢查點(diǎn)的配置。見控制namenode檢查點(diǎn)發(fā)生的頻率。

2、啟動(dòng)hadoop,保證所有節(jié)點(diǎn)都正常。

3、將namenode節(jié)點(diǎn)上dfs.name.dir 指定目錄(即 name 目錄)中的內(nèi)容全部刪除,以模擬故障發(fā)生情況。

4、關(guān)閉hadoop,jps查看,發(fā)現(xiàn)namenode沒有啟動(dòng)成功。

  • 查看namenode節(jié)點(diǎn)的$HADOOOP_HOME/logs/目錄下namenode的日志,發(fā)現(xiàn)異常:java.io.IOException: NameNode is not formated。

  • 同時(shí),查看hdfs上的目錄及文件情況,ls后發(fā)現(xiàn)報(bào)錯(cuò)

5、關(guān)閉hadoop,重新格式化namenode

6、進(jìn)入namenode節(jié)點(diǎn)的上dfs.name.dir 指定目錄(即 name 目錄),發(fā)現(xiàn)已經(jīng)生成了新的內(nèi)容。編輯current中的VERSION。將namespaceID的值改為集群中任一datanode中的namespaceID(即原來的值)

7、刪除current中新生成的fsimage

8、將secondarynamenode的fsimage拷貝過來。

注意:我拷貝的是namesecondary/image/目錄下的。網(wǎng)上有資料說是namesecondary/current下的,但我的current中并沒有內(nèi)容。

9、啟動(dòng)hadoop

10、啟動(dòng)完畢發(fā)現(xiàn)一切正常了。

以上是“TODO如何模擬namenode崩潰并恢復(fù)”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習(xí)更多知識,歡迎關(guān)注億速云行業(yè)資訊頻道!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI