溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

namenode中format的使用方法

發(fā)布時間:2020-05-25 21:55:11 來源:億速云 閱讀:378 作者:鴿子 欄目:大數(shù)據(jù)

namenode主要被用來管理整個分布式文件系統(tǒng)的命名空間(實(shí)際就是目錄和文件)的元數(shù)據(jù)信息,同時為了保證數(shù)據(jù)的可靠性,還加入了操作日志,這些數(shù)據(jù)會保存到(持久化)本地文件系統(tǒng)中

第一次使用HDFS,先要 - format

在namenode節(jié)點(diǎn)上有兩個重要的路徑,分別用來存儲元數(shù)據(jù)操作日志,這兩個路徑來自配置文件,對應(yīng)的屬性分別是dfs.name.dir和dfs.name.edits.dir,默認(rèn)的路徑都是/tmp/hadoop/dfs/name ,  format的時候先清空目錄下的文件,之后創(chuàng)建:

(不同版本下的默認(rèn)path是否一樣,需要具體版本具體看待,我這個摘抄的也不知對方指的是哪個版本:

在dfs.name.dir下:
{dfs.name.dir}/current/fsimage  
{dfs.name.dir}/current/fstime  
{dfs.name.dir}/current/VERSION  
{dfs.name.dir}/image/fsimage

在dfs.name.edits.dir下:
{dfs.name.edits.dir}/current/edits  
{dfs.name.edits.dir}/current/fstime  
{dfs.name.edits.dir}/current/VERSION  
{dfs.name.edits.dir}/image/fsimage

fsimage:存儲命名空間(實(shí)際上就是目錄和文件)的元數(shù)據(jù)信息
edits:用來存儲對命名空間操作的日志信息,實(shí)現(xiàn)NameNode節(jié)點(diǎn)的恢復(fù);
fstime:用來存儲元數(shù)據(jù)上一次check point 的時間;
VERSION:用來存儲NameNode版本信息,命名空間ID(版本號)

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI