溫馨提示×

您好，登錄后才能下訂單哦！

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

Hadoop和Spark中怎么設(shè)置用戶訪問(wèn)hdfs

發(fā)布時(shí)間：2021-06-22 16:48:28 來(lái)源：億速云 閱讀：747 作者：Leah 欄目：編程語(yǔ)言

本篇文章為大家展示了Hadoop和Spark中怎么設(shè)置用戶訪問(wèn)hdfs，內(nèi)容簡(jiǎn)明扼要并且容易理解，絕對(duì)能使你眼前一亮，通過(guò)這篇文章的詳細(xì)介紹希望你能有所收獲。


1.對(duì)于hadoop而言
如果hadoop沒(méi)有啟Kerberos或者從Kerberos獲取的用戶為null，那么獲取HADOOP_USER_NAME環(huán)境變量，并將它的值作為Hadoop執(zhí)行用戶。如果我們沒(méi)有設(shè)置HADOOP_USER_NAME環(huán)境變量，那么程序?qū)⒄{(diào)用whoami來(lái)獲取當(dāng)前用戶，并用groups來(lái)獲取用戶所在組。

所以可以設(shè)置環(huán)境變量：

export HADOOP_USER_NAME=hdfs
1
或者在程序中設(shè)置：

System.setProperty("HADOOP_USER_NAME", "hdfs");
1
2.對(duì)于Spark
Spark默認(rèn)將用戶程序運(yùn)行所在系統(tǒng)的當(dāng)前登錄用戶作為用戶程序的關(guān)聯(lián)用戶。
所以可以采用一下兩種方法：
1.修改當(dāng)前用戶名為： hdfs
2.代碼中添加：

System.setProperty("user.name", "hdfs");

上述內(nèi)容就是Hadoop和Spark中怎么設(shè)置用戶訪問(wèn)hdfs，你們學(xué)到知識(shí)或技能了嗎？如果還想學(xué)到更多技能或者豐富自己的知識(shí)儲(chǔ)備，歡迎關(guān)注億速云行業(yè)資訊頻道。

向AI問(wèn)一下細(xì)節(jié)

免責(zé)聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱：is@yisu.com進(jìn)行舉報(bào)，并提供相關(guān)證據(jù)，一經(jīng)查實(shí)，將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI
助
手