溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Spark中yarn-site.xml的最小化怎么配置

發(fā)布時間:2021-12-16 14:24:35 來源:億速云 閱讀:172 作者:iii 欄目:云計算

這篇文章主要講解了“Spark中yarn-site.xml的最小化怎么配置”,文中的講解內(nèi)容簡單清晰,易于學習與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學習“Spark中yarn-site.xml的最小化怎么配置”吧!

修改配置文件slaves,如下所示:

Spark中yarn-site.xml的最小化怎么配置

我們設置Hadoop集群中的從節(jié)點為SparkWorker1和SparkWorker2,把slaves文件的內(nèi)容修改為:

Spark中yarn-site.xml的最小化怎么配置

修改配置文件core-site.xml,如下所示:

Spark中yarn-site.xml的最小化怎么配置

把core-site.xml文件的內(nèi)容修改為:

Spark中yarn-site.xml的最小化怎么配置

上述是core-site.xml文件的最小化配置

修改配置文件hdfs-site.xml,如下所示:

Spark中yarn-site.xml的最小化怎么配置

把hdfs-site.xml文件的內(nèi)容修改為:

Spark中yarn-site.xml的最小化怎么配置

上述是hdfs-site.xml文件的最小化配置

修改配置文件mapred-site.xml,如下所示:

拷貝一份mapred-site.xml.template命名為mapred-site.xml,打開mapred-site.xml 

Spark中yarn-site.xml的最小化怎么配置

把mapred-site.xml文件的內(nèi)容修改為:

Spark中yarn-site.xml的最小化怎么配置

上述是mapred-site.xml最小化配置

修改配置文件yarn-site.xml,如下所示:

Spark中yarn-site.xml的最小化怎么配置

把yarn-site.xml的內(nèi)容修改為:

Spark中yarn-site.xml的最小化怎么配置

感謝各位的閱讀,以上就是“Spark中yarn-site.xml的最小化怎么配置”的內(nèi)容了,經(jīng)過本文的學習后,相信大家對Spark中yarn-site.xml的最小化怎么配置這一問題有了更深刻的體會,具體使用情況還需要大家實踐驗證。這里是億速云,小編將為大家推送更多相關知識點的文章,歡迎關注!

向AI問一下細節(jié)

免責聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權請聯(lián)系站長郵箱:is@yisu.com進行舉報,并提供相關證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權內(nèi)容。

AI