溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

發(fā)布時(shí)間:2021-12-13 10:23:49 來源:億速云 閱讀:113 作者:小新 欄目:大數(shù)據(jù)

這篇文章主要介紹了怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容,具有一定借鑒價(jià)值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。

1.簡介


由于目前版本cdsw 沒有提供修改作業(yè)數(shù)據(jù)目錄的的配置,默認(rèn)都是放在/var/lib/cdsw 目錄下,而該目錄屬于系統(tǒng)目錄,存儲(chǔ)空間比較受限,當(dāng)cdsw 中作業(yè)數(shù)據(jù)過多時(shí)就無法正常運(yùn)行,本文介紹采用軟連接的方式來實(shí)現(xiàn)給該目錄擴(kuò)容

2.系統(tǒng)環(huán)境


CDH版本:cdh 5.13.1

CM 版本:cm 5.13.1

操作系統(tǒng)版本:redhat 7.2

CDSW版本:cdsw 1.2.2

3.操作步驟

3.1.停止CDSW 服務(wù)


怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

3.2.備份并遷移數(shù)據(jù)


怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

[root@cdsw lib]# cp -p cdsw cdswbak
[root@cdsw lib]# mv /var/lib/cdsw/ /root/cdsw  
[root@cdsw lib]# ln -s  /root/cdsw /var/lib/cdsw

(可左右滑動(dòng))

PS:由于沒有多余的數(shù)據(jù)盤,這里是放在root 目錄下

軟連接建立成功后如下

怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

3.3.重啟cdsw


怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

3.4.啟動(dòng)完成后進(jìn)行測試


等待啟動(dòng)完成后登錄cdsw 進(jìn)行測試

python 作業(yè)測試正常:

怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

scala 作業(yè)測試正常:

怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

R 作業(yè)測試正常:

怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容

感謝你能夠認(rèn)真閱讀完這篇文章,希望小編分享的“怎么為CDSW的數(shù)據(jù)目錄擴(kuò)容”這篇文章對(duì)大家有幫助,同時(shí)也希望大家多多支持億速云,關(guān)注億速云行業(yè)資訊頻道,更多相關(guān)知識(shí)等著你來學(xué)習(xí)!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請(qǐng)聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI