溫馨提示×
您好，登錄后才能下訂單哦！
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》
您好，登錄后才能下訂單哦！
這篇文章主要為大家展示了“hadoop如何解決discp不同版本間拷貝數(shù)據(jù)的問題”，內(nèi)容簡而易懂，條理清晰，希望能夠幫助大家解決疑惑，下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“hadoop如何解決discp不同版本間拷貝數(shù)據(jù)的問題”這篇文章吧。
hadoop discp 的時候遇到的checksum mismatch問題
解決方法
網(wǎng)上普遍解決方法
在hdfs-site.xml
將dfs.checksum.type屬性設(shè)置為CRC32
使用過程中仍然有報(bào)上述錯誤
經(jīng)檢驗(yàn) 參照 http://blog.sina.com.cn/s/blog_7ed002b30101kk08.html
使用 -update -skipcrccheck 選項(xiàng)即可。
hadoop distcp -update -skipcrccheck hftp://host:50070/文件 /路徑
以上是“hadoop如何解決discp不同版本間拷貝數(shù)據(jù)的問題”這篇文章的所有內(nèi)容，感謝各位的閱讀！相信大家都有了一定的了解，希望分享的內(nèi)容對大家有所幫助，如果還想學(xué)習(xí)更多知識，歡迎關(guān)注億速云行業(yè)資訊頻道！
免責(zé)聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀點(diǎn)不代表本網(wǎng)站立場，如果涉及侵權(quán)請聯(lián)系站長郵箱：is@yisu.com進(jìn)行舉報(bào)，并提供相關(guān)證據(jù)，一經(jīng)查實(shí)，將立刻刪除涉嫌侵權(quán)內(nèi)容。
億速云公眾號
手機(jī)網(wǎng)站二維碼
