溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Linux系統(tǒng)如何安裝Sqoop

發(fā)布時間:2022-01-24 10:33:34 來源:億速云 閱讀:160 作者:小新 欄目:開發(fā)技術(shù)

這篇文章主要為大家展示了“Linux系統(tǒng)如何安裝Sqoop”,內(nèi)容簡而易懂,條理清晰,希望能夠幫助大家解決疑惑,下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“Linux系統(tǒng)如何安裝Sqoop”這篇文章吧。

Sqoop簡介:

Sqoop : SQL-to-Hadoop 用途:把關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)轉(zhuǎn)移到HDFS(Hive、Hbase)(重點(diǎn)使用的場景);Hadoop中的數(shù)據(jù)轉(zhuǎn)移到關(guān)系型數(shù)據(jù)庫中。Sqoop是java語言開發(fā)的,底層使用mapreduce。

Linux系統(tǒng)安裝Sqoop具體步驟:

安裝約定

安裝目錄為/opt/

1) 解壓

tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/

2) 重命名:

 mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha sqoop

3) 配置SQOOP_HOME到環(huán)境變量中

vim /etc/profile.d/hadoop-etc.sh

export SQOOP_HOME=/opt/sqoop

export PATH=SQOOP_HOME/bin

4) 讓配置生效: source /etc/profile.d/hadoop-etc.sh

5) 復(fù)制并重命名配置文件$SQOOP_HOME/conf/ sqoop-env-template.sh

cp sqoop-env-template.sh sqoop-env.sh

6) 配置$SQOOP_HOME/conf/sqoop-env.sh

 export HADOOP_COMMON_HOME=/opt/hadoop

 export HBASE_HOME=/opt/hbase

 export HIVE_HOME=/opt/hive

 export ZOOCFGDIR=/opt/zookeeper/conf

注意:因?yàn)镾QOOP要連接rdbms,所以需要將該數(shù)據(jù)的驅(qū)動jar包添加進(jìn)sqoop的classpath中,所以將mysql的jar包上傳至$SQOOP_HONE/lib,

7) SQOOP安裝驗(yàn)證

執(zhí)行命令sqoop list-databases –connect jdbc:mysql://ip:3306/test –username root –password 123456 ,顯示mysql數(shù)據(jù)庫中所有庫名稱。

以上是“Linux系統(tǒng)如何安裝Sqoop”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習(xí)更多知識,歡迎關(guān)注億速云行業(yè)資訊頻道!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI