溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

發(fā)布時(shí)間:2020-10-07 11:11:10 來源:腳本之家 閱讀:732 作者:夢嵐如雪 欄目:編程語言

Intellij是進(jìn)行scala開發(fā)的一個(gè)非常好用的工具,可以非常輕松查看scala源碼,當(dāng)然用它來開發(fā)Java也是很爽的,之前一直在用scala ide和eclipse,現(xiàn)在換成intellij簡直好用到飛起,但是有些人不知道怎么用intellij去創(chuàng)建一個(gè)spark項(xiàng)目,這里介紹兩種

1、選擇File->new Project->Java->Scala,這里scala版本是2.11.8

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

2 .之后一路點(diǎn)擊next,直到finish,創(chuàng)建完的項(xiàng)目見下圖,這時(shí)候已經(jīng)可以創(chuàng)建scala文件了,接下來就可以添加spark相關(guān)的jar包了,從官網(wǎng)下載http://spark.apache.org/downloads.html,我這里用的是spark-2.2.1-bin-hadoop2.7,你可以根據(jù)自己需要選擇相應(yīng)的版本,下載完壓縮包后解壓

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

3 . 選擇File->Project Structure->Libraries,點(diǎn)擊+,選擇Java,選擇之前下載的spark2.2-hadoop2.7解壓后的jars文件夾,將該文件夾下的jar包全部引進(jìn)該項(xiàng)目,見下圖

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

4 . 之后在libraries中點(diǎn)擊+,選擇scala sdk,這里選擇系統(tǒng)版本的scala,為2.11.8版本,添加見下圖

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

5 . 添加完畢后Project Structure類似于下面這種格式

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

6 .現(xiàn)在該項(xiàng)目有了spark的jar和scala的sdk,之后創(chuàng)建一個(gè)scala文件進(jìn)行測試,代碼及運(yùn)行結(jié)果見下圖

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式 

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

7 .出現(xiàn)上面這些內(nèi)容表明Intellij創(chuàng)建spark項(xiàng)目成功,總結(jié)一下這種方式需要引入scala sdk以及spark的jar包,還有另外一種方式是見下圖,選擇File->New Project->Scala->IDEA,選擇next

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

8 .之后指定項(xiàng)目名稱和項(xiàng)目所處位置,點(diǎn)擊finish,創(chuàng)建項(xiàng)目

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

9 .這時(shí)候創(chuàng)建的項(xiàng)目如下,這種情況下可以直接右鍵new 創(chuàng)建scala文件,不需要在額外添加scala sdk

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

10 .接下來的操作和上面那種一樣,添加spark jar包即可,添加完后測試一下

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式 

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

11 .成功輸出,表明Intellij創(chuàng)建spark項(xiàng)目成功,當(dāng)然前提是intellij安裝了scala插件,在File->Settings->Plugins,搜索scala,根據(jù)查找的結(jié)果進(jìn)行安裝后重啟intellij即可,下圖是我已經(jīng)安裝好的

詳解IntelliJ IDEA創(chuàng)建spark項(xiàng)目的兩種方式

以上就是兩種創(chuàng)建spark項(xiàng)目的方式,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持億速云。

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI