溫馨提示×

您好，登錄后才能下訂單哦！

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

發(fā)布時(shí)間：2021-12-16 14:28:11 來(lái)源：億速云 閱讀：296 作者：iii 欄目：云計(jì)算

本篇內(nèi)容介紹了“如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境”的有關(guān)知識(shí)，在實(shí)際案例的操作過(guò)程中，不少人都會(huì)遇到這樣的困境，接下來(lái)就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧！希望大家仔細(xì)閱讀，能夠?qū)W有所成！

通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

Step 1：導(dǎo)入Spark-hadoop對(duì)應(yīng)的包，次選擇“File”–> “Project Structure” –> “Libraries”，選擇“+”，將spark-hadoop 對(duì)應(yīng)的包導(dǎo)入:

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

點(diǎn)擊“OK”確認(rèn)：

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

點(diǎn)擊“OK”:

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

IDEA工作完成后會(huì)發(fā)現(xiàn)Spark的jar包導(dǎo)入到了我們的工程中：

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

Step 2：開(kāi)發(fā)第一個(gè)Spark程序。打開(kāi)Spark自帶的Examples目錄：

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

此時(shí)發(fā)現(xiàn)內(nèi)部有很多文件，這些都是Spark給我提供的實(shí)例。

在我們的在我們的第一Scala工程的src下創(chuàng)建一個(gè)名稱為SparkPi的Scala的object：

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

此時(shí)打開(kāi)Spark自帶的Examples下的SparkPi文件：

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

我們把該文的內(nèi)容直接拷貝到IDEA中創(chuàng)建的SparkPi中：

如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境

“如何通過(guò)Spark的IDE搭建并測(cè)試Spark開(kāi)發(fā)環(huán)境”的內(nèi)容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識(shí)可以關(guān)注億速云網(wǎng)站，小編將為大家輸出更多高質(zhì)量的實(shí)用文章！

向AI問(wèn)一下細(xì)節(jié)

免責(zé)聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱：is@yisu.com進(jìn)行舉報(bào)，并提供相關(guān)證據(jù)，一經(jīng)查實(shí)，將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI
助
手