溫馨提示×

您好，登錄后才能下訂單哦！

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶(hù)服務(wù)條款》

如何在Spark SQL中讀取JSON文件

發(fā)布時(shí)間：2021-12-14 15:06:29 來(lái)源：億速云 閱讀：389 作者：柒染 欄目：互聯(lián)網(wǎng)科技

如何在Spark SQL中讀取JSON文件，很多新手對(duì)此不是很清楚，為了幫助大家解決這個(gè)難題，下面小編將為大家詳細(xì)講解，有這方面需求的人可以來(lái)學(xué)習(xí)下，希望你能有所收獲。

val path ="/root/temp/people.json"

  • 讀取Json文件，生成DataFrame：

1
val peopleDF = spark.read.json(path)

  • 打印Schema結(jié)構(gòu)信息

1
peopleDF.printSchema()

 如何在Spark SQL中讀取JSON文件

  • 創(chuàng)建臨時(shí)視圖

1
peopleDF.createOrReplaceTempView("people")

  • 執(zhí)行查詢(xún)

1
spark.sql("SELECT name FROM people WHERE age=19").show

 如何在Spark SQL中讀取JSON文件

看完上述內(nèi)容是否對(duì)您有幫助呢？如果還想對(duì)相關(guān)知識(shí)有進(jìn)一步的了解或閱讀更多相關(guān)文章，請(qǐng)關(guān)注億速云行業(yè)資訊頻道，感謝您對(duì)億速云的支持。

向AI問(wèn)一下細(xì)節(jié)

免責(zé)聲明：本站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享為主，文章觀(guān)點(diǎn)不代表本網(wǎng)站立場(chǎng)，如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱：is@yisu.com進(jìn)行舉報(bào)，并提供相關(guān)證據(jù)，一經(jīng)查實(shí)，將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI
助
手