#

大數(shù)據(jù)

  • Spark筆記整理(四):Spark RDD算子實(shí)戰(zhàn)

    [TOC] Spark算子概述 RDD:彈性分布式數(shù)據(jù)集,是一種特殊集合、支持多種來源、有容錯(cuò)機(jī)制、可以被緩存、支持并行操作,一個(gè)RDD代表多個(gè)分區(qū)里的數(shù)據(jù)集。 RDD有兩種操作算子: T

    作者:xpleaf
    2020-07-14 14:31:14
  • 大數(shù)據(jù)需要學(xué)習(xí)什么?

    大數(shù)據(jù)需要學(xué)習(xí)什么?很多人問過我這個(gè)問題。每一次回答完都覺得自己講得太片面了,總是沒有一個(gè)合適的契機(jī)去好好總結(jié)這些內(nèi)容,直到開始寫這篇東西。大數(shù)據(jù)是近五年興起的行業(yè),發(fā)展迅速,很多技術(shù)經(jīng)過這些年的迭代

    作者:白金大數(shù)據(jù)
    2020-07-14 13:10:36
  • MapReduce的思想

    項(xiàng)目實(shí)戰(zhàn)案例:搜狗日志查詢分析 數(shù)據(jù): 一、電商大數(shù)據(jù)平臺整體架構(gòu)1、大數(shù)據(jù)(Hadoop、Spark、Hive)都是一種數(shù)據(jù)倉庫的實(shí)現(xiàn)方式核心問題:數(shù)據(jù)存儲、數(shù)據(jù)計(jì)算什么是數(shù)據(jù)倉庫?傳統(tǒng)的解決大數(shù)據(jù)

    作者:哈斗篷
    2020-07-14 12:48:28
  • Spark bind on port 0. Attempting port 1 問題解決

    Linux 下運(yùn)行spark local bind on port 0. Attempting port 1 問題2016-11-01&nb

    作者:去買大白兔
    2020-07-14 12:22:19
  • 5、Scala模式匹配

    一、case class    用case修飾的Class 我們稱之為Case Class。編譯器看到這個(gè)case修飾的class,會為這個(gè)class加一些額外

    作者:寬哥記事
    2020-07-14 08:12:19
  • 爬蟲涉及的知識體系

    一爬蟲的定義:所謂爬蟲就是指:可以獲取網(wǎng)頁信息的程序又分為通用爬蟲和聚焦爬蟲1)通用爬蟲:從互聯(lián)網(wǎng)中搜集網(wǎng)頁,采集信息,這些網(wǎng)頁信息用于為搜索引擎建立索引從而提供支持,它決定著整個(gè)引擎系統(tǒng)的內(nèi)容是否豐

    作者:提著筆記本
    2020-07-14 05:53:56
  • 大數(shù)據(jù)開發(fā)過程中常用的分析軟件

    大數(shù)據(jù)開發(fā)過程中常用的分析軟件大數(shù)據(jù)研究的出現(xiàn),為企業(yè)、研究機(jī)構(gòu)、政府決策提供了新的行之有效思路和手段,想要做好大數(shù)據(jù)的管理和分析,一些大數(shù)據(jù)開發(fā)工具的使用是必不可少的,以下是大數(shù)據(jù)開發(fā)過程中常用的工

    作者:mo默羽
    2020-07-14 04:37:11
  • Spark Streaming筆記整理(三):DS的transformation與output操作

    [TOC] DStream的各種transformation Transformation Meaning map(func) 對DStream中的各個(gè)元素進(jìn)行func函數(shù)操作,然后返回一個(gè)新

    作者:xpleaf
    2020-07-14 00:43:01
  • 帶領(lǐng)大家淺談如何學(xué)習(xí)大數(shù)據(jù)

    最近幾年,大數(shù)據(jù)火了起來,吸引著越來越多的人加入到學(xué)習(xí)大數(shù)據(jù)的隊(duì)伍之中,其中0基礎(chǔ)的小白也有不少,甚至有的連編程語言不太了解,所以說有些同學(xué)就對自己失去了信心,認(rèn)為自己學(xué)習(xí)不了大數(shù)據(jù),那么這肯定是錯(cuò)誤

    作者:a大數(shù)據(jù)
    2020-07-13 20:47:15
  • 大數(shù)據(jù)培訓(xùn)后好就業(yè)嗎?

    大數(shù)據(jù)培訓(xùn)好就業(yè)嗎? 大數(shù)據(jù)的本質(zhì)是從一堆雜亂無章的數(shù)據(jù)中分析出有價(jià)值的信息,能夠?yàn)檎?、企業(yè)、科研機(jī)構(gòu)等決策提供依據(jù)。近年來,大數(shù)據(jù)行業(yè)發(fā)展勢頭迅猛,國家政府層面大力扶持,想轉(zhuǎn)行學(xué)習(xí)大數(shù)據(jù)的人員也很

    作者:mo默芯
    2020-07-13 16:02:36