#

spark 大數(shù)據(jù) hadoop yar

  • spark-yarn 模式 jar包優(yōu)化

    在yarn模式下，會(huì)上傳jar包到y(tǒng)arn來(lái)執(zhí)行spark程序，如果每次都上傳，很耗時(shí)間，而且如果是阿里云的機(jī)器，上傳很慢，180m的jar要上傳十幾分鐘，所以要提前上傳到hdfs中去。spark支持

    作者：去買(mǎi)大白兔
    2020-06-28 07:48:11