#

hdfs

  • RDBMS數(shù)據(jù)定時(shí)采集到HDFS

    [toc] RDBMS數(shù)據(jù)定時(shí)采集到HDFS 前言 其實(shí)并不難，就是使用sqoop定時(shí)從MySQL中導(dǎo)入到HDFS中，主要是sqoop命令的使用和Linux腳本的操作這些知識。 場景 在我們的場景中

    作者：xpleaf
    2020-06-17 20:08:27

  • hdfs namenode HA高可用方案

    2019/2/18 星期一 hdfs namenode HA高可用方案 1、hadoop-ha 集群運(yùn)作機(jī)制介紹所謂HA，即高可用（7*24 小時(shí)不中斷服務(wù)） //hadoop 2.x 內(nèi)置了

    作者：馬吉輝
    2020-06-17 00:31:58

  • Hadoop學(xué)習(xí)--AP讀取HDFS數(shù)據(jù)--day04

    import java.io.ByteArrayOutputStream;import java.io.InputStream;import java.net.URL;import org.apach

    作者：zhicx
    2020-06-16 13:36:38

  • hdfs-site.xml配置

    1.hadoop的hdfs-site.xml的配置內(nèi)容如下         &

    作者：素顏豬
    2020-06-16 09:12:04

  • Hadoop Secondarynamenode原理

    namenode的文件存儲namenode數(shù)據(jù)存儲分為兩個(gè)文件，fsp_w_picpath與edits文件，edits文件記錄了所有namenode的操作，相當(dāng)于日志記錄。fsp_w_picpath記

    作者：史龍剛
    2020-06-15 19:29:32

  • hive-exec-*/.jar

    啟動(dòng)hive報(bào)錯(cuò)：Missing Hive Execution Jar: /home/hadoop/local/hbase-2.1.0/lib/hive-exec-*.jar相關(guān)jar包下載鏈接htt

    作者：CARYFLASH
    2020-06-13 13:19:33

  • 深度理解HDFS架構(gòu)

    深入理解HDFS架構(gòu) 副本存放： 優(yōu)化的副本存放策略是HDFS區(qū)分其他分布式系統(tǒng)的重要特性。HDFS采用機(jī)架感知策略 來

    作者：Lizikunn
    2020-06-13 10:36:23

  • Flume-1.6.0學(xué)習(xí)筆記（五）sink到hdfs

    魯春利的工作筆記，誰說程序員不能有文藝范？Flume從指定目錄讀取數(shù)據(jù)，通過memory作為channel，然后講數(shù)據(jù)寫入到hdfs。Spooling Directory Source（http://

    作者：luchunli1985
    2020-06-13 02:48:46

  • Java操作HDFS開發(fā)環(huán)境搭建以及HDFS的讀寫流程

    Java操作HDFS開發(fā)環(huán)境搭建 在之前我們已經(jīng)介紹了如何在Linux上進(jìn)行HDFS偽分布式環(huán)境的搭建，也介紹了hdfs中一些常用的命令。但是要如何在代碼層面進(jìn)行操作呢？這是本節(jié)將要介紹的內(nèi)容： 1.

    作者：ZeroOne01
    2020-06-13 00:02:19

  • Hadoop HDFS： the directory item limit is exceed: limit=1048576問題的解決

    問題描述：1.文件無法寫入hadoop hdfs文件系統(tǒng)；2.hadoop namenode日志記錄 the directory item limit 

    作者：YU文武貝
    2020-06-12 10:31:54
< 上一頁
下一頁>