溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Hadoop學(xué)習(xí)--設(shè)置配置文件參數(shù)列出目錄結(jié)構(gòu)--day04

發(fā)布時間:2020-08-07 11:37:38 來源:網(wǎng)絡(luò) 閱讀:406 作者:zhicx 欄目:大數(shù)據(jù)

import java.io.ByteArrayOutputStream;

import java.io.FileInputStream;

import java.io.FileOutputStream;

import java.io.InputStream;

import java.net.URL;


import org.apache.hadoop.conf.Configuration;

import org.apache.hadoop.fs.FSDataInputStream;

import org.apache.hadoop.fs.FSDataOutputStream;

import org.apache.hadoop.fs.FileStatus;

import org.apache.hadoop.fs.FileSystem;

import org.apache.hadoop.fs.FsUrlStreamHandlerFactory;

import org.apache.hadoop.fs.Path;

import org.apache.hadoop.io.IOUtils;

import org.junit.Test;


public class listfilestrcutor {


/**

* 列出文件目錄結(jié)構(gòu)

*/

@Test

public void listNum() throws Exception {

//創(chuàng)建configuration對象,有個默認(rèn)的加載順序,先從core-default.xml,再到src目錄中的文件,這里

//我們給定了

        Configuration conf = new Configuration();

        //修改當(dāng)前文件的副本數(shù)量

        conf.set("dfs.replication", "4");

        //修改當(dāng)前文件的塊大小

        conf.set("dfs.blocksize", "20480");

        FileSystem fs = FileSystem.get(conf);

        //定義一個URL的字符串

        String file = "hdfs://hadoop01:9000/user/hadoop";

        //通過一個URL的字符串構(gòu)建一個path對象

        Path path = new Path(file);

        FileStatus[] fst = fs.listStatus(path);

        for(FileStatus fst0 : fst) {

        System.out.println(fst0.getPath() + ": isFile() =" + fst0.isFile());

        }

   }

}


向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI