八、HDFS的一致性flush

發(fā)布時間：2020-06-06 18:15:17 來源：網(wǎng)絡(luò) 閱讀：544 作者：隔壁小白欄目：大數(shù)據(jù)

一、背景

hdfs在寫入的過程中，只有完全寫入整個文件的內(nèi)容之后，對其他client才會可見，否則在寫入的過程中是不可見。如果想要立即可見，就需要一致性flush 的操作。

二、一致性flush

代碼例子：

@Test
    public void writeFile() throws Exception{
        // 1 創(chuàng)建配置信息對象
        Configuration configuration = new Configuration();
        fs = FileSystem.get(configuration);

        // 2 創(chuàng)建文件輸出流
        Path path = new Path("F:\\date\\H.txt");
        FSDataOutputStream fos = fs.create(path);

        // 3 寫數(shù)據(jù)
        fos.write("hello Andy".getBytes());
        // 4 一致性刷新
        fos.hflush();

        fos.close();
    }

方法很簡單，就是調(diào)用輸出流的 hflush() 方法，刷寫client的緩沖區(qū)，讓其他client立即可以看到寫入的內(nèi)容。一般在并發(fā)讀寫的情況下，要求多個client的數(shù)據(jù)都是一致，就會要求這點。

向AI問一下細節(jié)

八、HDFS的一致性flush

一、背景

二、一致性flush

猜你喜歡

最新資訊

相關(guān)推薦

相關(guān)標簽

八、HDFS的一致性flush

二、一致性flush