hbase緩存的示例發(fā)現(xiàn)

這篇文章主要為大家展示了“hbase緩存的示例發(fā)現(xiàn)”，內(nèi)容簡而易懂，條理清晰，希望能夠幫助大家解決疑惑，下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“hbase緩存的示例發(fā)現(xiàn)”這篇文章吧。

HBase上Regionserver的內(nèi)存分為兩個部分，一部分作為Memstore，主要用來寫；另外一部分作為BlockCache，主要用于讀。

寫請求會先寫入Memstore，Regionserver會給每個region提供一個Memstore，當(dāng)Memstore滿64MB以后，會啟動 flush刷新到磁盤。當(dāng)Memstore的總大小超過限制時（heapsize * hbase.regionserver.global.memstore.upperLimit * 0.9），會強(qiáng)行啟動flush進(jìn)程，從最大的Memstore開始flush直到低于限制。
讀請求先到Memstore中查數(shù)據(jù)，查不到就到BlockCache中查，再查不到就會到磁盤上讀，并把讀的結(jié)果放入BlockCache。由于BlockCache采用的是LRU策略，因此BlockCache達(dá)到上限(heapsize * hfile.block.cache.size * 0.85)后，會啟動淘汰機(jī)制，淘汰掉最老的一批數(shù)據(jù)。
一個Regionserver上有一個BlockCache和N個Memstore，它們的大小之和不能大于等于heapsize * 0.8，否則HBase不能正常啟動。

默認(rèn)配置下，BlockCache為0.2，而Memstore為0.4。在注重讀響應(yīng)時間的應(yīng)用場景下，可以將 BlockCache設(shè)置大些，Memstore設(shè)置小些，以加大緩存的命中率。

以上是“hbase緩存的示例發(fā)現(xiàn)”這篇文章的所有內(nèi)容，感謝各位的閱讀！相信大家都有了一定的了解，希望分享的內(nèi)容對大家有所幫助，如果還想學(xué)習(xí)更多知識，歡迎關(guān)注億速云行業(yè)資訊頻道！