Elasticsearch中如何實(shí)現(xiàn)分片大小設(shè)定和容量規(guī)劃

本篇文章給大家分享的是有關(guān)Elasticsearch中如何實(shí)現(xiàn)分片大小設(shè)定和容量規(guī)劃，小編覺得挺實(shí)用的，因此分享給大家學(xué)習(xí)，希望大家閱讀完這篇文章后可以有所收獲，話不多說，跟著小編一起來看看吧。

以 Elasticsearch 7.9.2 為準(zhǔn)。

分片大小

日志類：?jiǎn)蝹€(gè)分片不超過 50G

搜索類：?jiǎn)蝹€(gè)分片不超過 20G

先估算總數(shù)據(jù)量，再根據(jù)分片大小，確定分片數(shù)。

容量規(guī)劃

容量規(guī)劃時(shí)要考慮的因素：

• 機(jī)器的軟硬件配置

• 單個(gè)文檔的尺寸，文檔總數(shù)，索引大小，分片個(gè)數(shù)，副本個(gè)數(shù)

• 文檔寫入方式（如 bulk 的單次數(shù)據(jù)量）

• 文檔的復(fù)雜度

• 文檔的讀取方式（如，要進(jìn)行怎樣的查詢和聚合）

容量規(guī)劃的步驟：

1. 先進(jìn)行性能評(píng)估：例如每秒寫多少，每秒讀多少，讀單個(gè)文檔能接受多大延遲。

2. 再觀察數(shù)據(jù)：mapping 的樣子，需要什么樣的查詢和聚合。

兩個(gè)典型的場(chǎng)景：

• 搜索：數(shù)據(jù)增長(zhǎng)較慢。

• 日志：增長(zhǎng)快，需要冷熱分離，需要自動(dòng)刪除。

硬件配置：

搜索之類的高性能場(chǎng)景，磁盤要 SSD，磁盤 GB 數(shù)/內(nèi)存 GB 數(shù) = 1/10

日志和并發(fā)不高的場(chǎng)景，磁盤可以機(jī)械硬盤，磁盤 GB 數(shù)/內(nèi)存 GB 數(shù) = 1/50

單節(jié)點(diǎn)的數(shù)據(jù)量最好 2 TB 之內(nèi)，最大不超過 5 TB。

JVM 的內(nèi)存配機(jī)器內(nèi)存的一半，同時(shí) JVM 內(nèi)存不超過 32 GB。

以上就是Elasticsearch中如何實(shí)現(xiàn)分片大小設(shè)定和容量規(guī)劃，小編相信有部分知識(shí)點(diǎn)可能是我們?nèi)粘９ぷ鲿?huì)見到或用到的。希望你能通過這篇文章學(xué)到更多知識(shí)。更多詳情敬請(qǐng)關(guān)注億速云行業(yè)資訊頻道。