適用于Linux的優(yōu)秀開源緩存工具有哪些

本篇內(nèi)容介紹了“適用于Linux的優(yōu)秀開源緩存工具有哪些”的有關(guān)知識(shí)，在實(shí)際案例的操作過程中，不少人都會(huì)遇到這樣的困境，接下來就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧！希望大家仔細(xì)閱讀，能夠?qū)W有所成！

什么是緩存或內(nèi)容緩存?

緩存(或內(nèi)容緩存)是一種廣泛使用的技術(shù)，用于將數(shù)據(jù)副本存儲(chǔ)在臨時(shí)存儲(chǔ)位置(也稱為緩存)中，因此與從原始存儲(chǔ)中檢索數(shù)據(jù)相比，可以輕松，快速地訪問數(shù)據(jù)。根據(jù)緩存的類型和目的，存儲(chǔ)在緩存中的數(shù)據(jù)可以包括文件或文件片段(例如HTML文件，腳本，圖像，文檔等)，數(shù)據(jù)庫操作或記錄，API調(diào)用，DNS記錄等。

緩存可以采用硬件或軟件的形式。基于軟件的緩存(這是本文的重點(diǎn))可以在應(yīng)用程序堆棧的不同層上實(shí)現(xiàn)。

可以在客戶端(或應(yīng)用程序表示層)應(yīng)用緩存，例如，瀏覽器緩存或應(yīng)用程序緩存(或脫機(jī)模式)。大多數(shù)(如果不是全部)現(xiàn)代瀏覽器都附帶有HTTP緩存的實(shí)現(xiàn)。即在訪問web應(yīng)用程序時(shí)，使您能夠查看網(wǎng)站或應(yīng)用程序上的最新數(shù)據(jù)或內(nèi)容，而不是在瀏覽器中使用本地存儲(chǔ)的內(nèi)容的舊副本。

客戶端緩存的另一個(gè)示例是DNS緩存，它發(fā)生在操作系統(tǒng)(OS)級(jí)別。它是有關(guān)操作系統(tǒng)或Web瀏覽器以前的DNS查找信息的臨時(shí)存儲(chǔ)。

也可以通過代理在LAN或WAN中的網(wǎng)絡(luò)級(jí)別上實(shí)現(xiàn)緩存。這種緩存的一個(gè)常見示例是CDN(內(nèi)容交付網(wǎng)絡(luò))，它是Web代理服務(wù)器的全局分布式網(wǎng)絡(luò)。

第三，您還可以在源服務(wù)器或后端服務(wù)器上實(shí)現(xiàn)緩存。服務(wù)器級(jí)緩存有多種形式，包括：Web服務(wù)器緩存(用于緩存圖像，文檔，腳本等)。

• 應(yīng)用程序緩存或存儲(chǔ)(用于從磁盤讀取文件，從其他服務(wù)或進(jìn)程讀取數(shù)據(jù)或從API請(qǐng)求數(shù)據(jù)等)。

• 數(shù)據(jù)庫緩存(提供對(duì)常用數(shù)據(jù)(例如請(qǐng)求的數(shù)據(jù)庫行，查詢結(jié)果和其他操作)的內(nèi)存訪問)。

請(qǐng)注意，緩存數(shù)據(jù)可以存儲(chǔ)在任何存儲(chǔ)系統(tǒng)中，包括數(shù)據(jù)庫，文件，系統(tǒng)內(nèi)存等，但是應(yīng)該是比主要源更快的介質(zhì)。在這方面，內(nèi)存中緩存是最有效且最常用的緩存形式。

為什么要使用緩存?

緩存具有許多優(yōu)點(diǎn)，包括：

• 在數(shù)據(jù)庫級(jí)別，它將緩存數(shù)據(jù)的讀取性能提高到微秒。您還可以使用回寫式高速緩存來提高寫入性能，在這種情況下，數(shù)據(jù)以指定的間隔寫入內(nèi)存中，然后再寫入磁盤或主存儲(chǔ)中。但是它的數(shù)據(jù)完整性方面可能會(huì)帶來災(zāi)難性的影響。例如，當(dāng)系統(tǒng)在將數(shù)據(jù)提交到主存儲(chǔ)之前崩潰時(shí)。

• 在應(yīng)用程序級(jí)別，緩存可以在應(yīng)用程序進(jìn)程本身中存儲(chǔ)頻繁讀取的數(shù)據(jù)，從而將數(shù)據(jù)查找時(shí)間從幾秒鐘減少到幾微秒，尤其是在網(wǎng)絡(luò)上。

• 考慮到整個(gè)應(yīng)用程序和服務(wù)器的性能，緩存有助于減少服務(wù)器的負(fù)載，延遲和網(wǎng)絡(luò)帶寬，因?yàn)榫彺娴臄?shù)據(jù)被提供給客戶端，從而提高了響應(yīng)時(shí)間和向客戶端的交付速度。

• 緩存還允許內(nèi)容可用性(尤其是通過CDN)，以及許多其他好處。

在本文中，我們將回顧一些用于在Linux中實(shí)現(xiàn)服務(wù)器端緩存的頂級(jí)開源(應(yīng)用程序/數(shù)據(jù)庫緩存和緩存代理服務(wù)器)工具。

1. Redis

Redis(完整的遠(yuǎn)程字典服務(wù)器)是一種免費(fèi)，開源，快速，高性能，靈活的分布式內(nèi)存計(jì)算系統(tǒng)，可以從大多數(shù)(即使不是全部)編程語言中使用。

它是內(nèi)存中的數(shù)據(jù)結(jié)構(gòu)存儲(chǔ)，用作緩存引擎，內(nèi)存中的持久磁盤上數(shù)據(jù)庫和消息代理。盡管Redis在Linux(推薦的部署平臺(tái))和OS X上進(jìn)行了開發(fā)和測(cè)試，但Redis還可在其他POSIX系統(tǒng)(例如* BSD)中運(yùn)行，而無需任何外部依賴。

Redis支持大量數(shù)據(jù)結(jié)構(gòu)，例如字符串，哈希，列表，集合，排序集合，位圖，流等。這使程序員可以使用特定的數(shù)據(jù)結(jié)構(gòu)來解決特定的問題。它支持對(duì)其數(shù)據(jù)結(jié)構(gòu)進(jìn)行自動(dòng)操作，例如追加到字符串，將元素推送到列表，增加哈希值，計(jì)算集合交集等。

它的主要功能包括Redis主從復(fù)制(默認(rèn)情況下是異步的)，使用Redis Sentinel提供的高可用性和自動(dòng)故障轉(zhuǎn)移，Redis集群(您可以通過添加更多集群節(jié)點(diǎn)來水平擴(kuò)展)和數(shù)據(jù)分區(qū)(在多個(gè)Redis實(shí)例之間分配數(shù)據(jù)) )。它還具有對(duì)事務(wù)，Lua腳本，一系列持久性選項(xiàng)以及客戶端-服務(wù)器通信加密的支持。

作為一個(gè)內(nèi)存中但持久的磁盤數(shù)據(jù)庫，Redis在與內(nèi)存中數(shù)據(jù)集配合使用時(shí)表現(xiàn)最佳。但是，您可以將其與磁盤數(shù)據(jù)庫一起使用，例如MySQL，PostgreSQL等。例如，您可以在Redis中獲取大量寫操作的小數(shù)據(jù)，并將其他數(shù)據(jù)塊保留在磁盤數(shù)據(jù)庫中。

Redis通過多種方式支持安全性：一種是使用“保護(hù)模式”功能來保護(hù)Redis實(shí)例不被外部網(wǎng)絡(luò)訪問。它還支持客戶端-服務(wù)器身份驗(yàn)證(在服務(wù)器中配置密碼并在客戶端中提供密碼)和所有通信通道(例如，客戶端連接，復(fù)制鏈接和Redis Cluster總線協(xié)議等)上的TLS。

Redis有很多用例，包括數(shù)據(jù)庫緩存，全頁緩存，用戶會(huì)話數(shù)據(jù)管理，API響應(yīng)存儲(chǔ)，發(fā)布/訂閱消息傳遞系統(tǒng)，消息隊(duì)列等等。這些可以應(yīng)用于游戲，社交網(wǎng)絡(luò)應(yīng)用程序，RSS提要，實(shí)時(shí)數(shù)據(jù)分析，用戶推薦等。

2. Memcached

Memcached是一個(gè)免費(fèi)，開源，簡(jiǎn)單但功能強(qiáng)大的分布式內(nèi)存對(duì)象緩存系統(tǒng)。它是內(nèi)存中的鍵值存儲(chǔ)區(qū)，用于存儲(chǔ)小塊數(shù)據(jù)，例如數(shù)據(jù)庫調(diào)用，API調(diào)用或頁面呈現(xiàn)的結(jié)果。它可以在類似Unix的操作系統(tǒng)(包括Linux和OS X)上運(yùn)行，也可以在Microsoft Windows上運(yùn)行。

作為開發(fā)人員工具，它旨在通過緩存內(nèi)容(默認(rèn)情況下為最近最少使用(LRU)緩存)來提高動(dòng)態(tài)Web應(yīng)用程序的速度，從而減少磁盤上的數(shù)據(jù)庫負(fù)載–它充當(dāng)以下任務(wù)的短期內(nèi)存應(yīng)用程序。它提供了最流行的編程語言的API。

Memcached支持將字符串作為唯一的數(shù)據(jù)類型。它具有客戶端-服務(wù)器體系結(jié)構(gòu)，其中一半邏輯發(fā)生在客戶端，另一半發(fā)生在服務(wù)器端。重要的是，客戶了解如何為項(xiàng)目選擇要寫入或讀取的服務(wù)器。此外，如果客戶端無法連接到服務(wù)器，則客戶端非常了解該怎么辦。

盡管它是一個(gè)分布式緩存系統(tǒng)，因此支持群集，但Memcached服務(wù)器彼此斷開連接(即，它們彼此之間不知道)。這意味著沒有像Redis這樣的復(fù)制支持。他們還了解如何存儲(chǔ)和獲取項(xiàng)目，管理何時(shí)驅(qū)逐或重新使用內(nèi)存。您可以通過添加更多服務(wù)器來增加可用內(nèi)存。

從Memcached 1.5.13開始，它支持通過TLS進(jìn)行身份驗(yàn)證和加密，但是此功能仍處于試驗(yàn)階段。

3. Apache Ignite

Apache Ignite是一個(gè)免費(fèi)的開源、易于擴(kuò)展的分布式鍵值存儲(chǔ)，緩存和多模型數(shù)據(jù)庫系統(tǒng)，它提供了強(qiáng)大的處理API，可用于在分布式數(shù)據(jù)上進(jìn)行計(jì)算。它也是一個(gè)內(nèi)存中的數(shù)據(jù)網(wǎng)格，可以在內(nèi)存中使用，也可以與Ignite本機(jī)持久性一起使用。它可以在類似UNIX的系統(tǒng)(例如Linux和Windows)上運(yùn)行。

它具有多層存儲(chǔ)，完整的SQL支持和跨多個(gè)群集節(jié)點(diǎn)的ACID(原子性，一致性，隔離性，耐久性)事務(wù)(僅在鍵值A(chǔ)PI級(jí)別上受支持)，共處一地處理和機(jī)器學(xué)習(xí)。它支持與任何第三方數(shù)據(jù)庫(包括任何RDBMS(例如MySQL，PostgreSQL，Oracle數(shù)據(jù)庫等)或NoSQL存儲(chǔ))的自動(dòng)集成。

重要的是要注意，盡管Ignite用作SQL數(shù)據(jù)存儲(chǔ)，但它并不完全是SQL數(shù)據(jù)庫。與傳統(tǒng)數(shù)據(jù)庫相比，它可以明顯地處理約束和索引。它支持主索引和輔助索引，但是只有主索引用于強(qiáng)制唯一性。此外，它不支持外鍵約束。

Ignite還通過允許您在服務(wù)器上啟用身份驗(yàn)證并在客戶端上提供用戶憑據(jù)來支持安全性。還支持SSL套接字通信，以在所有Ignite節(jié)點(diǎn)之間提供安全連接。

Ignite有許多用例，包括緩存系統(tǒng)，系統(tǒng)工作負(fù)載加速，實(shí)時(shí)數(shù)據(jù)處理和分析。它也可以用作以圖形為中心的平臺(tái)。

4. Couchbase Server

Couchbase Server還是一個(gè)開源，分布式，面向文檔的 NoSQL 數(shù)據(jù)庫管理系統(tǒng)，以鍵-值格式將數(shù)據(jù)存儲(chǔ)為項(xiàng)目。它可以在Linux以及Windows和Mac OS X等其他操作系統(tǒng)上運(yùn)行。它使用功能豐富，面向文檔的查詢語言稱為N1QL，該語言提供強(qiáng)大的查詢和索引服務(wù)，以支持對(duì)數(shù)據(jù)的亞毫秒級(jí)操作。

它的顯著特征是具有托管緩存的快速鍵值存儲(chǔ)，專用索引器，強(qiáng)大的查詢引擎，橫向擴(kuò)展體系結(jié)構(gòu)(多維擴(kuò)展)，大數(shù)據(jù)和SQL集成，全棧安全性和高可用性。

Couchbase Server帶有原生多實(shí)例集群支持，集群管理器工具可協(xié)調(diào)所有節(jié)點(diǎn)活動(dòng)，并僅向客戶端提供集群范圍的接口。重要的是，您可以根據(jù)需要添加，刪除或替換節(jié)點(diǎn)，而無需停機(jī)。它還支持跨集群節(jié)點(diǎn)的數(shù)據(jù)復(fù)制，跨數(shù)據(jù)中心的選擇性數(shù)據(jù)復(fù)制。

它使用專用的Couchbase服務(wù)器端口，不同的身份驗(yàn)證機(jī)制(使用憑據(jù)或證書)，基于角色的訪問控制(以檢查每個(gè)經(jīng)過身份驗(yàn)證的用戶來檢查分配給他們的系統(tǒng)定義的角色)，審核，日志和會(huì)話，通過TLS實(shí)現(xiàn)安全性。

它的用例包括統(tǒng)一的編程界面，全文本搜索，并行查詢處理，文檔管理和索引等等。它是專門為大型交互式Web，移動(dòng)和IoT應(yīng)用程序提供低延遲數(shù)據(jù)管理而設(shè)計(jì)的。

5. Hazelcast IMDG

Hazelcast IMDG(內(nèi)存數(shù)據(jù)網(wǎng)格)是一種開源，輕量級(jí)，快速且可擴(kuò)展的內(nèi)存數(shù)據(jù)網(wǎng)格中間件，可提供彈性可擴(kuò)展的分布式內(nèi)存計(jì)算。Hazelcast IMDG還可以在Linux，Windows和Mac OS X以及安裝了Java的任何其他平臺(tái)上運(yùn)行。它支持各種靈活的語言本機(jī)數(shù)據(jù)結(jié)構(gòu)，例如Map，Set，List，MultiMap，RingBuffer和HyperLogLog。

Hazelcast是對(duì)等的，并支持簡(jiǎn)單的可伸縮性，集群設(shè)置(具有用于收集統(tǒng)計(jì)信息，通過JMX協(xié)議進(jìn)行監(jiān)視以及使用有用的實(shí)用程序管理集群的選項(xiàng))，分布式數(shù)據(jù)結(jié)構(gòu)和事件，數(shù)據(jù)分配以及事務(wù)的功能。這也是冗余的，因?yàn)樗鼘⒚總€(gè)數(shù)據(jù)條目的備份保留在多個(gè)成員上。要擴(kuò)展群集，只需啟動(dòng)另一個(gè)實(shí)例，數(shù)據(jù)和備份就會(huì)自動(dòng)且均勻地平衡。

它提供了一組有用的API來訪問群集中的CPU，以實(shí)現(xiàn)最大處理速度。它還提供了來自Java的大量開發(fā)人員友好接口的分布式實(shí)現(xiàn)，例如Map，Queue，ExecutorService，Lock和JCache。

它的安全功能包括群集成員和客戶端身份驗(yàn)證，以及通過基于JAAS的安全功能對(duì)客戶端操作進(jìn)行訪問控制檢查。它還允許攔截客戶端執(zhí)行的套接字連接和遠(yuǎn)程操作，集群成員之間的套接字級(jí)別通信加密以及啟用SSL/TLS套接字通信。但是根據(jù)官方文檔，其中大多數(shù)安全功能都在企業(yè)版中提供。

最受歡迎的用例是分布式內(nèi)存緩存和數(shù)據(jù)存儲(chǔ)。但是，它也可以部署用于Web會(huì)話群集，NoSQL替換，并行處理，簡(jiǎn)單的消息傳遞等等。

6. Mcrouter

Mcrouter是一個(gè)免費(fèi)的開源Memcached協(xié)議路由器，用于擴(kuò)展由Facebook開發(fā)和維護(hù)的Memcached部署。它具有Memcached ASCII協(xié)議，靈活的路由，多集群支持，多級(jí)緩存，連接池，多種哈希方案，前綴路由，復(fù)制池，生產(chǎn)流量影子，在線重新配置以及目標(biāo)運(yùn)行狀況監(jiān)視/自動(dòng)故障轉(zhuǎn)移的功能。

此外，它支持冷緩存預(yù)熱，豐富的統(tǒng)計(jì)信息和調(diào)試命令，可靠的刪除流服務(wù)質(zhì)量，較大的值，廣播操作，并具有IPv6和SSL支持。

它已在Facebook和Instagram中用作緩存基礎(chǔ)結(jié)構(gòu)的核心組件，高峰時(shí)每秒處理近50億個(gè)請(qǐng)求。

7. Varnish Cache

Varnish Cache是位于Web客戶端和原始服務(wù)器之間的開源靈活，現(xiàn)代且多功能的Web應(yīng)用程序加速器。它可以在所有現(xiàn)代Linux，F(xiàn)reeBSD和Solaris(僅x86)平臺(tái)上運(yùn)行。它是一個(gè)出色的緩存引擎和內(nèi)容加速器，您可以將其部署在Web服務(wù)器(例如NGINX，Apache和許多其他服務(wù)器)的前面，以偵聽默認(rèn)的HTTP端口，以接收客戶端請(qǐng)求并將其轉(zhuǎn)發(fā)到Web服務(wù)器，并交付Web服務(wù)器響應(yīng)客戶端。

在客戶端和原始服務(wù)器之間充當(dāng)中間人的同時(shí)，Varnish Cache提供了許多好處，其基本要素是將Web內(nèi)容緩存在內(nèi)存中，以減輕Web服務(wù)器的負(fù)載并提高向客戶端的交付速度。

從客戶端收到HTTP請(qǐng)求后，它將請(qǐng)求轉(zhuǎn)發(fā)到后端Web服務(wù)器。Web服務(wù)器響應(yīng)后，Varnish將內(nèi)容緩存在內(nèi)存中，并將響應(yīng)傳遞給客戶端。當(dāng)客戶端請(qǐng)求相同的內(nèi)容時(shí)，Varnish將從緩存提升應(yīng)用程序響應(yīng)中提供該內(nèi)容。如果無法提供緩存中的內(nèi)容，則將請(qǐng)求轉(zhuǎn)發(fā)到后端，然后將響應(yīng)緩存并交付給客戶端。

Varnish具有VCL(Varnish配置語言，一種靈活的域特定語言)，用于配置請(qǐng)求的處理方式以及其他功能，Varnish模塊(VMODS)是Varnish Cache的擴(kuò)展。

在安全方面，Varnish Cache支持通過VMODS進(jìn)行日志記錄，請(qǐng)求檢查以及限制，身份驗(yàn)證和授權(quán)，但缺少對(duì)SSL/TLS的原生支持。您可以使用Hitch或NGINX等SSL/TLS代理為Varnish Cache啟用HTTPS。

您還可以將Varnish Cache用作Web應(yīng)用程序防火墻，DDoS攻擊防御程序，熱鏈接保護(hù)程序，負(fù)載平衡器，集成點(diǎn)，單點(diǎn)登錄網(wǎng)關(guān)，身份驗(yàn)證和授權(quán)策略機(jī)制，用于不穩(wěn)定后端的快速修復(fù)程序以及HTTP請(qǐng)求路由器。

8. Squid緩存代理

Squid是另一個(gè)針對(duì)Linux的免費(fèi)，開源，出色且廣泛使用的代理和緩存解決方案。它是功能豐富的Web代理緩存服務(wù)器軟件，可為流行的網(wǎng)絡(luò)協(xié)議(包括HTTP，HTTPS和FTP)提供代理和緩存服務(wù)。它還可以在其他UNIX平臺(tái)和Windows上運(yùn)行。

就像Varnish Cache一樣，它接收來自客戶端的請(qǐng)求并將它們傳遞到指定的后端服務(wù)器。后端服務(wù)器響應(yīng)時(shí)，會(huì)將內(nèi)容的副本存儲(chǔ)在緩存中，然后將其傳遞給客戶端。將來對(duì)相同內(nèi)容的請(qǐng)求將從緩存中得到處理，從而將內(nèi)容更快地傳遞到客戶端。因此，它可以優(yōu)化客戶端和服務(wù)器之間的數(shù)據(jù)流以提高性能，并緩存常用內(nèi)容以減少網(wǎng)絡(luò)流量并節(jié)省帶寬。

Squid具有一些功能，例如通過代理服務(wù)器的相互通信的層次結(jié)構(gòu)分配負(fù)載，生成有關(guān)Web使用模式的數(shù)據(jù)(例如，有關(guān)訪問量最大的站點(diǎn)的統(tǒng)計(jì)信息)，使您能夠分析，捕獲，阻止，替換或修改代理的消息。

它還支持安全功能，例如豐富的訪問控制，授權(quán)和身份驗(yàn)證，SSL/TLS支持以及活動(dòng)日志記錄。

9. NGINX

NGINX(發(fā)音為Engine-X)是一種開放源代碼，高性能，功能齊全且非常流行的整合解決方案，用于設(shè)置Web基礎(chǔ)結(jié)構(gòu)。它是HTTP服務(wù)器，反向代理服務(wù)器，郵件代理服務(wù)器和通用TCP/UDP代理服務(wù)器。

NGINX提供基本的緩存功能，其中緩存的內(nèi)容存儲(chǔ)在磁盤上的持久性緩存中。NGINX中有關(guān)內(nèi)容緩存的有趣之處在于，當(dāng)它無法從源服務(wù)器獲取新鮮內(nèi)容時(shí)，可以對(duì)其進(jìn)行配置以從其緩存中傳遞陳舊的內(nèi)容。

NGINX提供了多種安全功能來保護(hù)您的Web系統(tǒng)，包括SSL終止，使用HTTP基本身份驗(yàn)證限制訪問，基于子請(qǐng)求結(jié)果的身份驗(yàn)證，JWT身份驗(yàn)證，限制對(duì)代理HTTP資源的訪問，按地理位置限制的訪問，以及更多。

它通常被部署為應(yīng)用程序堆棧中的反向代理，負(fù)載平衡器，SSL終結(jié)器/安全網(wǎng)關(guān)，應(yīng)用程序加速器/內(nèi)容緩存和API網(wǎng)關(guān)。它還用于流媒體。

10. Apache Traffic Server

最后但也重要的一點(diǎn)是，我們有Apache Traffic Server，這是一種開源，快速，可擴(kuò)展且可擴(kuò)展的緩存代理服務(wù)器，支持HTTP/1.1和HTTP/2.0。它旨在通過為企業(yè)，ISP(Internet服務(wù)器提供商)，骨干網(wǎng)提供商等在網(wǎng)絡(luò)邊緣緩存經(jīng)常訪問的內(nèi)容來提高網(wǎng)絡(luò)效率和性能。

它支持HTTP/HTTPS通信的正向和反向代理。它還可以配置為同時(shí)以一種或兩種模式運(yùn)行。它具有持久性緩存，插件API;支持ICP(Internet緩存協(xié)議)，ESI(Edge Side Includes);Keep-Alive等。

在安全性方面，Traffic Server支持控制客戶端訪問，方法是允許您配置允許使用代理緩存的客戶端，客戶端與自身之間以及自身與原始服務(wù)器之間的連接的SSL終止。它還通過插件支持身份驗(yàn)證和基本授權(quán)，記錄(接收到的每個(gè)請(qǐng)求以及檢測(cè)到的每個(gè)錯(cuò)誤)以及進(jìn)行監(jiān)視。

Traffic Server可用作Web代理緩存，正向代理，反向代理，透明代理，負(fù)載均衡器或在緩存層次結(jié)構(gòu)中使用。

“適用于Linux的優(yōu)秀開源緩存工具有哪些”的內(nèi)容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識(shí)可以關(guān)注億速云網(wǎng)站，小編將為大家輸出更多高質(zhì)量的實(shí)用文章！