溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊(cè)×
其他方式登錄
點(diǎn)擊 登錄注冊(cè) 即表示同意《億速云用戶服務(wù)條款》

Nginx核心架構(gòu)是怎么支持高并發(fā)的

發(fā)布時(shí)間:2021-07-23 16:48:34 來源:億速云 閱讀:115 作者:chen 欄目:大數(shù)據(jù)

本篇內(nèi)容介紹了“Nginx核心架構(gòu)是怎么支持高并發(fā)的”的有關(guān)知識(shí),在實(shí)際案例的操作過程中,不少人都會(huì)遇到這樣的困境,接下來就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧!希望大家仔細(xì)閱讀,能夠?qū)W有所成!

前言

Nginx 作為業(yè)界知名的高性能服務(wù)器,被廣泛的應(yīng)用。它的高性能正是由于其優(yōu)秀的架構(gòu)設(shè)計(jì),其架構(gòu)主要包括這幾點(diǎn):模塊化設(shè)計(jì)、事件驅(qū)動(dòng)架構(gòu)、請(qǐng)求的多階段異步處理、管理進(jìn)程與多工作進(jìn)程設(shè)計(jì)、內(nèi)存池的設(shè)計(jì),以下內(nèi)容依次進(jìn)行說明。

Nginx核心架構(gòu)是怎么支持高并發(fā)的

模塊化設(shè)計(jì)

高度模塊化的設(shè)計(jì)是 Nginx 的架構(gòu)基礎(chǔ)。在 Nginx 中,除了少量的核心代碼,其他一切皆為模塊。

所有模塊間是分層次、分類別的,Nginx 官方共有五大類型的模塊:核心模塊、配置模塊、事件模塊、HTTP 模塊、mail 模塊。它們之間的關(guān)系如下:

Nginx核心架構(gòu)是怎么支持高并發(fā)的

在這 5 種模塊中,配置模塊和核心模塊是與 Nginx 框架密切相關(guān)的。而事件模塊則是 HTTP 模塊和 mail 模塊的基礎(chǔ)。HTTP 模塊和 mail 模塊的“地位”類似,它們都是更關(guān)注于應(yīng)用層面。

事件驅(qū)動(dòng)架構(gòu)

事件驅(qū)動(dòng)架構(gòu),簡(jiǎn)單的說就是由一些事件發(fā)生源來產(chǎn)生事件,由事件收集器來收集、分發(fā)事件,然后由事件處理器來處理這些事件(事件處理器需要先在事件收集器里注冊(cè)自己想處理的事件)。

對(duì)于 Nginx 服務(wù)器而言,一般由網(wǎng)卡、磁盤產(chǎn)生事件,Nginx 中的事件模塊將負(fù)責(zé)事件的收集、分發(fā)操作;而所有的模塊都可能是事件消費(fèi)者,它們首先需要向事件模塊注冊(cè)感興趣的事件類型,這樣,在有事件產(chǎn)生時(shí),事件模塊會(huì)把事件分發(fā)到相應(yīng)的模塊中進(jìn)行處理。

對(duì)于傳統(tǒng) web 服務(wù)器(如 Apache)而言,采用的所謂事件驅(qū)動(dòng)往往局限在 TCP 連接建立、關(guān)閉事件上,一個(gè)連接建立以后,在其關(guān)閉之前的所有操作都不再是事件驅(qū)動(dòng),這時(shí)會(huì)退化成按順序執(zhí)行每個(gè)操作的批處理模式,這樣每個(gè)請(qǐng)求在連接建立后都將始終占用著系統(tǒng)資源,直到關(guān)閉才會(huì)釋放資源。這種請(qǐng)求占用著服務(wù)器資源等待處理的模式會(huì)造成服務(wù)器資源極大的浪費(fèi)。

如下圖所示,傳統(tǒng) web 服務(wù)器往往把一個(gè)進(jìn)程或線程作為時(shí)間消費(fèi)者,當(dāng)一個(gè)請(qǐng)求產(chǎn)生的事件被該進(jìn)程處理時(shí),直到這個(gè)請(qǐng)求處理結(jié)束時(shí),進(jìn)程資源都將被這一請(qǐng)求所占用。比較典型的例子如 Apache 同步阻塞的多進(jìn)程模式就是這樣的。

傳統(tǒng) web 服務(wù)器處理事件的簡(jiǎn)單模型(矩形代表進(jìn)程):

Nginx核心架構(gòu)是怎么支持高并發(fā)的

Nginx 采用事件驅(qū)動(dòng)架構(gòu)處理業(yè)務(wù)的方式與傳統(tǒng)的 web 服務(wù)器是不同的。它不使用進(jìn)程或者線程來作為事件消費(fèi)者,所謂的事件消費(fèi)者只能是某個(gè)模塊。只有事件收集、分發(fā)器才有資格占用進(jìn)程資源,它們會(huì)在分發(fā)某個(gè)事件時(shí)調(diào)用事件消費(fèi)模塊使用當(dāng)前占用的進(jìn)程資源,如下圖所示,該圖中列出了 5 個(gè)不同的事件,在事件收集、分發(fā)者進(jìn)程的一次處理過程中,這 5 個(gè)事件按照順序被收集后,將開始使用當(dāng)前進(jìn)程分發(fā)事件,從而調(diào)用相應(yīng)的事件消費(fèi)者來處理事件。當(dāng)然,這種分發(fā)、調(diào)用也是有序的。

Nginx 處理事件的簡(jiǎn)單模型:

Nginx核心架構(gòu)是怎么支持高并發(fā)的

由上圖可以看出,處理請(qǐng)求事件時(shí),Nginx 的事件消費(fèi)者只是被事件分發(fā)者進(jìn)程短期調(diào)用而已,這種設(shè)計(jì)使得網(wǎng)絡(luò)性能、用戶感知的請(qǐng)求時(shí)延都得到了提升,每個(gè)用戶的請(qǐng)求所產(chǎn)生的事件會(huì)及時(shí)響應(yīng),整個(gè)服務(wù)器的網(wǎng)絡(luò)吞吐量都會(huì)由于事件的及時(shí)響應(yīng)而增大。當(dāng)然,這也帶來一定的要求,即每個(gè)事件消費(fèi)者都不能有阻塞行為,否則將會(huì)由于長(zhǎng)時(shí)間占用事件分發(fā)者進(jìn)程而導(dǎo)致其他事件得不到及時(shí)響應(yīng),Nginx 的非阻塞特性就是由于它的模塊都是滿足這個(gè)要求的。

請(qǐng)求的多階段異步處理

多階段異步處理請(qǐng)求與事件驅(qū)動(dòng)架構(gòu)是密切相關(guān)的,也就是說,請(qǐng)求的多階段異步處理只能基于事件驅(qū)動(dòng)架構(gòu)實(shí)現(xiàn)。多階段異步處理就是把一個(gè)請(qǐng)求的處理過程按照事件的觸發(fā)方式劃分為多個(gè)階段,每個(gè)階段都可以由事件收集、分發(fā)器來觸發(fā)。

處理獲取靜態(tài)文件的 HTTP 請(qǐng)求時(shí)切分的階段及各階段的觸發(fā)事件如下所示:

Nginx核心架構(gòu)是怎么支持高并發(fā)的

這個(gè)例子中,該請(qǐng)求大致分為 7 個(gè)階段,這些階段是可以重復(fù)發(fā)生的,因此,一個(gè)下載靜態(tài)資源請(qǐng)求可能會(huì)由于請(qǐng)求數(shù)據(jù)過大,網(wǎng)速不穩(wěn)定等因素而被分解為成百上千個(gè)上圖所列出的階段。

異步處理和多階段是相輔相成的,只有把請(qǐng)求分為多個(gè)階段,才有所謂的異步處理。當(dāng)一個(gè)時(shí)間被分發(fā)到事件消費(fèi)者中進(jìn)行處理時(shí),事件消費(fèi)者處理完這個(gè)事件只相當(dāng)于處理完 1 個(gè)請(qǐng)求的階段。什么時(shí)候可以處理下一個(gè)階段呢?這只能等待內(nèi)核的通知,即當(dāng)下一次事件出現(xiàn)時(shí),epoll 等事件分發(fā)器將會(huì)獲取到通知,然后去調(diào)用事件消費(fèi)者進(jìn)行處理。

管理進(jìn)程、多工作進(jìn)程設(shè)計(jì)

Nginx 在啟動(dòng)后,會(huì)有一個(gè) master 進(jìn)程和多個(gè) worker 進(jìn)程。master 進(jìn)程主要用來管理worker 進(jìn)程,包括接收來自外界的信號(hào),向各 worker 進(jìn)程發(fā)送信號(hào),監(jiān)控 worker 進(jìn)程的運(yùn)行狀態(tài)以及啟動(dòng) worker 進(jìn)程。worker 進(jìn)程是用來處理來自客戶端的請(qǐng)求事件。多個(gè) worker 進(jìn)程之間是對(duì)等的,它們同等競(jìng)爭(zhēng)來自客戶端的請(qǐng)求,各進(jìn)程互相獨(dú)立,一個(gè)請(qǐng)求只能在一個(gè) worker 進(jìn)程中處理。worker 進(jìn)程的個(gè)數(shù)是可以設(shè)置的,一般會(huì)設(shè)置與機(jī)器 CPU 核數(shù)一致,這里面的原因與事件處理模型有關(guān)。Nginx 的進(jìn)程模型,可由下圖來表示:

Nginx核心架構(gòu)是怎么支持高并發(fā)的

在服務(wù)器上查看 Nginx 進(jìn)程:

Nginx核心架構(gòu)是怎么支持高并發(fā)的

這種設(shè)計(jì)帶來以下優(yōu)點(diǎn):

利用多核系統(tǒng)的并發(fā)處理能力

現(xiàn)代操作系統(tǒng)已經(jīng)支持多核 CPU 架構(gòu),這使得多個(gè)進(jìn)程可以分別占用不同的 CPU 核心來工作。Nginx 中所有的 worker 工作進(jìn)程都是完全平等的。這提高了網(wǎng)絡(luò)性能、降低了請(qǐng)求的時(shí)延。

負(fù)載均衡

多個(gè) worker 工作進(jìn)程通過進(jìn)程間通信來實(shí)現(xiàn)負(fù)載均衡,即一個(gè)請(qǐng)求到來時(shí)更容易被分配到負(fù)載較輕的 worker 工作進(jìn)程中處理。這也在一定程度上提高了網(wǎng)絡(luò)性能、降低了請(qǐng)求的時(shí)延。

管理進(jìn)程會(huì)負(fù)責(zé)監(jiān)控工作進(jìn)程的狀態(tài),并負(fù)責(zé)管理其行為

管理進(jìn)程不會(huì)占用多少系統(tǒng)資源,它只是用來啟動(dòng)、停止、監(jiān)控或使用其他行為來控制工作進(jìn)程。首先,這提高了系統(tǒng)的可靠性,當(dāng) worker 進(jìn)程出現(xiàn)問題時(shí),管理進(jìn)程可以啟動(dòng)新的工作進(jìn)程來避免系統(tǒng)性能的下降。其次,管理進(jìn)程支持 Nginx 服務(wù)運(yùn)行中的程序升級(jí)、配置項(xiàng)修改等操作,這種設(shè)計(jì)使得動(dòng)態(tài)可擴(kuò)展性、動(dòng)態(tài)定制性較容易實(shí)現(xiàn)。

內(nèi)存池的設(shè)計(jì)

為了避免出現(xiàn)內(nèi)存碎片,減少向操作系統(tǒng)申請(qǐng)內(nèi)存的次數(shù)、降低各個(gè)模塊的開發(fā)復(fù)雜度,Nginx 設(shè)計(jì)了簡(jiǎn)單的內(nèi)存池,它的作用主要是把多次向系統(tǒng)申請(qǐng)內(nèi)存的操作整合成一次,這大大減少了 CPU 資源的消耗,同時(shí)減少了內(nèi)存碎片。

因此,通常每一個(gè)請(qǐng)求都有一個(gè)簡(jiǎn)易的獨(dú)立內(nèi)存池(如每個(gè) TCP 連接都分配了一個(gè)內(nèi)存池),而在請(qǐng)求結(jié)束時(shí)則會(huì)銷毀整個(gè)內(nèi)存池,把曾經(jīng)分配的內(nèi)存一次性歸還給操作系統(tǒng)。這種設(shè)計(jì)大大提高了模塊開發(fā)的簡(jiǎn)單些,因?yàn)樵谀K申請(qǐng)內(nèi)存后不用關(guān)心它的釋放問題;而且因?yàn)榉峙鋬?nèi)存次數(shù)的減少使得請(qǐng)求執(zhí)行的時(shí)延得到了降低。同時(shí),通過減少內(nèi)存碎片,提高了內(nèi)存的有效利用率和系統(tǒng)可處理的并發(fā)連接數(shù),從而增強(qiáng)了網(wǎng)絡(luò)性能。

“Nginx核心架構(gòu)是怎么支持高并發(fā)的”的內(nèi)容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識(shí)可以關(guān)注億速云網(wǎng)站,小編將為大家輸出更多高質(zhì)量的實(shí)用文章!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如果涉及侵權(quán)請(qǐng)聯(lián)系站長(zhǎng)郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI