Nginx(engine x) 是一個(gè)高性能的HTTP和反向代理服務(wù)器,也是一個(gè)IMAP/POP3/SMTP服務(wù)器。
學(xué)習(xí)參考:
? ??http://nginx.org/en/docs/?
????http://www.nginx.cn/doc/
一、Nginx 模塊化設(shè)計(jì)
????????高度模塊化的設(shè)計(jì)是 Nginx 的架構(gòu)基礎(chǔ)。Nginx 服務(wù)器被分解為多個(gè)模塊,每個(gè)模塊就是一個(gè)功能模塊,只負(fù)責(zé)自身的功能,模塊之間嚴(yán)格遵循“高內(nèi)聚,低耦合”的原則。

核心模塊
核心模塊是 Nginx 服務(wù)器正常運(yùn)行必不可少的模塊,提供錯(cuò)誤日志記錄、配置文件解析、事件驅(qū)動(dòng)機(jī)制、進(jìn)程管理等核心功能。
標(biāo)準(zhǔn) HTTP 模塊
標(biāo)準(zhǔn) HTTP 模塊提供 HTTP 協(xié)議解析相關(guān)的功能,如:端口配置、網(wǎng)頁(yè)編碼設(shè)置、HTTP 響應(yīng)頭設(shè)置等。
可選 HTTP 模塊
可選 HTTP 模塊主要用于擴(kuò)展標(biāo)準(zhǔn)的 HTTP 功能,讓 Nginx 能處理一些特殊的服務(wù),如:Flash 多媒體傳輸、解析 GeoIP 請(qǐng)求、SSL 支持等。
郵件服務(wù)模塊
郵件服務(wù)模塊主要用于支持 Nginx 的郵件服務(wù),包括對(duì) POP3 協(xié)議、IMAP 協(xié)議和 SMTP 協(xié)議的支持。
第三方模塊
第三方模塊是為了擴(kuò)展 Nginx 服務(wù)器應(yīng)用,完成開發(fā)者自定義功能,如:Json 支持、Lua 支持等。
二、Nginx 請(qǐng)求處理方式
Nginx 是一個(gè)高性能的 Web 服務(wù)器,能夠同時(shí)處理大量的并發(fā)請(qǐng)求。它結(jié)合多進(jìn)程機(jī)制和異步機(jī)制,異步機(jī)制使用的是異步非阻塞方式,接下來就給大家介紹一下 Nginx 的多線程機(jī)制和異步非阻塞機(jī)制。
多進(jìn)程
服務(wù)器每當(dāng)收到一個(gè)客戶端時(shí)。就有服務(wù)器主進(jìn)程(master process)生成一個(gè)子進(jìn)程(worker? process)出來和客戶端建立連接進(jìn)行交互,直到連接斷開,該子進(jìn)程就結(jié)束了。使用進(jìn)程的好處是各個(gè)進(jìn)程之間相互獨(dú)立,不需要加鎖,減少了使用鎖對(duì)性能造成影響,同時(shí)降低編程的復(fù)雜度,降低開發(fā)成本。其次,采用獨(dú)立的進(jìn)程,可以讓進(jìn)程互相之間不會(huì)影響,如果一個(gè)進(jìn)程發(fā)生異常退出時(shí),其它進(jìn)程正常工作,master 進(jìn)程則很快啟動(dòng)新的 worker 進(jìn)程,確保服務(wù)部中斷,將風(fēng)險(xiǎn)降到最低。缺點(diǎn)是操作系統(tǒng)生成一個(gè)子進(jìn)程需要進(jìn)行內(nèi)存復(fù)制等操作,在資源和時(shí)間上會(huì)產(chǎn)生一定的開銷;當(dāng)有大量請(qǐng)求時(shí),會(huì)導(dǎo)致系統(tǒng)性能下降。
異步非阻塞
每個(gè)工作進(jìn)程使用異步非阻塞方式,可以處理多個(gè)客戶端請(qǐng)求。當(dāng)某個(gè)工作進(jìn)程接收到客戶端的請(qǐng)求以后,調(diào)用 IO 進(jìn)行處理,如果不能立即得到結(jié)果,就去處理其他的請(qǐng)求(即為非阻塞);而客戶端在此期間也無需等待響應(yīng),可以去處理其他事情(即為異步);當(dāng) IO 返回時(shí),就會(huì)通知此工作進(jìn)程;該進(jìn)程得到通知,暫時(shí)掛起當(dāng)前處理的事務(wù)去響應(yīng)客戶端請(qǐng)求。
三、Nginx 事件驅(qū)動(dòng)模型
在 Nginx 的異步非阻塞機(jī)制中,工作進(jìn)程在調(diào)用 IO 后,就去處理其他的請(qǐng)求,當(dāng) IO 調(diào)用返回后,會(huì)通知該工作進(jìn)程。對(duì)于這樣的系統(tǒng)調(diào)用,主要使用 Nginx 服務(wù)器的事件驅(qū)動(dòng)模型來實(shí)現(xiàn)。

如上圖所示,Nginx 的事件驅(qū)動(dòng)模型由事件收集器、事件發(fā)送器和事件處理器三部分基本單元組成。其中,事件收集器負(fù)責(zé)收集 worker 進(jìn)程的各種 IO 請(qǐng)求,事件發(fā)送器負(fù)責(zé)將 IO 事件發(fā)送到事件處理器,而事件處理器負(fù)責(zé)各種事件的響應(yīng)工作。
事件發(fā)送器將每個(gè)請(qǐng)求放入一個(gè)待處理事件的列表,使用非阻塞 I/O 方式調(diào)用“事件處理器”來處理該請(qǐng)求。其處理方式稱為“多路 IO 復(fù)用方法”,常見的包括以下三種:select 模型、poll 模型、epoll 模型。
四、Nginx 設(shè)計(jì)架構(gòu)
Nginx 服務(wù)器使用 master/worker 多進(jìn)程模式。多線程啟動(dòng)和執(zhí)行的流程如下:主程序 Master process 啟動(dòng)后,通過一個(gè) for 循環(huán)來接收和處理外部信號(hào);主進(jìn)程通過 fork() 函數(shù)產(chǎn)生子進(jìn)程,每個(gè)子進(jìn)程執(zhí)行一個(gè) for 循環(huán)來實(shí)現(xiàn) Nginx 服務(wù)器對(duì)事件的接收和處理。
一般推薦 worker 進(jìn)程數(shù)與 cpu 內(nèi)核數(shù)一致,這樣一來不存在大量的子進(jìn)程生成和管理任務(wù),避免了進(jìn)程之間競(jìng)爭(zhēng) CPU 資源和進(jìn)程切換的開銷。而且 Nginx 為了更好的利用多核特性,提供了 cpu 親緣性的綁定選項(xiàng),我們可以將某一個(gè)進(jìn)程綁定在某一個(gè)核上,這樣就不會(huì)因?yàn)檫M(jìn)程的切換帶來 cache 的失效。
對(duì)于每個(gè)請(qǐng)求,有且只有一個(gè)工作進(jìn)程對(duì)其處理。首先,每個(gè) worker 進(jìn)程都是從 master 進(jìn)程 fork 過來,在 master 進(jìn)程里面,先建立好需要 listen 的 socket(listenfd)之后,然后再 fork 出多個(gè) worker 進(jìn)程。所有 worker 進(jìn)程的 listenfd 會(huì)在新連接到來時(shí)變得可讀,為保證只有一個(gè)進(jìn)程處理該連接,所有 worker 進(jìn)程在注冊(cè) listenfd 讀事件前搶 accept_mutex,搶到互斥鎖的那個(gè)進(jìn)程注冊(cè) listenfd 讀事件,在讀事件里調(diào)用 accept 接受該連接。當(dāng)一個(gè) worker 進(jìn)程在 accept 這個(gè)連接之后,就開始讀取請(qǐng)求,解析請(qǐng)求,處理請(qǐng)求,產(chǎn)生數(shù)據(jù)后,再返回給客戶端,最后才斷開連接,這樣一個(gè)完整的請(qǐng)求就是這樣的了。我們可以看到,一個(gè)請(qǐng)求,完全由 worker 進(jìn)程來處理,而且只在一個(gè) worker 進(jìn)程中處理。

在 Nginx 服務(wù)器的運(yùn)行過程中,主進(jìn)程和工作進(jìn)程需要進(jìn)程交互。交互依賴于 Socket 實(shí)現(xiàn)的管道來實(shí)現(xiàn)。
Master-Worker 交互
這條管道與普通的管道不同,它是由主進(jìn)程指向工作進(jìn)程的單向管道,包含主進(jìn)程向工作進(jìn)程發(fā)出的指令,工作進(jìn)程 ID 等;同時(shí)主進(jìn)程與外界通過信號(hào)通信;每個(gè)子進(jìn)程具備接收信號(hào),并處理相應(yīng)的事件的能力。
worker-worker 交互
這種交互是和 Master-Worker 交互是基本一致的,但是會(huì)通過主進(jìn)程。工作進(jìn)程之間是相互隔離的,所以當(dāng)工作進(jìn)程 W1 需要向工作進(jìn)程 W2 發(fā)指令時(shí),首先找到 W2 的進(jìn)程 ID,然后將正確的指令寫入指向 W2 的通道。W2 收到信號(hào)采取相應(yīng)的措施。
五、總結(jié)
通過這篇文章,我們對(duì) Nginx 服務(wù)器的整體架構(gòu)有了一個(gè)整體的認(rèn)識(shí)。包括其模塊化的設(shè)計(jì)、多進(jìn)程和異步非阻塞的請(qǐng)求處理方式、事件驅(qū)動(dòng)模型等。通過這些理論知識(shí),對(duì)于我們以后學(xué)習(xí) Nginx 的源碼有很大的幫助;也推薦大家多看看 Nginx 的源碼,才能更好地領(lǐng)悟 Nginx 的設(shè)計(jì)思想。
出處:http://www.linkedkeeper.com/detail/blog.action?bid=1036