Nginx筆記 2018-01-12

指令上下文

nginx.conf中的配置信息,根據(jù)其邏輯上的意義,對它們進(jìn)行了分類,也就是分成了多個作用域,或者稱之為配置指令上下文。不同的作用域含有一個或者多個配置項。

當(dāng)前nginx支持的幾個指令上下文:
main: nginx在運(yùn)行時與具體業(yè)務(wù)功能(比如http服務(wù)或者email服務(wù)代理)無關(guān)的一些參數(shù),比如工作進(jìn)程數(shù),運(yùn)行的身份等。
http: 與提供http服務(wù)相關(guān)的一些配置參數(shù)。例如:是否使用keepalive啊,是否使用gzip進(jìn)行壓縮等。
server: http服務(wù)上支持若干虛擬主機(jī)。每個虛擬主機(jī)一個對應(yīng)的server配置項,配置項里面包含該虛擬主機(jī)相關(guān)的配置。在提供mail服務(wù)的代理時,也可以建立若干server. 每個server通過監(jiān)聽的地址來區(qū)分
location: http服務(wù)中,某些特定的URL對應(yīng)的一系列配置項
mail: 實現(xiàn)email相關(guān)的SMTP/IMAP/POP3代理時,共享的一些配置項(因為可能實現(xiàn)多個代理,工作在多個監(jiān)聽地址上)。

示例配置:

user  nobody;
worker_processes  1;
error_log  logs/error.log  info;

events {
    worker_connections  1024;
}

http {
    server {
        listen          80;
        server_name     www.linuxidc.com;
        access_log      logs/linuxidc.access.log main;
        location / {
            index index.html;
            root  /var/www/linuxidc.com/htdocs;
        }
    }

    server {
        listen          80;
        server_name     www.Androidj.com;
        access_log      logs/androidj.access.log main;
        location / {
            index index.html;
            root  /var/www/androidj.com/htdocs;
        }
    }
}

mail {
    auth_http  127.0.0.1:80/auth.php;
    pop3_capabilities  "TOP"  "USER";
    imap_capabilities  "IMAP4rev1"  "UIDPLUS";

    server {
        listen     110;
        protocol   pop3;
        proxy      on;
    }
    server {
        listen      25;
        protocol    smtp;
        proxy       on;
        smtp_auth   login plain;
        xclient     off;
    }
}

存在于main上下文中的配置指令如下:

· user
· worker_processes
· error_log
· events
· http
· mail

存在于http上下文中的指令如下:

· server

存在于mail上下文中的指令如下:

· server
· auth_http
· imap_capabilities

存在于server上下文中的配置指令如下:

· listen
· server_name
· access_log
· location
· protocol
· proxy
· smtp_auth
· xclient

存在于location上下文中的指令如下:

· index
· root


nginx的模塊化體系結(jié)構(gòu)

nginx提供了web服務(wù)器的基礎(chǔ)功能,同時提供了web服務(wù)反向代理,email服務(wù)反向代理功能。nginx core實現(xiàn)了底層的通訊協(xié)議,為其他模塊和nginx進(jìn)程構(gòu)建了基本的運(yùn)行時環(huán)境,并且構(gòu)建了其他各模塊的協(xié)作基礎(chǔ)。除此之外,或者說大部分與協(xié)議相關(guān)的,或者應(yīng)用相關(guān)的功能都是在這些模塊中所實現(xiàn)的。

模塊

nginx將各功能模塊組織成一條鏈,當(dāng)有請求到達(dá)的時候,請求依次經(jīng)過這條鏈上的部分或者全部模塊,進(jìn)行處理。每個模塊實現(xiàn)特定的功能。例如,實現(xiàn)對請求解壓縮的模塊,實現(xiàn)SSI的模塊,實現(xiàn)與上游服務(wù)器進(jìn)行通訊的模塊,實現(xiàn)與FastCGI服務(wù)進(jìn)行通訊的模塊。

有兩個模塊比較特殊,他們居于nginx core和各功能模塊的中間。這兩個模塊就是http模塊和mail模塊。這2個模塊在nginx core之上實現(xiàn)了另外一層抽象,處理與HTTP協(xié)議和email相關(guān)協(xié)議(SMTP/POP3/IMAP)有關(guān)的事件,并且確保這些事件能被以正確的順序調(diào)用其他的一些功能模塊。

目前HTTP協(xié)議是被實現(xiàn)在http模塊中的,但是有可能將來被剝離到一個單獨的模塊中,以擴(kuò)展nginx支持SPDY協(xié)議。

模塊的分類

nginx的模塊根據(jù)其功能基本上可以分為以下幾種類型:
event module
搭建了獨立于操作系統(tǒng)的事件處理機(jī)制的框架,及提供了各具體事件的處理。包括ngx_events_module, ngx_event_core_module和ngx_epoll_module等。nginx具體使用何種事件處理模塊,這依賴于具體的操作系統(tǒng)和編譯選項。

phase handler
此類型的模塊也被直接稱為handler模塊主要負(fù)責(zé)處理客戶端請求并產(chǎn)生待響應(yīng)內(nèi)容,比如ngx_http_static_module模塊,負(fù)責(zé)客戶端的靜態(tài)頁面請求處理并將對應(yīng)的磁盤文件準(zhǔn)備為響應(yīng)內(nèi)容輸出。

output filter
也稱為filter模塊,主要是負(fù)責(zé)對輸出的內(nèi)容進(jìn)行處理,可以對輸出進(jìn)行修改。例如,可以實現(xiàn)對輸出的所有html頁面增加預(yù)定義的footbar一類的工作,或者對輸出的圖片的URL進(jìn)行替換之類的工作。

upstream
upstream模塊實現(xiàn)反向代理的功能,將真正的請求轉(zhuǎn)發(fā)到后端服務(wù)器上,并從后端服務(wù)器上讀取響應(yīng),發(fā)回客戶端。upstream模塊是一種特殊的handler,只不過響應(yīng)內(nèi)容不是真正由自己產(chǎn)生的,而是從后端服務(wù)器上讀取的

load-balancer
負(fù)載均衡模塊,實現(xiàn)特定的算法,在眾多的后端服務(wù)器中,選擇一個服務(wù)器出來作為某個請求的轉(zhuǎn)發(fā)服務(wù)器

nginx的請求處理

nginx使用一個多進(jìn)程模型來對外提供服務(wù),其中一個master進(jìn)程,多個worker進(jìn)程。master進(jìn)程負(fù)責(zé)管理nginx本身和其他worker進(jìn)程。

所有實際上的業(yè)務(wù)處理邏輯都在worker進(jìn)程。worker進(jìn)程中有一個函數(shù),執(zhí)行無限循環(huán),不斷處理收到的來自客戶端的請求,并進(jìn)行處理,直到整個nginx服務(wù)被停止。

worker進(jìn)程中,ngx_worker_process_cycle()函數(shù)就是這個無限循環(huán)的處理函數(shù)。在這個函數(shù)中,一個請求的簡單處理流程如下:

1. 操作系統(tǒng)提供的機(jī)制(例如epoll, kqueue等)產(chǎn)生相關(guān)的事件。
2. 接收和處理這些事件,如是接受到數(shù)據(jù),則產(chǎn)生更高層的request對象。
3. 處理request的header和body。
4. 產(chǎn)生響應(yīng),并發(fā)送回客戶端。
5. 完成request的處理。
6. 重新初始化定時器及其他事件。


請求的處理流程

以HTTP Request為例,詳細(xì)地說明nginx中請求處理過程。
從nginx的內(nèi)部來看,一個HTTP Request的處理過程涉及到以下幾個階段:

1. 初始化HTTP Request(讀取來自客戶端的數(shù)據(jù),生成HTTP Request對象,該對象含有該請求所有的信息)。
2. 處理請求頭。
3. 處理請求體。
4. 如果有的話,調(diào)用與此請求(URL或者Location)關(guān)聯(lián)的handler。
5. 依次調(diào)用各phase handler進(jìn)行處理。

phase字面的意思,就是階段。phase handlers是包含若干個處理階段的一些handler。

在每一個階段,包含有若干個handler,再處理到某個階段的時候,依次調(diào)用該階段的handler對HTTP Request進(jìn)行處理。

通常情況下,一個phase handler對這個request進(jìn)行處理,并產(chǎn)生一些輸出。通常phase handler是與定義在配置文件中的某個location相關(guān)聯(lián)的。一個phase handler通常執(zhí)行以下幾項任務(wù):

1. 獲取location配置。
2. 產(chǎn)生適當(dāng)?shù)捻憫?yīng)。
3. 發(fā)送response header。
4. 發(fā)送response body。

當(dāng)nginx讀取到一個HTTP Request的header的時候,nginx首先查找與這個請求關(guān)聯(lián)的虛擬主機(jī)的配置。如果找到了這個虛擬主機(jī)的配置,那么通常情況下,這個HTTP Request將會經(jīng)過以下幾個階段的處理(phase handlers):
NGX_HTTP_POST_READ_PHASE:
讀取請求內(nèi)容階段
NGX_HTTP_SERVER_REWRITE_PHASE:
Server請求地址重寫階段
NGX_HTTP_FIND_CONFIG_PHASE:
配置查找階段:
NGX_HTTP_REWRITE_PHASE:
Location請求地址重寫階段
NGX_HTTP_POST_REWRITE_PHASE:
請求地址重寫提交階段
NGX_HTTP_PREACCESS_PHASE:
訪問權(quán)限檢查準(zhǔn)備階段
NGX_HTTP_ACCESS_PHASE:
訪問權(quán)限檢查階段
NGX_HTTP_POST_ACCESS_PHASE:
訪問權(quán)限檢查提交階段
NGX_HTTP_TRY_FILES_PHASE:
配置項try_files處理階段
NGX_HTTP_CONTENT_PHASE:
內(nèi)容產(chǎn)生階段
NGX_HTTP_LOG_PHASE:
日志模塊處理階段

在內(nèi)容產(chǎn)生階段,為了給一個request產(chǎn)生正確的響應(yīng),nginx必須把這個request交給一個合適的content handler去處理。如果這個request對應(yīng)的location在配置文件中被明確指定了一個content handler,那么nginx就可以通過對location的匹配,直接找到這個對應(yīng)的handler,并把這個request交給這個content handler去處理。這樣的配置指令包括像,perl,flv,proxy_pass,mp4等。

如果一個request對應(yīng)的location并沒有直接有配置的content handler,那么nginx依次嘗試:

1. 如果一個location里面有配置 random_index on,那么隨機(jī)選擇一個文件,發(fā)送給客戶端。
2. 如果一個location里面有配置 index指令,那么發(fā)送index指令指明的文件,給客戶端。
3. 如果一個location里面有配置 autoindex on,那么就發(fā)送請求地址對應(yīng)的服務(wù)端路徑下的文件列表給客戶端。
4. 如果這個request對應(yīng)的location上有設(shè)置gzip_static on,那么就查找是否有對應(yīng)的.gz文件存在,
有的話,就發(fā)送這個給客戶端(客戶端支持gzip的情況下)。
5. 請求的URI如果對應(yīng)一個靜態(tài)文件,static module就發(fā)送靜態(tài)文件的內(nèi)容到客戶端。

內(nèi)容產(chǎn)生階段完成以后,生成的輸出會被傳遞到filter模塊去進(jìn)行處理。filter模塊也是與location相關(guān)的。所有的fiter模塊都被組織成一條鏈。輸出會依次穿越所有的filter,直到有一個filter模塊的返回值表明已經(jīng)處理完成。

這里列舉幾個常見的filter模塊,例如:

1. server-side includes。
2. XSLT filtering。
3. 圖像縮放之類的。
4. gzip壓縮。

在所有的filter中,有幾個filter模塊需要關(guān)注一下。按照調(diào)用的順序依次說明如下:
write: 寫輸出到客戶端,實際上是寫到連接對應(yīng)的socket上。
postpone: 這個filter是負(fù)責(zé)subrequest的,也就是子請求的。
copy: 將一些需要復(fù)制的buf(文件或者內(nèi)存)重新復(fù)制一份然后交給剩余的body filter處理。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

推薦閱讀更多精彩內(nèi)容