從零開(kāi)始搭建論壇(一):Web服務(wù)器與Web框架

之前用 Django 做過(guò)一個(gè)小的站點(diǎn),感覺(jué)Django太過(guò)笨重,于是就準(zhǔn)備換一個(gè)比較輕量級(jí)的 Web 框架來(lái)玩玩。Web.py 作者已經(jīng)掛掉,項(xiàng)目好久沒(méi)有更新,所以不準(zhǔn)備用它。而 Flask 也是一個(gè)成熟的輕量級(jí) Web 框架,在 github 上有眾多的 Star 和 Fork,文檔和擴(kuò)展也很豐富,值得學(xué)習(xí)。

學(xué)習(xí)一個(gè)框架最好的方式就是用框架做一個(gè)項(xiàng)目,在實(shí)戰(zhàn)中理解掌握框架。這里我用 Flask 框架,使用 Mysql 數(shù)據(jù)庫(kù)做了一個(gè)論壇系統(tǒng)。麻雀雖小,五臟俱全,論壇效果圖如下:

論壇系統(tǒng)截圖
論壇系統(tǒng)截圖

下面是論壇的基本功能:

  • 完整的用戶模塊(注冊(cè)、登錄,更改、找回密碼、信息修改、站內(nèi)消息通知);
  • 豐富的論壇模塊(創(chuàng)建、回復(fù)話題,站內(nèi)搜索,markdown支持,@user 提醒);
  • 強(qiáng)大的后臺(tái)管理,支持屏蔽用戶、話題、評(píng)論,支持各種條件搜索話題、評(píng)論;

本博客將會(huì)用一系列文章,記錄論壇系統(tǒng)搭建的過(guò)程,希望對(duì)剛?cè)腴TWeb開(kāi)發(fā)的同學(xué)有所幫助。

我們經(jīng)常聽(tīng)說(shuō) Django, Flask 這些 python 語(yǔ)言的Web 框架,那么框架到底是什么,Web框架和Web服務(wù)器(Nginx, Apache等)有什么區(qū)別?離開(kāi)框架還能用 Python 搭建Web站點(diǎn)嗎?要解決這些疑問(wèn),我們有必要來(lái)理解下 Web 服務(wù)器的工作原理,以及 Web 框架的本質(zhì)。

Web 服務(wù)器

當(dāng)我們?cè)跒g覽器輸入U(xiǎn)RL后,瀏覽器會(huì)先請(qǐng)求DNS服務(wù)器,獲得請(qǐng)求站點(diǎn)的 IP 地址。然后發(fā)送一個(gè)HTTP Request(請(qǐng)求)給擁有該 IP 的主機(jī),接著就會(huì)接收到服務(wù)器給我們的 HTTP Response(響應(yīng)),瀏覽器經(jīng)過(guò)渲染后,以一種較好的效果呈現(xiàn)給我們。這個(gè)過(guò)程中,正是Web服務(wù)器在幕后默默做貢獻(xiàn)。

簡(jiǎn)單來(lái)說(shuō),Web服務(wù)器是在運(yùn)行在物理服務(wù)器上的一個(gè)程序,它永久地等待客戶端(主要是瀏覽器,比如Chrome,F(xiàn)irefox等)發(fā)送請(qǐng)求。當(dāng)收到請(qǐng)求之后,它會(huì)生成相應(yīng)的響應(yīng)并將其返回至客戶端。Web服務(wù)器通過(guò)HTTP協(xié)議與客戶端通信,因此也被稱為HTTP服務(wù)器。

Web 服務(wù)器

Web服務(wù)器的工作原理并不復(fù)雜,一般可分成如下4個(gè)步驟:建立連接、請(qǐng)求過(guò)程、應(yīng)答過(guò)程以及關(guān)閉連接

  1. 建立連接:客戶機(jī)通過(guò)TCP/IP協(xié)議建立到服務(wù)器的TCP連接。
  2. 請(qǐng)求過(guò)程:客戶端向服務(wù)器發(fā)送HTTP協(xié)議請(qǐng)求包,請(qǐng)求服務(wù)器里的資源文檔。
  3. 應(yīng)答過(guò)程:服務(wù)器向客戶機(jī)發(fā)送HTTP協(xié)議應(yīng)答包,如果請(qǐng)求的資源包含有動(dòng)態(tài)語(yǔ)言的內(nèi)容,那么服務(wù)器會(huì)調(diào)用動(dòng)態(tài)語(yǔ)言的解釋引擎負(fù)責(zé)處理“動(dòng)態(tài)內(nèi)容”,并將處理得到的數(shù)據(jù)返回給客戶端。由客戶端解釋HTML文檔,在客戶端屏幕上渲染圖形結(jié)果。
  4. 關(guān)閉連接:客戶機(jī)與服務(wù)器斷開(kāi)。

下面我們實(shí)現(xiàn)一個(gè)簡(jiǎn)單的 Web 服務(wù)器。運(yùn)行示例程序后,會(huì)監(jiān)聽(tīng)本地端口 8000,在瀏覽器訪問(wèn) http://localhost:8000 就能看到響應(yīng)內(nèi)容。而我們的程序也能夠打印出客戶端發(fā)來(lái)的請(qǐng)求內(nèi)容,如下圖:

簡(jiǎn)單Web服務(wù)器
簡(jiǎn)單Web服務(wù)器

這里Request 和 Response 都需要遵守 HTTP 協(xié)議,關(guān)于 HTTP 協(xié)議的詳細(xì)內(nèi)容,可以讀讀《HTTP 權(quán)威指南》,或者看我整理的HTTP 部分內(nèi)容

雖然說(shuō)web服務(wù)器的主要工作是根據(jù)request返回response,但是實(shí)際中的 Web 服務(wù)器遠(yuǎn)遠(yuǎn)比上面示例的復(fù)雜的多,因?yàn)橐紤]的因素實(shí)在是太多了,比如:

  • 緩存機(jī)制:講一些經(jīng)常被訪問(wèn)的頁(yè)面緩存起來(lái),提高響應(yīng)速度;
  • 安全:防止黑客的各種攻擊,比如 SYN Flood 攻擊;
  • 并發(fā)處理:如何響應(yīng)不同客戶端同時(shí)發(fā)起的請(qǐng)求;
  • 日志:記錄訪問(wèn)日至,方便做一些分析。

目前在UNIX和LINUX平臺(tái)下使用最廣泛的免費(fèi) Web 服務(wù)器有Apache和 Nginx 。

Web 應(yīng)用程序

Web 服務(wù)器接受 Http Request,返回 Response,很多時(shí)候 Response 并不是靜態(tài)文件,因此需要有一個(gè)應(yīng)用程序根據(jù) Request 生成相應(yīng)的 Response。這里的應(yīng)用程序主要用來(lái)處理相關(guān)業(yè)務(wù)邏輯,讀取或者更新數(shù)據(jù)庫(kù),根據(jù)不同 Request 返回相應(yīng)的 Response。注意這里并不是 Web 服務(wù)器本身來(lái)做這件事,它只負(fù)責(zé) Http 協(xié)議層面和一些諸如并發(fā)處理,安全,日志等相關(guān)的事情。

應(yīng)用程序可以用各種語(yǔ)言編寫(Java, PHP, Python, Ruby等),這個(gè)應(yīng)用程序會(huì)從Web服務(wù)器接收客戶端的請(qǐng)求,處理完成后,再返回響應(yīng)給Web服務(wù)器,最后由Web服務(wù)器返回給客戶端。整個(gè)架構(gòu)如下:

Web應(yīng)用程序
Web應(yīng)用程序

以 Python 為例,使用Python開(kāi)發(fā)Web,最原始和直接的辦法是使用CGI標(biāo)準(zhǔn),在1998年這種方式很流行。首先確保 Web 服務(wù)器支持CGI及已經(jīng)配置了CGI的處理程序,然后設(shè)置好CGI目錄,在目錄里面添加相應(yīng)的 python 文件,每一個(gè) python 文件處理相應(yīng)輸入,生成一個(gè) html 文件即可,如下例:

#!/usr/bin/python
# -*- coding: UTF-8 -*-

print "Content-type:text/html"
print         # 空行,告訴服務(wù)器結(jié)束頭部
print '<html>'
print '<head>'
print '<meta charset="utf-8">'
print '</head>'
print '<body>'
print '<h2>Hello Word! 我是一個(gè)CGI程序</h2>'
print '</body>'
print '</html>'

這樣在瀏覽器訪問(wèn)該文件就可以得到一個(gè)簡(jiǎn)單的 Hello World 網(wǎng)頁(yè)內(nèi)容。直接通過(guò) CGI 寫 Web 應(yīng)用程序看起來(lái)很簡(jiǎn)單,每一個(gè)文件處理輸入,生成html。但是實(shí)際開(kāi)發(fā)中,可能會(huì)遇到許多不方便的地方。比如:

  • 每個(gè)獨(dú)立的CGI腳本可能會(huì)重復(fù)寫數(shù)據(jù)庫(kù)連接,關(guān)閉的代碼;
  • 后端開(kāi)發(fā)者會(huì)看到一堆 Content-Type 等和自己無(wú)關(guān)的 html 頁(yè)面元素;

Web 框架

早期開(kāi)發(fā)站點(diǎn)確做了許多重復(fù)性勞動(dòng),后來(lái)為了減少重復(fù),避免寫出龐雜,混亂的代碼,人們將 Web 開(kāi)發(fā)的關(guān)鍵性過(guò)程提取出來(lái),開(kāi)發(fā)出了各種 Web 框架。有了框架,就可以專注于編寫清晰、易維護(hù)的代碼,無(wú)需關(guān)心數(shù)據(jù)庫(kù)連接之類的重復(fù)性工作。

其中一種比較經(jīng)典的Web框架采用了 MVC 架構(gòu),如下圖所示:

MVC 架構(gòu)
MVC 架構(gòu)

用戶輸入 URL,客戶端發(fā)送請(qǐng)求,控制器(Controller)首先會(huì)拿到請(qǐng)求,然后用模型(Models)從數(shù)據(jù)庫(kù)取出所有需要的數(shù)據(jù),進(jìn)行必要的處理,將處理后的結(jié)果發(fā)送給 視圖(View),視圖利用獲取到的數(shù)據(jù),進(jìn)行渲染生成 Html Response返回給客戶端。

以 python web 框架 flask 為例,框架本身并不限定我們用哪種架構(gòu)來(lái)組織我們的應(yīng)用,不過(guò) flask 可以很好地支持以 MVC 方式組織應(yīng)用。

控制器:flask 可以用裝飾器來(lái)添加路由項(xiàng),如下:

@app.route('/')
def main_page():
    pass

模型:主要用來(lái)取出需要的數(shù)據(jù),如下面函數(shù)中操作:

@app.route('/')
def main_page():
    """Searches the database for entries, then displays them."""
    db = get_db()
    cur = db.execute('select * from entries order by id desc')
    entries = cur.fetchall()
    return render_template('index.html', entries=entries)

視圖:flask 利用 jinja2 來(lái)渲染頁(yè)面,下面的模版文件指定了頁(yè)面的樣式:

{% for entry in entries %}
<li>
  <h2>{{ entry.title }}</h2>
  <div>{{ entry.text|safe }}</div>
</li>
{% else %}
<li><em>No entries yet. Add some!</em></li>
{% endfor %}

Web 服務(wù)器網(wǎng)關(guān)接口

我們知道Python有著許多的 Web 框架,而同時(shí)又有著許多的 Web 服務(wù)器(Apache, Nginx, Gunicorn等),框架和Web服務(wù)器之間需要進(jìn)行通信,如果在設(shè)計(jì)時(shí)它們之間不可以相互匹配的,那么選擇了一個(gè)框架就會(huì)限制對(duì) Web 服務(wù)器的選擇,這顯然是不合理的。

那么,怎樣確保可以在不修改Web服務(wù)器代碼或網(wǎng)絡(luò)框架代碼的前提下,使用自己選擇的服務(wù)器,并且匹配多個(gè)不同的網(wǎng)絡(luò)框架呢?答案是接口,設(shè)計(jì)一套雙方都遵守的接口就可以了。對(duì)python來(lái)說(shuō),就是WSGI(Web Server Gateway Interface,Web服務(wù)器網(wǎng)關(guān)接口)。其他編程語(yǔ)言也擁有類似的接口:例如Java的Servlet API和Ruby的Rack。

Python WSGI的出現(xiàn),讓開(kāi)發(fā)者可以將 Web 框架與 Web 服務(wù)器的選擇分隔開(kāi)來(lái),不再相互限制。現(xiàn)在,你可以真正地將不同的 Web 服務(wù)器與Web框架進(jìn)行混合搭配,選擇滿足自己需求的組合。例如,可以使用 Gunicorn 或Nginx/uWSGI來(lái)運(yùn)行Django、Flask或web.py應(yīng)用。

WSGI 適配
WSGI 適配

下一篇我們將會(huì)仔細(xì)分析 WSGI 接口標(biāo)準(zhǔn),然后一起來(lái)寫一個(gè)簡(jiǎn)單的 WSGI Web 服務(wù)器。

更多閱讀

自己動(dòng)手開(kāi)發(fā)網(wǎng)絡(luò)服務(wù)器(一)
自己動(dòng)手開(kāi)發(fā)網(wǎng)絡(luò)服務(wù)器(二)
自己動(dòng)手開(kāi)發(fā)網(wǎng)絡(luò)服務(wù)器(三)
Web服務(wù)器網(wǎng)關(guān)接口實(shí)現(xiàn)原理分析
Python最佳實(shí)踐指南:Web 應(yīng)用
淺談Python web框架
Python CGI編程
Django vs Flask vs Pyramid: Choosing a Python Web Framework
PEP 333 -- Python Web Server Gateway Interface v1.0
WSGI簡(jiǎn)介
Model-View-Controller (MVC) Explained -- With Legos

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,363評(píng)論 6 532
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,497評(píng)論 3 416
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人,你說(shuō)我怎么就攤上這事。” “怎么了?”我有些...
    開(kāi)封第一講書人閱讀 176,305評(píng)論 0 374
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我,道長(zhǎng),這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書人閱讀 62,962評(píng)論 1 311
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 71,727評(píng)論 6 410
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書人閱讀 55,193評(píng)論 1 324
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,257評(píng)論 3 441
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書人閱讀 42,411評(píng)論 0 288
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,945評(píng)論 1 335
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 40,777評(píng)論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 42,978評(píng)論 1 369
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,519評(píng)論 5 359
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,216評(píng)論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書人閱讀 34,642評(píng)論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書人閱讀 35,878評(píng)論 1 286
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 51,657評(píng)論 3 391
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 47,960評(píng)論 2 373

推薦閱讀更多精彩內(nèi)容