擁有一個服務(wù)器的好處:你知道,在你睡覺的時候,在你煩悶苦惱的時候,在你追劇墮落的時候,有一個它,還在遠(yuǎn)處默默等待著你的訪問...
初始化Flask運(yùn)行環(huán)境
第一步,是把Flask工程拉到服務(wù)器上,然后,根據(jù)requirement.txt描述文件,下載依賴的python包。
這一步其實(shí)類似iOS的初始化,先Clone,然后pod install
Clone你的Flask工程
git clone xxxxxx.git
換pypi源
換用國內(nèi)源,你就會發(fā)出吶喊:哇~~~好快!!
修改 ~/.pip/pip.conf (CentOS), %APPDATA%\pip\pip.ini (Windows 10) 或 $HOME/Library/Application Support/pip/pip.conf (macOS) (沒有就創(chuàng)建一個), 修改 index-url至tuna,例如
[global]
index-url = https://pypi.tuna.tsinghua.edu.cn/simple
pip 和 pip3 并存時,只需修改 ~/.pip/pip.conf。
安裝虛環(huán)境
sudo yum install python-virtualenv
安裝Python版本管理工具pyenv
$ curl -L https://raw.githubusercontent.com/pyenv/pyenv-installer/master/bin/pyenv-installer | bash
按提示修改bash配置文件,然后重啟terminal
通過pyenv管理多python版本
pyenv搜狐鏡像源加速
下載需要的版本放到~/.pyenv/cache文件夾下面
然后執(zhí)行 pyenv install 版本號
安裝對應(yīng)的python版本
一鍵安裝:wget http://mirrors.sohu.com/python/2.7.9/Python-2.7.9.tar.xz -P ~/.pyenv/cache/;pyenv install 2.7.9
通過pyenv創(chuàng)建虛環(huán)境
pyenv virtualenv 2.7.9 虛環(huán)境名稱
pyenv activate 虛環(huán)境名稱
pyenv deactivate
pyenv uninstall 虛環(huán)境名稱
說明 - 通過這種方法創(chuàng)建的虛環(huán)境,包含了一個virtualenv創(chuàng)建的環(huán)境 - venv的目錄在~/.pyenv/versions/虛環(huán)境名稱/
下,不需要的時候,直接暴力刪除就好。詳細(xì)戳這里
注意,mac上安裝pyenv之后,需要再單獨(dú)安裝pyenv-virtualenv才能正常使用
brew install pyenv-virtualenv
初始化虛環(huán)境
virtualenv venv
激活虛環(huán)境
source venv/bin/activate
安裝依賴包
(venv) $ pip install -r requirements.txt
我這里安裝的時候,由于一些庫忘記寫進(jìn)描述文件里了,需要各種安裝遺漏的庫= =
錯誤信息:html5lib requires setuptools version 18.5 or above; please upgrade before installing (you have 0.6)
- 嘗試使用:pip install html5lib --upgrade升級,但是報錯。
- when i issue the above command it tells me to update the setup tools, and when I try to update or upgrade setuptools it says already up to date.
- 解決方案來源
解決方案:pip install -U setuptools
錯誤信息:python2.6木有markdown庫的一個文件
解決方案:
-
升級到python2.7
需要強(qiáng)調(diào)一點(diǎn),我的python2.7安裝到的目錄和文中有出入,位置在/usr/local/lib/python2.7 - 使用pyenv(見上文)
如果遠(yuǎn)程下載Python文件太慢,可以考慮
方案一:本地下載之后,使用scp命令上傳到服務(wù)器上
方案二:使用國內(nèi)鏡像搜狐Python鏡像
1、從服務(wù)器上下載文件
scp username@servername:/path/filename /var/www/local_dir(本地目錄)
例如scp root@192.168.0.101:/var/www/test.txt 把192.168.0.101上的/var/www/test.txt 的文件下載到/var/www/local_dir(本地目錄)
2、上傳本地文件到服務(wù)器
scp /path/filename username@servername:/path
例如scp /var/www/test.php root@192.168.0.101:/var/www/ 把本機(jī)/var/www/目錄下的test.php文件上傳到192.168.0.101這臺服務(wù)器上的/var/www/目錄中
3、從服務(wù)器下載整個目錄
scp -r username@servername:/var/www/remote_dir/(遠(yuǎn)程目錄) /var/www/local_dir(本地目錄)
例如:scp -r root@192.168.0.101:/var/www/test /var/www/
4、上傳目錄到服務(wù)器
scp -r local_dir username@servername:remote_dir
例如:scp -r test root@192.168.0.101:/var/www/ 把當(dāng)前目錄下的test目錄上傳到服務(wù)器的/var/www/ 目錄
當(dāng)然,scp的本質(zhì)是對ssh的封裝,所以可以通過配置.ssh目錄下的config文件實(shí)現(xiàn)快速復(fù)制文件的。我的操作命令如下:
scp Python-2.7.5.tar.bz2 ali-yun:/
其中,ali-yun是通過config文件自定義的阿里云ssh Host。定義如下:
關(guān)于ssh配置,可以參考重裝mac系列:配置多個ssh
安裝配置Gunicorn
Green Unicorn是一個Web服務(wù)器,支持多進(jìn)程,比Flask自帶的原生服務(wù)器更方便高效安全,所以要用它 - 雖然目前還沒親身領(lǐng)教到它的好處,但是網(wǎng)上資料說不用這個東東,直接用Flask原生的Web服務(wù)器,打開界面會非常卡卡卡卡卡...卡已經(jīng)領(lǐng)教過它的好處了。用Flask原生的Web服務(wù)器,遠(yuǎn)程訪問的時候,真的會灰常卡卡卡卡卡卡...即使只有你一個人孤獨(dú)的訪問你孤獨(dú)的服務(wù)器...
安裝Gunicorn
pip install Gunicorn
使用Gunicorn啟動Flask
提要:我們調(diào)試的時候使用flask-script這個東東,但是,啟動的時候,要啟動的還是app這個實(shí)體,而不是manage這個實(shí)體
# 直接運(yùn)行的方法
python manage.py runserver
# 使用Gunicorn運(yùn)行的方法
# 這里需要注意一下, 冒號前面的是文件名也就是manage.py而后面的是應(yīng)用的名稱。我在這里載過跟頭。因?yàn)榉?wù)器需要接受一個wsgi的應(yīng)用而manager = Manager(app)不是一個wsgi應(yīng)用所以報錯
gunicorn manage:app
運(yùn)行并允許外網(wǎng)訪問:gunicorn --workers=3 manage:app -b 0.0.0.0:8080
以上內(nèi)容參考鏈接:
Flask + Gunicorn + Nginx 部署
一個盜鏈的地址
問題:啟動報錯 - No module named pysqlite2
嘗試解決:pip install pysqlite2
報錯:Could not find a version that satisfies the requirement pysqlite2 (from versions: )No matching distribution found for pysqlite2
查了下原因:Python2.7以后,用的是sqlite3,而不是2,導(dǎo)致的報錯...那咋整...決定把Python換成2.6.6試試
wget [http://mirrors.sohu.com/python/2.7.9/Python-2.7.9.tar.xz](http://mirrors.sohu.com/python/2.7.9/Python-2.7.9.tar.xz) -P ~/.pyenv/cache/;pyenv install 2.7.9
安裝配置Nginx
Nginx的作用,是用作反向代理 - 真正的服務(wù)器地址和端口號,可以不暴露給客戶端,讓服務(wù)器更安全。同時,還能彌補(bǔ)Gunicorn對靜態(tài)文件支持不夠的問題。
Nginx文檔
安裝啟動
正常流
安裝:sudo yum install nginx
啟動:sudo /etc/init.d/nginx start
訪問你的ip,就可以看到Nginx啟動成功的界面啦~
異常流
問題:tarting nginx: nginx: [emerg] bind() to 0.0.0.0:80 failed (98: Address already in use)
解決:
- 方案一:
sudo fuser -k 80/tcp
- 方案二:
1. 查看80端口占用netstat -ntpl
2. 殺掉占用80端口的進(jìn)程kill 「pidnumber」 $pid
問題:Starting nginx: nginx: [emerg] socket() [::]:80 failed (97: Address family not supported by protocol)
解決:vim /etc/nginx/conf.d/default.conf
listen 80 default_server;
listen [::]:80 default_server;
修改為:
listen 80;
#listen [::]:80 default_server;
配置項(xiàng)
配置主文件:/etc/nginx/nginx.conf
這個文件是一個入口文件,里面包含了events 和 http兩個事件的描述。
我們真正需要配置的server {}相關(guān),是通過#include方法引入到這個入口文件里的,文件路徑為:/etc/nginx/conf.d/default.conf
配置:
(參考了一些文章,暫時沒弄懂配置內(nèi)容是什么意思,選了個最短的。TODO)
server {
listen 80;
# listen [::]:80 default_server;
server_name _;
# root /usr/share/nginx/html;
# Load configuration files for the default server block.
include /etc/nginx/default.d/*.conf;
location / {
proxy_pass http://127.0.0.1:8080; # Gunicorn的服務(wù)地址
proxy_set_header Host $host;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}
error_page 404 /404.html;
location = /40x.html {
}
error_page 500 502 503 504 /50x.html;
location = /50x.html {
}
}
重啟Nginx
nginx -s reload
其他Nginx操作
然后
通過Gunicorn部分提到的啟動方法,把程序綁定到你剛才設(shè)定的nginx監(jiān)聽的端口號,然后訪問你的公網(wǎng)IP(默認(rèn)80端口),發(fā)現(xiàn)已經(jīng)可以訪問你的項(xiàng)目了。
Daemon:讓Gunicorn駐留后臺
這部分我們來聊聊如何把Gunicorn變成一個后臺進(jìn)程
方案一:UpStart將Gunicorn作為服務(wù)運(yùn)行
參考鏈接一:Flask + Gunicorn + Nginx 部署
參考鏈接二:淺析 Linux 初始化 init 系統(tǒng),第 2 部分: UpStart
參考鏈接三:upstart把應(yīng)用封裝成系統(tǒng)服務(wù)
概述:使用UpStart配置Flask程序,作為服務(wù)程序,在Linux啟動的時候運(yùn)行。
方案二:使用Supervisor
參考鏈接一:在阿里云服務(wù)器上配置CentOS+Nginx+Python+Flask環(huán)境
參考鏈接二:Linux后臺進(jìn)程管理利器:supervisor
概述
Linux的后臺進(jìn)程運(yùn)行有好幾種方法,例如nohup,screen等,但是,如果是一個服務(wù)程序,要可靠地在后臺運(yùn)行,我們就需要把它做成daemon,最好還能監(jiān)控進(jìn)程狀態(tài),在意外結(jié)束時能自動重啟。
supervisor就是用Python開發(fā)的一套通用的進(jìn)程管理程序,能將一個普通的命令行進(jìn)程變?yōu)楹笈_daemon,并監(jiān)控進(jìn)程狀態(tài),異常退出時能自動重啟。
一些偶發(fā)小問題的記錄
Host key verification failed
問題:格式化阿里云實(shí)例后,ssh登錄提示Host key verification failed
原因:
- ssh會把你每個你訪問過計(jì)算機(jī)的公鑰(public key)都記錄在~/.ssh/known_hosts。當(dāng)下次訪問相同計(jì)算機(jī)時,OpenSSH會核對公鑰。如果公鑰不同,OpenSSH會發(fā)出警告,避免你受到DNS Hijack之類的攻擊
- SSH對主機(jī)的public_key的檢查等級是根據(jù)StrictHostKeyChecking變量來配置的。默認(rèn)情況下,StrictHostKeyChecking=ask,其他配置值如下:
- StrictHostKeyChecking=no
- StrictHostKeyChecking=ask
- StrictHostKeyChecking=yes
配置:在.ssh/config(或者/etc/ssh/ssh_config)中配置
StrictHostKeyChecking no #不開啟public key驗(yàn)證
UserKnownHostsFile /dev/null
BTW:config文件中,也是使用#作為注釋噠
參考鏈接:ssh中“Host key verification failed.“的解決方案
最后啰嗦一下
空白阿里云裝配順序
- 配SSH,相信我,配好以后你會愿意在空閑的時候隨手連一下你的寶貝服務(wù)器,看看它乖不乖的...
- yum install git
- git clone你的項(xiàng)目
- 安裝pyenv并配一個虛環(huán)境
- pip install -r requirements.txt
- 測試下能不能run起來你的Flask程序
以上,基本可以跑起來你的Flask程序啦~
- 安裝Gunicorn,-測試下使用Gunicorn做為web服務(wù)器的優(yōu)勢...(真的快不少呢...TODO:搞清楚原理是啥... 原理可以看上文,已經(jīng)簡單研究過了嗷)- 使用Gunicorn這個web服務(wù)器,運(yùn)行你的python項(xiàng)目到某個端口號
- 安裝Nginx,作為Gunicorn的反向代理,監(jiān)聽Gunicorn啟動的端口號,并配置轉(zhuǎn)發(fā)
關(guān)于
距離上次配好服務(wù)器,run起來自己寫的Python服務(wù)器程序(2017年9月25日)已經(jīng)兩個多月了(2017年12月7日)尷尬...忘了好多東西了蛤蛤蛤。。。
這一部分記錄下以后遇到這種情況如何處理吧:
- 先直接放問下你的IP,看看服務(wù)跑著沒有
- 'netstat -ntpl' 查看下端口的占用情況
- cd到/etc/nginx/nginx.conf 看看你的nginx配置,應(yīng)該差不多就想起來了...
最后一部分Daemon部分,我是真的一點(diǎn)都想不起來了...尷尬...
關(guān)閉服務(wù)們
sudo service nginx stop
執(zhí)行以后nginx的消息轉(zhuǎn)發(fā)功能失效,但是直接訪問Gunicorn起的接口還是可以訪問到的
sudo fuser -k 8080/tcp
殺死Gunicorn啟動的進(jìn)程,執(zhí)行后這個服務(wù)就被徹底殺死了...