PHP FPM源代碼反芻品味之四:事件處理

FPM master 進程啟動后,會進入函數fpm_event_loop,無限循環.
處理事件.

事件概要

master 進程所做的的事,總的來說就是兩類:

一 定時器事件

簡稱timer事件,需按時運行,主要有3個:

  1. fpm_pctl_heartbeat, 任務:檢查超時進程
  2. fpm_pctl_perform_idle_server_maintenance_heartbeat ,
    任務:worker進程動態管理,更新記分板的統計數據
  3. fpm_systemd_heartbeat,任務: 發送fpm狀態信息給systemd
    (這一項需FPM編譯時,啟用 systemd 集成 --with-fpm-systemd 默認為 no)

二 文件可讀事件

簡稱fd事件,需從文件句柄(file descriptor)讀取到指令后,依指令運行.
重復一下,unix 下一切IO, 皆文件,socket ,socketpair,pipe 都返回文件句柄(fd) 用于通信.
主要的fd有:

  1. 信號fd, master 進程中,操作系統信號,SIGTERM,SIGINT等會被自定義函數寫到一個socketpair管道里.監聽這個信號fd,處理操作系統信號.關于信號處理,另文詳述.
  2. 網絡監聽socket fd(listening_socket)
    有請求時,創建worker進程,處理連接.(需配置為按需模式ondemand)
    事件添加代碼:
//fpm_children.c
int fpm_children_create_initial(struct fpm_worker_pool_s *wp) 
{
        ...
        memset(wp->ondemand_event, 0, sizeof(struct fpm_event_s));
        fpm_event_set(wp->ondemand_event, wp->listening_socket, FPM_EV_READ | FPM_EV_EDGE, fpm_pctl_on_socket_accept, wp);
        wp->socket_event_set = 1;
        fpm_event_add(wp->ondemand_event, 0);
        ...
}
  1. worker進程標準輸出stdout. (需配置catch_workers_output = yes)
  2. worker進程標準錯誤輸出stderr (需配置catch_workers_output = yes)
    默認情況下worker進程標準輸出stdout和標準錯誤輸出stderr,為/dev/null,不記錄.
    開啟catch_workers_output,會通過pipe管道導到master 進程,寫到日志里.
    開啟catch_workers_output,有助于排查錯誤
    事件添加代碼:
//fpm_stdio.c
int fpm_stdio_parent_use_pipes(struct fpm_child_s *child) 
{
  ...
  child->fd_stdout = fd_stdout[0];
  child->fd_stderr = fd_stderr[0];

  fpm_event_set(&child->ev_stdout, child->fd_stdout, FPM_EV_READ, fpm_stdio_child_said, child);
  fpm_event_add(&child->ev_stdout, 0);

  fpm_event_set(&child->ev_stderr, child->fd_stderr, FPM_EV_READ, fpm_stdio_child_said, child);
  fpm_event_add(&child->ev_stderr, 0);
  return 0;
}

兩類事件的不同點是:

對于timer事件,多個事件在事件軸上是依次排列的,只需反復檢查,到時運行.
對于fd事件,需監聽多個fd,需用到我們第二篇講的IO多路復用技術.

兩類事件的共同點是:

如果滿足事件條件,則處理事件內容.

FPM設計上,兩類事件使用同一個結構,并且事件觸發條件和事件處理邏輯放到同一個事件對象里(C語言對象就是結構體).
舉個例子,打鈴下課,打鈴是觸發條件,下課是事件內容,兩個同時放到一個事件對象,這是一個很好的設計.

事件對象結構

//fpm_event.h
struct fpm_event_s {
    int fd;                   /* 沒設置,表示定時事件*/
    struct timeval timeout;   /* timer事件觸發時間點*/
    struct timeval frequency; /* timer事件觸發事件間隔*/
    void (*callback)(struct fpm_event_s *, short, void *); /* 回調函數 */
    void *arg; /* 回調函數的參數 */
    int flags;
    int index;                
    short which;             /* 事件類型 */
};

timer事件

fd值: -1
flags值: FPM_EV_PERSIST
which值: FPM_EV_TIMEOUT

fd事件.

fd值: 獲取觸發指令的文件fd
flags值: FPM_EV_EDGE(fd事件底層的邊緣觸發標志,需系統支持)
which值: FPM_EV_READ

兩類事件分別放在兩個事件隊列
static struct fpm_event_queue_s *fpm_event_queue_timer = NULL; 
static struct fpm_event_queue_s *fpm_event_queue_fd = NULL;

事件隊列的結構很常見,雙向隊列:
typedef struct fpm_event_queue_s {
struct fpm_event_queue_s *prev;
struct fpm_event_queue_s *next;
struct fpm_event_s *ev;
} fpm_event_queue;

事件相關的重要函數:

  1. 創建fd事件對象函數fpm_event_set:
    第一個參數會獲得新建對象的指針,后續參數為事件對象參數
//fpm_events.c
int fpm_event_set(struct fpm_event_s *ev, int fd, int flags, void (*callback)(struct fpm_event_s *, short, void *), void *arg) 
{
    if (!ev || !callback || fd < -1) {
        return -1;
    }
    memset(ev, 0, sizeof(struct fpm_event_s));
    ev->fd = fd;
    ev->callback = callback;
    ev->arg = arg;
    ev->flags = flags;
    return 0;
}
  1. 創建timer事件對象函數fpm_event_set_timer,
    fd 值為-1,其他和fpm_event_set一致.
#define fpm_event_set_timer(ev, flags, cb, arg) fpm_event_set((ev), -1, (flags), (cb), (arg))
  1. 添加事件.(fpm_event_add -> fpm_event_queue_add)
    static int fpm_event_queue_add(struct fpm_event_queue_s **queue, struct fpm_event_s *ev)
    簡單的入列操作:
    對于fd事件,需加到底層事件輪詢機制里(如:epoll).
    if (*queue == fpm_event_queue_fd && module->add) {
        module->add(ev);
    }

4移除事件 (fpm_event_del -> fpm_event_queue_del)
簡單的出列操作:
static int fpm_event_queue_del(struct fpm_event_queue_s **queue, struct fpm_event_s *ev)
對于fd事件,需在底層事件輪詢機制里移除(如:epoll)

    if (*queue == fpm_event_queue_fd && module->remove) {
        module->remove(ev);
    }

5,運行事件回調函數:

void fpm_event_fire(struct fpm_event_s *ev) 
{
    if (!ev || !ev->callback) {
        return;
    }

    (*ev->callback)( (struct fpm_event_s *) ev, ev->which, ev->arg);    
}

6, 底層事件輪詢模塊結構

struct fpm_event_module_s {
    const char *name;
    int support_edge_trigger;
    int (*init)(int max_fd); /*初始外化函數*/
    int (*clean)(void);
    int (*wait)(struct fpm_event_queue_s *queue, unsigned long int timeout);
    int (*add)(struct fpm_event_s *ev);
    int (*remove)(struct fpm_event_s *ev);
};

不同的操作系統,支持不同的IO事件機制,linux 支持epoll,
windows支持select, freebsd 支持kqueue,這個結構統一操作接口
在函數fpm_event_init_main里 調用module->init初始化
fpm 里對應的配置

events.mechanism = epoll

監控事件的無限循環

master進程在fpm_event_loop函數里無限循環,處理定時任務和fd事件.
期間會在module->wait阻塞片刻,對于epoll機制,就是epoll_wait.

void fpm_event_loop(int err) /* {{{ */
{
    static struct fpm_event_s signal_fd_event;
    ...
    //添加信號處理fd事件
    fpm_event_set(&signal_fd_event, fpm_signals_get_fd(), FPM_EV_READ, &fpm_got_signal, NULL);
    fpm_event_add(&signal_fd_event, 0);

    //添加檢查超時進程timer事件
    if (fpm_globals.heartbeat > 0) {
        fpm_pctl_heartbeat(NULL, 0, NULL);
    }

    if (!err) {
       //添加閑時服務維護timer事件
        fpm_pctl_perform_idle_server_maintenance_heartbeat(NULL, 0, NULL);
        ...
#ifdef HAVE_SYSTEMD
        //添加報告systemd timer事件
        fpm_systemd_heartbeat(NULL, 0, NULL);
#endif
    }

    while (1) {
        struct fpm_event_queue_s *q, *q2;
        struct timeval ms;
        struct timeval tmp;
        struct timeval now;
        unsigned long int timeout; /*這個timeout是等待事件,事件對象的timeout是標準時間點,同名不同義*/
        int ret;
        ...

        fpm_clock_get(&now);
        timerclear(&ms);

        /*timer時隊列里查找應該運行的最近標準時間*/
        q = fpm_event_queue_timer;
        while (q) {
            if (!timerisset(&ms)) {
                ms = q->ev->timeout;
            } else {
                if (timercmp(&q->ev->timeout, &ms, <)) {
                    ms = q->ev->timeout;
                }
            }
            q = q->next;
        }

        /* 沒設置,默認1秒*/
        if (!timerisset(&ms) || timercmp(&ms, &now, <) || timercmp(&ms, &now, ==)) {
            timeout = 1000;
        } else {
         /* 事件timeout值與當前時間相減,計算等待時間*/
            timersub(&ms, &now, &tmp);
            timeout = (tmp.tv_sec * 1000) + (tmp.tv_usec / 1000) + 1;
        }

        /* 程序阻塞在這里,設置阻塞timeout,是為了及時處理timer事件*/
        ret = module->wait(fpm_event_queue_fd, timeout);
        ...

        /* trigger timers */
        q = fpm_event_queue_timer;
        while (q) {
            fpm_clock_get(&now);
            if (q->ev) {
             /* 如果事件過期或到期,運行事件回調*/
                if (timercmp(&now, &q->ev->timeout, >) || timercmp(&now, &q->ev->timeout, ==)) {
                    fpm_event_fire(q->ev);
                    ...
                    /*如果是連續運行timer事件
                        重設事件ev->timeout= ev->frequency+now
                    */
                    if (q->ev->flags & FPM_EV_PERSIST) {
                        fpm_event_set_timeout(q->ev, now);
                    } else { 
                        /*如果是運行一次的timer事件,移除隊列*/
                        q2 = q;
                        if (q->prev) {
                            q->prev->next = q->next;
                        }
                        if (q->next) {
                            q->next->prev = q->prev;
                        }
                        if (q == fpm_event_queue_timer) {
                            fpm_event_queue_timer = q->next;
                            if (fpm_event_queue_timer) {
                                fpm_event_queue_timer->prev = NULL;
                            }
                        }
                        q = q->next;
                        free(q2);
                        continue;
                    }
                }
            }
            q = q->next;
        }
    }
}
最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,461評論 6 532
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,538評論 3 417
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,423評論 0 375
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,991評論 1 312
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,761評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,207評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,268評論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,419評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,959評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,782評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,983評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,528評論 5 359
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,222評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,653評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,901評論 1 286
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,678評論 3 392
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,978評論 2 374

推薦閱讀更多精彩內容