Golang Context分析

[TOC]

Golang Context分析

Context背景 和 適用場景

golang在1.6.2的時候還沒有自己的context,在1.7的版本中就把golang.org/x/net/context包被加入到了官方的庫中。golang 的 Context包,是專門用來簡化對于處理單個請求的多個goroutine之間與請求域的數據、取消信號、截止時間等相關操作,這些操作可能涉及多個 API 調用。

比如有一個網絡請求Request,每個Request都需要開啟一個goroutine做一些事情,這些goroutine又可能會開啟其他的goroutine。這樣的話, 我們就可以通過Context,來跟蹤這些goroutine,并且通過Context來控制他們的目的,這就是Go語言為我們提供的Context,中文可以稱之為“上下文”。

另外一個實際例子是,在Go服務器程序中,每個請求都會有一個goroutine去處理。然而,處理程序往往還需要創建額外的goroutine去訪問后端資源,比如數據庫、RPC服務等。由于這些goroutine都是在處理同一個請求,所以它們往往需要訪問一些共享的資源,比如用戶身份信息、認證token、請求截止時間等。而且如果請求超時或者被取消后,所有的goroutine都應該馬上退出并且釋放相關的資源。這種情況也需要用Context來為我們取消掉所有goroutine

如果要使用可以通過 go get golang.org/x/net/context 命令獲取這個包。

Context 定義

ontext的主要數據結構是一種嵌套的結構或者說是單向的繼承關系的結構,比如最初的context是一個小盒子,里面裝了一些數據,之后從這個context繼承下來的children就像在原本的context中又套上了一個盒子,然后里面裝著一些自己的數據?;蛘哒fcontext是一種分層的結構,根據使用場景的不同,每一層context都具備有一些不同的特性,這種層級式的組織也使得context易于擴展,職責清晰。

context 包的核心是 struct Context,聲明如下:

type Context interface {

Deadline() (deadline time.Time, ok bool)

Done() <-chan struct{}

Err() error

Value(key interface{}) interface{}

}

可以看到Context是一個interface,在golang里面,interface是一個使用非常廣泛的結構,它可以接納任何類型。Context定義很簡單,一共4個方法,我們需要能夠很好的理解這幾個方法

  1. Deadline方法是獲取設置的截止時間的意思,第一個返回式是截止時間,到了這個時間點,Context會自動發起取消請求;第二個返回值ok==false時表示沒有設置截止時間,如果需要取消的話,需要調用取消函數進行取消。

  2. Done方法返回一個只讀的chan,類型為struct{},我們在goroutine中,如果該方法返回的chan可以讀取,則意味著parent context已經發起了取消請求,我們通過Done方法收到這個信號后,就應該做清理操作,然后退出goroutine,釋放資源。之后,Err 方法會返回一個錯誤,告知為什么 Context 被取消。

  3. Err方法返回取消的錯誤原因,因為什么Context被取消。

  4. Value方法獲取該Context上綁定的值,是一個鍵值對,所以要通過一個Key才可以獲取對應的值,這個值一般是線程安全的。

Context 的實現方法

Context 雖然是個接口,但是并不需要使用方實現,golang內置的context 包,已經幫我們實現了2個方法,一般在代碼中,開始上下文的時候都是以這兩個作為最頂層的parent context,然后再衍生出子context。這些 Context 對象形成一棵樹:當一個 Context 對象被取消時,繼承自它的所有 Context 都會被取消。兩個實現如下:

var (
    background = new(emptyCtx)

    todo = new(emptyCtx)
)

func Background() Context {

    return background

}

func TODO() Context {

    return todo
}

一個是Background,主要用于main函數、初始化以及測試代碼中,作為Context這個樹結構的最頂層的Context,也就是根Context,它不能被取消。

一個是TODO,如果我們不知道該使用什么Context的時候,可以使用這個,但是實際應用中,暫時還沒有使用過這個TODO。

他們兩個本質上都是emptyCtx結構體類型,是一個不可取消,沒有設置截止時間,沒有攜帶任何值的Context。

type emptyCtx int

func (*emptyCtx) Deadline() (deadline time.Time, ok bool) {

    return
}

func (*emptyCtx) Done() <-chan struct{} {

    return nil
}

func (*emptyCtx) Err() error {

    return nil
}

func (*emptyCtx) Value(key interface{}) interface{} {

    return nil
}

Context 的 繼承

有了如上的根Context,那么是如何衍生更多的子Context的呢?這就要靠context包為我們提供的With系列的函數了。

func WithCancel(parent Context) (ctx Context, cancel CancelFunc)

func WithDeadline(parent Context, deadline time.Time) (Context, CancelFunc)

func WithTimeout(parent Context, timeout time.Duration) (Context, CancelFunc)

func WithValue(parent Context, key, val interface{}) Context

通過這些函數,就創建了一顆Context樹,樹的每個節點都可以有任意多個子節點,節點層級可以有任意多個。

WithCancel函數,傳遞一個父Context作為參數,返回子Context,以及一個取消函數用來取消Context。

WithDeadline函數,和WithCancel差不多,它會多傳遞一個截止時間參數,意味著到了這個時間點,會自動取消Context,當然我們也可以不等到這個時候,可以提前通過取消函數進行取消。

WithTimeout和WithDeadline基本上一樣,這個表示是超時自動取消,是多少時間后自動取消Context的意思。

WithValue函數和取消Context無關,它是為了生成一個綁定了一個鍵值對數據的Context,這個綁定的數據可以通過Context.Value方法訪問到,這是我們實際用經常要用到的技巧,一般我們想要通過上下文來傳遞數據時,可以通過這個方法,如我們需要tarce追蹤系統調用棧的時候。

With 系列函數詳解

WithCancel

context.WithCancel生成了一個withCancel的實例以及一個cancelFuc,這個函數就是用來關閉ctxWithCancel中的 Done channel 函數。

下面來分析下源碼實現,首先看看初始化,如下:

func newCancelCtx(parent Context) cancelCtx {
    return cancelCtx{
        Context: parent,
        done:    make(chan struct{}),
    }
}

func WithCancel(parent Context) (ctx Context, cancel CancelFunc) {
    c := newCancelCtx(parent)
    propagateCancel(parent, &c)
    return &c, func() { c.cancel(true, Canceled) }
}

newCancelCtx返回一個初始化的cancelCtx,cancelCtx結構體繼承了Context,實現了canceler方法:

//*cancelCtx 和 *timerCtx 都實現了canceler接口,實現該接口的類型都可以被直接canceled
type canceler interface {
    cancel(removeFromParent bool, err error)
    Done() <-chan struct{}
}


type cancelCtx struct {
    Context
    done chan struct{} // closed by the first cancel call.
    mu       sync.Mutex
    children map[canceler]bool // set to nil by the first cancel call
    err      error             // 當其被cancel時將會把err設置為非nil
}

func (c *cancelCtx) Done() <-chan struct{} {
    return c.done
}

func (c *cancelCtx) Err() error {
    c.mu.Lock()
    defer c.mu.Unlock()
    return c.err
}

func (c *cancelCtx) String() string {
    return fmt.Sprintf("%v.WithCancel", c.Context)
}

//核心是關閉c.done
//同時會設置c.err = err, c.children = nil
//依次遍歷c.children,每個child分別cancel
//如果設置了removeFromParent,則將c從其parent的children中刪除
func (c *cancelCtx) cancel(removeFromParent bool, err error) {
    if err == nil {
        panic("context: internal error: missing cancel error")
    }
    c.mu.Lock()
    if c.err != nil {
        c.mu.Unlock()
        return // already canceled
    }
    c.err = err
    close(c.done)
    for child := range c.children {
        // NOTE: acquiring the child's lock while holding parent's lock.
        child.cancel(false, err)
    }
    c.children = nil
    c.mu.Unlock()

    if removeFromParent {
        removeChild(c.Context, c) // 從此處可以看到 cancelCtx的Context項是一個類似于parent的概念
    }
}

可以看到,所有的children都存在一個map中;Done方法會返回其中的done channel, 而另外的cancel方法會關閉Done channel并且逐層向下遍歷,關閉children的channel,并且將當前canceler從parent中移除。

WithCancel初始化一個cancelCtx的同時,還執行了propagateCancel方法,最后返回一個cancel function。

propagateCancel 方法定義如下:

// propagateCancel arranges for child to be canceled when parent is.
func propagateCancel(parent Context, child canceler) {
    if parent.Done() == nil {
        return // parent is never canceled
    }
    if p, ok := parentCancelCtx(parent); ok {
        p.mu.Lock()
        if p.err != nil {
            // parent has already been canceled
            child.cancel(false, p.err)
        } else {
            if p.children == nil {
                p.children = make(map[canceler]struct{})
            }
            p.children[child] = struct{}{}
        }
        p.mu.Unlock()
    } else {
        go func() {
            select {
            case <-parent.Done():
                child.cancel(false, parent.Err())
            case <-child.Done():
            }
        }()
    }
}

propagateCancel 的含義就是傳遞cancel,從當前傳入的parent開始(包括該parent),向上查找最近的一個可以被cancel的parent, 如果找到的parent已經被cancel,則將方才傳入的child樹給cancel掉,否則,將child節點直接連接為找到的parent的children中(Context字段不變,即向上的父親指針不變,但是向下的孩子指針變直接了); 如果沒有找到最近的可以被cancel的parent,即其上都不可被cancel,則啟動一個goroutine等待傳入的parent終止,則cancel傳入的child樹,或者等待傳入的child終結。

WithDeadLine

在withCancel的基礎上進行的擴展,如果時間到了之后就進行cancel的操作,具體的操作流程基本上與withCancel一致,只不過控制cancel函數調用的時機是有一個timeout的channel所控制的。

Context 使用原則 和 技巧

  • 不要把Context放在結構體中,要以參數的方式傳遞,parent Context一般為Background
  • 應該要把Context作為第一個參數傳遞給入口請求和出口請求鏈路上的每一個函數,放在第一位,變量名建議都統一,如ctx。
  • 給一個函數方法傳遞Context的時候,不要傳遞nil,否則在tarce追蹤的時候,就會斷了連接
  • Context的Value相關方法應該傳遞必須的數據,不要什么數據都使用這個傳遞
  • Context是線程安全的,可以放心的在多個goroutine中傳遞
  • 可以把一個 Context 對象傳遞給任意個數的 gorotuine,對它執行 取消 操作時,所有 goroutine 都會接收到取消信號。

Context的常用方法實例

  1. 調用Context Done方法取消

    func Stream(ctx context.Context, out chan<- Value) error {
    
        for {
            v, err := DoSomething(ctx)
    
            if err != nil {
                return err
            }
            select {
            case <-ctx.Done():
    
                return ctx.Err()
            case out <- v:
            }
        }
    }
    
    
  2. 通過 context.WithValue 來傳值

    func main() {
        ctx, cancel := context.WithCancel(context.Background())
    
        valueCtx := context.WithValue(ctx, key, "add value")
    
        go watch(valueCtx)
        time.Sleep(10 * time.Second)
        cancel()
    
        time.Sleep(5 * time.Second)
    }
    
    func watch(ctx context.Context) {
        for {
            select {
            case <-ctx.Done():
                //get value
                fmt.Println(ctx.Value(key), "is cancel")
    
                return
            default:
                //get value
                fmt.Println(ctx.Value(key), "int goroutine")
    
                time.Sleep(2 * time.Second)
            }
        }
    }
    
    
  3. 超時取消 context.WithTimeout

    package main
    
    import (
        "fmt"
        "sync"
        "time"
    
        "golang.org/x/net/context"
    )
    
    var (
        wg sync.WaitGroup
    )
    
    func work(ctx context.Context) error {
        defer wg.Done()
    
        for i := 0; i < 1000; i++ {
            select {
            case <-time.After(2 * time.Second):
                fmt.Println("Doing some work ", i)
    
            // we received the signal of cancelation in this channel
            case <-ctx.Done():
                fmt.Println("Cancel the context ", i)
                return ctx.Err()
            }
        }
        return nil
    }
    
    func main() {
        ctx, cancel := context.WithTimeout(context.Background(), 4*time.Second)
        defer cancel()
    
        fmt.Println("Hey, I'm going to do some work")
    
        wg.Add(1)
        go work(ctx)
        wg.Wait()
    
        fmt.Println("Finished. I'm going home")
    }
    
    
  4. 截止時間 取消 context.WithDeadline

    package main
    
    import (
        "context"
        "fmt"
        "time"
    )
    
    func main() {
        d := time.Now().Add(1 * time.Second)
        ctx, cancel := context.WithDeadline(context.Background(), d)
    
        // Even though ctx will be expired, it is good practice to call its
        // cancelation function in any case. Failure to do so may keep the
        // context and its parent alive longer than necessary.
        defer cancel()
    
        select {
        case <-time.After(2 * time.Second):
            fmt.Println("oversleep")
        case <-ctx.Done():
            fmt.Println(ctx.Err())
        }
    }
    
    

參考

飛雪無情的博客

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,443評論 6 532
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,530評論 3 416
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事?!?“怎么了?”我有些...
    開封第一講書人閱讀 176,407評論 0 375
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,981評論 1 312
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,759評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,204評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,263評論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,415評論 0 288
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 48,955評論 1 336
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,782評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 42,983評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,528評論 5 359
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,222評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,650評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,892評論 1 286
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,675評論 3 392
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 47,967評論 2 374

推薦閱讀更多精彩內容

  • 為什么需要context 在并發程序中,由于超時、取消操作或者一些異常情況,往往需要進行搶占操作或者中斷后續操作。...
    陳二狗想吃肉閱讀 556評論 0 2
  • context context包定義了上下文類型,該類型在API邊界之間以及進程之間傳遞截止日期,取消信號和其他請...
    DevilRoshan閱讀 387評論 0 0
  • 輸入與輸出-fmt包 時間與日期-time包 命令行參數解析-flag包 日志-log包 IO操作-os包 IO操...
    思考的山羊閱讀 6,358評論 0 5
  • 在工程化的Go語言開發項目中,Go語言的源碼復用是建立在包(package)基礎之上的。本文介紹了Go語言中如何定...
    雪上霜閱讀 241評論 0 0
  • 在GO中,我們需要有能力管理并發運行中的goroutine,主要是指它的生命周期。那些失去控制的goroutine...
    浩軒01閱讀 292評論 0 0