Go語言·Binary Tree算法之華山論劍

遷移自CSDN:http://blog.csdn.net/erlib/article/details/53956732

前言

在benchmarkgame(世界上最火的性能對比網站)上,Go語言一直有一個槽點,就是極其慢的binary tree性能,執行用時40秒 (我的機器上,16秒),與此對比,Java版本是6秒,那么問題來了:為什么慢得令人發指?我們來深入研究下慢的原因,然后看看能否對其進行改進。

對于binary tree算法中,最耗性能的地方就是海量的node分配和bottomUpTree()遞歸函數的調用,與這兩項對應的go的特性就是gc的goroutine的堆棧分配。

GC

這個世界沒有完美的GC,任何選擇都有代價,一般來說就是低延遲和高吞吐的權衡。


問題描述

Java采用的是分代GC,優點是node的分配非常輕量,缺點就是分代gc需要使用更多的內存空間,同時當對象被移動到tenured堆時,會發生大量的內存拷貝。 Go的gc不是分代的,因此在node的分配上需要消耗更多的資源。Go的gc選擇了超低的延遲,同時犧牲了部分吞吐,對于絕大多數應用來說,Go的選擇是非常正確的,但是對于binary tree這種算法來說,就不是很適合了。

解決方案

針對GC的優化,有兩個通用的解決方案就是提前分配合適的堆棧空間和對象復用。對于binary tree算法,就是Nodes的預先分配和復用。

Goroutine的堆棧

輕量的Goroutine是Go語言的靈魂所在


問題描述

為了讓goroutine盡可能輕量,go僅僅為每個goroutine分配了2KB的初始堆棧大小,在之后Go會根據需要動態的擴展堆棧大小。同樣,對于絕大多數場景,這種選擇都是非常正確的,但是針對binary tree算法,這種選擇就有了一些問題。

Go是在每次函數調用之前檢查goroutine的堆棧大小,如果發現當前堆棧不夠用,就會重新分配一個新的堆棧空間,然后將舊的堆棧拷貝到新的里。這種操作開銷是很小的,但是在binary tree中,bottomUpTree()基本上不做什么工作,調用卻是極其頻繁,這樣一來再小的開銷累積起來也會非常可觀。而且這個函數的調用是深遞歸,當堆棧需要增長時,可能會拷貝幾次,不僅僅是一次!解決方案 將bottomUpTree()改為非遞歸的函數,雖然不易實現,但是還是可以做到的。

新舊Binary tree實現對比

沒有對比,就沒有傷害!


舊版本代碼鏈接

運行用時:


> time go run old.go 20

stretch tree of depth 21 check: -1

2097152 trees of depth 4 check: -2097152

524288 trees of depth 6 check: -524288

131072 trees of depth 8 check: -131072

32768 trees of depth 10 check: -32768

8192 trees of depth 12 check: -8192

2048 trees of depth 14 check: -2048

512 trees of depth 16 check: -512

128 trees of depth 18 check: -128

32 trees of depth 20 check: -32

long lived tree of depth 20 check: -1

real0m16.279s

user1m47.569s

sys0m2.663s

新版本代碼鏈接

運行用時

time go run new.go 20
stretch tree of depth 21 check: -1

2097152 trees of depth 4 check: -2097152

524288 trees of depth 6 check: -524288

131072 trees of depth 8 check: -131072

32768 trees of depth 10 check: -32768

8192 trees of depth 12 check: -8192

2048 trees of depth 14 check: -2048

512 trees of depth 16 check: -512

128 trees of depth 18 check: -128

32 trees of depth 20 check: -32

long lived tree of depth 20 check: -1

dur: 1.71074946s



real0m1.914s

user0m10.149s

sys0m0.157s

結論

性能從16.28秒提升到了1.91秒,提升巨大!

這里提出的解決方案看似是針對binary tree,其實對于任何GC語言和使用場景來說都是通用的。

牢記這兩種解決方案吧:-內存空間預分配-對象復用

如果您喜歡這篇文章,請點擊喜歡;如果想及時獲得最新的咨詢,請點擊關注。您的支持是對作者都是最大的激勵,萬分感激!By 孫飛

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 230,578評論 6 544
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 99,701評論 3 429
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 178,691評論 0 383
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,974評論 1 318
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 72,694評論 6 413
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 56,026評論 1 329
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 44,015評論 3 450
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 43,193評論 0 290
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 49,719評論 1 336
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 41,442評論 3 360
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 43,668評論 1 374
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 39,151評論 5 365
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,846評論 3 351
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 35,255評論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,592評論 1 295
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 52,394評論 3 400
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 48,635評論 2 380

推薦閱讀更多精彩內容