微軟:單個(gè)巨大的git repo更好?

Brain Harry 是微軟 Team Services產(chǎn)品的掌舵人,他的頭銜是 Vice President for Cloud Developer Services。Team Services是個(gè)云上的服務(wù),但是也能夠在企業(yè)內(nèi)部部署,私有部署的話,名字叫做Team Foundation Services。這個(gè)產(chǎn)品支持了微軟內(nèi)部所有的研發(fā)團(tuán)隊(duì)的項(xiàng)目運(yùn)作,是微軟自己也在用的 ADLM 系統(tǒng)。和一般管理者不同的是,Harry喜歡寫博客,而且其博客不是在坐而論道,是干活滿滿的技術(shù)內(nèi)容。

5月底Harry大叔寫了一篇博客《The largest Git repo on the planet》,宣布經(jīng)過他們團(tuán)隊(duì)的努力,將Windows開發(fā)團(tuán)隊(duì)的代碼庫遷移到了 Git 上。這個(gè)單一的Git repo算是地球上最大的git倉庫了。里面包含 350 萬文件,總大小達(dá)到了 300GB 左右。Windows團(tuán)隊(duì)的4000多名工程師,現(xiàn)在有3500多人已經(jīng)在使用 git 了。在過去4個(gè)月中,該repo:

- 有超過25萬次的提交;
- 每天8421次(平均)push;
- 每個(gè)工作日(平均)有2500份pull request,有6600名代碼檢視人員;
- 4352個(gè)活躍的分支;
- 每天有1760個(gè)正式的build;

需要指出的是,Git 本身并不是為了管理如此大型的項(xiàng)目而開發(fā)的,因此微軟特地開發(fā)了“Git 虛擬文件系統(tǒng)”(簡稱 GVFS)來解決大規(guī)模git倉庫的性能問題。GVFS在微軟的build大會(huì)上出現(xiàn)過。并且微軟把 GVFS 開源到了github,同時(shí)也在讓git for windows客戶端來支持 GVFS,很快,Linux和Mac也會(huì)得到支持。

Microsoft love git :-)

Harry大叔還就一些技術(shù)問題和觀眾進(jìn)行了深入的探討:

1:從source depot 遷移到git,那庫的歷史記錄可以一起遷移嗎?Harry回答是:不會(huì)。Windows團(tuán)隊(duì)將以前的sd庫歸檔,新的git庫里面不包含以前的歷史提交信息。如果想看以前的歷史,那就到sd平臺里面去查看(sd就是微軟內(nèi)部使用的source depot)。

2:如果使用了 GVFS,那么git還是一個(gè)真正的分布式配置管理工具嗎?因?yàn)榈讓游募?qū)動(dòng)做了虛擬化,git只會(huì)把所需要的文件下載到本地,那是不是說工作時(shí)必須保證網(wǎng)絡(luò)連接到代碼中心?Harry大叔暫時(shí)沒有回答這個(gè)問題。

3:有人問:一個(gè)巨大的庫有什么好處呢?開發(fā)者如果可以自由訪問所有的代碼,那么他們就不會(huì)尊重各子系統(tǒng)的邊界,他們會(huì)搞出很多不好的代碼間的依賴關(guān)系出來;他個(gè)人傾向于使用很多獨(dú)立的小倉庫(Nano repo),然后再通過一個(gè)工具,對外展示一個(gè)full version出來,比如repo。Harry回答:微軟的Windows and Devces Group團(tuán)隊(duì)負(fù)責(zé)的范圍很廣,包括windows、xbox、phone、HoloLens等,總共有接近1000個(gè)git repo,GVFS的目標(biāo)是OS repo,里面保存的是操作系統(tǒng)的核心代碼,他們經(jīng)過分析后發(fā)現(xiàn),要對這個(gè)庫進(jìn)行分解是非常困難的,同時(shí),公司的workflow對這種多庫操作也是不兼容的。從 Hacker News 等渠道也可以看到,類似google、facebook這樣的大型公司也有類似的結(jié)論,并且他們有相應(yīng)的類似工具方案,來解決和微軟類似的問題。

4:也有人來砸場子的。有人在博客下面說:拜托!你搞搞清楚!Google的庫才是世界上最大的git repo。不過,Harry大叔耐心的給予解答:我們說的是 git repo。google確實(shí)有最大的單體代碼庫,它卻不是 git repo。Android的庫雖然用的是git,但是體體量沒有達(dá)到windows的這庫的級別。

5:還有人問:如此巨大的一個(gè)單體git repo,會(huì)不會(huì)影響編譯構(gòu)建的時(shí)間?Harry大叔回答:對Windows進(jìn)行rebuild all的時(shí)間確實(shí)非常長。但是,windows團(tuán)隊(duì)做了很多事情,讓開發(fā)人員不用編譯全部代碼,這里利用并行編譯和緩存技術(shù)。不過,巨大的代碼庫對編譯是有影響的,他以后會(huì)寫一個(gè)博客專門來介紹相關(guān)內(nèi)容。

微軟越來越開放了,除了雄踞github企業(yè)貢獻(xiàn)排行榜首位之外,對自己在工具方面的前沿研究也不再藏著掖著,這里有一篇微軟的文章:《Git at scale: Technical Scale Challenges》,介紹了微軟在大規(guī)模的git repo上的一些考慮和方案,有興趣的同志們?nèi)ピ敿?xì)研究一下吧。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲(chǔ)服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 229,836評論 6 540
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 99,275評論 3 428
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 177,904評論 0 383
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,633評論 1 317
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 72,368評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 55,736評論 1 328
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,740評論 3 446
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 42,919評論 0 289
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 49,481評論 1 335
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 41,235評論 3 358
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 43,427評論 1 374
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,968評論 5 363
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,656評論 3 348
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 35,055評論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,348評論 1 294
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 52,160評論 3 398
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 48,380評論 2 379

推薦閱讀更多精彩內(nèi)容