作者：michaelmalak
【編者的話】不論是 YARN、Mesos 還是 Omega，都是某種意義上為集群設(shè)計的操作系統(tǒng)，讓用戶像使用一臺單機(jī)一樣來使用整個集群。向下集中管理所有物理資源，向上承載各種集群化的應(yīng)用; 同時， docker 的出現(xiàn)也為云操作系統(tǒng)提供了更有力的支撐。
1984年，SUN 的 John Gage 說出了那句家喻戶曉的名言 “網(wǎng)絡(luò)就是計算機(jī)”
三十年后，Gage 的夢想“幾乎”成為的現(xiàn)實(shí)。特別是隨著 web 2.0 和云計算時代的到來，人們可以使用任何設(shè)備從任何地方通過互聯(lián)網(wǎng)訪問任何云端的資源。
不過即使在“云端”，實(shí)際上還是一堆物理服務(wù)器。每一臺服務(wù)器的 CPU 和內(nèi)存資源都是有限的，但是組合成集群就像云一樣無窮無盡。套用 Gage 的名言，可以說“集群就是計算機(jī)”。
當(dāng)單機(jī)的 CPU 性能和硬盤容量逐漸碰到了天花板，通過 Hadoop 這樣的集群化技術(shù)來突破單機(jī)性能瓶頸就越來越流行。當(dāng)然在 Hadoop 出現(xiàn)之前，集群方案早就應(yīng)用于高性能的生產(chǎn)系統(tǒng)，例如 Weblogic 或者集群化的 WEB 服務(wù)器（復(fù)雜均衡按照 round-robin 算法將流量發(fā)送到集群中的 Web 服務(wù)器上）。這些集群方案都針對特定場景設(shè)計，無法像通用的計算機(jī)一樣用來運(yùn)行各種不同的軟件。
Hadoop 是第一個具有通用的集群化計算平臺特征的技術(shù)，而且目前已經(jīng)發(fā)展地相當(dāng)成熟。隨著新的集群化計算技術(shù)層出不窮，例如 Spark、Storm 和 Cassandra，運(yùn)維人員希望能夠隔離它們以便更好的管理，同時，從節(jié)約成本的角度講， 大家又希望公司內(nèi)部各個團(tuán)隊能夠共用這些昂貴的計算資源。
目前解決這個問題的兩大法寶是 Hadoop YARN 和 Apache Mesos。Mesos 的設(shè)計受到了 Google 的 Omega 平臺啟發(fā)，而后者則來自 Google 內(nèi)部久經(jīng)考驗的Borg任務(wù)管理平臺。同樣的事情當(dāng)初也發(fā)聲在 Hadoop 之上，它就是受到了 Google 的 GFS 和 Big-Table 啟發(fā)。不論是 YARN、Mesos 還是 Omega，都是某種意義上為集群設(shè)計的操作系統(tǒng)，讓用戶像使用一臺單機(jī)一樣來使用整個集群。向下集中管理所有物理資源，向上承載各種集群化的應(yīng)用。
因為 YARN 本身與 Hadoop/Map Reduce v2 綁定，對于使用早期 Hadoop 版本的開發(fā)者，升級到 YARN 也許是一個比較容易的決定。理論上可以將 YARN 跑在 Mesos 上，不過有些人擔(dān)心隨之而來的兩層資源分配問題。
Mesos 可以支持大量的框架（插件），逐步在構(gòu)建一個快速增長的生態(tài)環(huán)境。例如 Twitter的 Aurora 就是用來在 Mesos 管理的集群上進(jìn)行任務(wù)調(diào)度，已經(jīng)成為了 Apache 的孵化器項目。此外 Ringmaster 則用來在 Mesos 上快速運(yùn)行 Cassandra 和 Spark。
Chronos 相當(dāng)于 Mesos 之上的 crontable，Marathon 則相當(dāng)于 init.d，讓大家用熟悉的方式來調(diào)度任務(wù)。
最激動人心的還是 Docker 與 mesos 的整合，幾乎讓 Mesos 可以運(yùn)行任何語言編寫的軟件。
Docker 的崛起本身和集群技術(shù)倒沒有直接關(guān)系，它首先被用來代替?zhèn)鹘y(tǒng)的 VM（虛擬機(jī)）。容器分享了底層操作系統(tǒng)，遠(yuǎn)比傳統(tǒng) VM 更加輕量。類似技術(shù)在2000年就出現(xiàn)了，那就是“jail”命令。Wiki 有關(guān)詞條描述了 35 年來 chroot 如何發(fā)展到 jails，最后的 Docker 和容器成為了集大成者。
Docker 化的應(yīng)用像一個 tar 壓縮包，在一臺普通的物理機(jī)上，你可以輕松地運(yùn)行數(shù)十個獨(dú)立的 Docker。對于一個由 Mesos 管理的集群，而且恰好你的應(yīng)用某種程度上使用了分布式的架構(gòu)，那么瞬間你的集群變成了一臺強(qiáng)大的大型機(jī)。其實(shí) tar 本身意思是 “tape archive”，就是過去大型機(jī)磁帶系統(tǒng)的文件格式。
使用 Docker 容器來完全取代傳統(tǒng)的 jar 或者 ear 文件，一夜間用 Mesos 來完全取代 weblogic，還是有點(diǎn)操之過急——目前傳統(tǒng)軟件的架構(gòu)依然是 web、計算邏輯和存儲分開部署。不過對于互聯(lián)網(wǎng)公司的后臺，用 Mesos 來承載 web 服務(wù)器集群應(yīng)付高并發(fā)業(yè)務(wù)，完全不是什么新鮮事兒了。
點(diǎn)擊查看英文原文
