發簡信
IP屬地：山西
-
RoketMQ日志原理
RoketMQ日志代碼所在的子工程為rocketmq-logging，該子工程完成以下幾個功能 rocketmq實現了一套簡易的內部日志接口，通...
-
YARN中的搶占機制
關于搶占機制的說明及其源碼分析https://blog.csdn.net/zhanyuanlin/article/details/7151628...
-
FairScheduler中Fair Share計算方法
本文調度算法所采用的策略是fair策略，即公平調度算法，另外為簡單起見本文只考慮了一個資源即memory. Schedulable接口 調度器調...
-
FairScheduler中Queue管理FairScheduler的資源分配第一層調度的對象是FSQueue，即資源的分配都是在隊列中完成的。隊列抽象類FSQueue包含FSParen...
-
YARN中的資源預約機制
概念 YARN的資源預約機制是一種資源保證機制，當應用程序申請的資源無法得到滿足的時候，YARN會將當前的資源預約到一個node上，未來只要有一...
-
FifoScheduler分配容器的過程
FifoScheduler相對FairScheduler來說很簡單了，先從這個入手窺探YARN容器分配的基本過程。FifoScheduler只包...
-
Hadoop YARN資源調度中的relaxLocality屬性
YARN中的資源請求主要是指ApplicationMaster通過AMRMClientImpl向ResourceManager發起的容器請求。r...
-
Hadoop機架感知
Hadoop提供了機架（rack）的概念，Hadoop集群上面的一個node屬于哪一個rack，rack信息由網絡管理員配置。Hadoop提供機...
-
YARN中NodeManager資源下載的過程
ApplicationMaster提交startContianers的請求給NodeManager之后，NodeManager很重要的一個步驟是...