Scheduler模塊主要負(fù)責(zé)stage的劃分,以及job的調(diào)度及submit。是整個spark計算流程中比較重要的部分。 ?1.從saveAsTextFile開始 ??閱讀...

IP屬地:廣東
Scheduler模塊主要負(fù)責(zé)stage的劃分,以及job的調(diào)度及submit。是整個spark計算流程中比較重要的部分。 ?1.從saveAsTextFile開始 ??閱讀...
這段時間處理了兩個比較有意思的MySQL問題,一個死鎖的,一個優(yōu)化的,陡然發(fā)現(xiàn)其實自己對MySQL的理解還不深入,很多運行機(jī)制也是知其然但不知其所以然,后續(xù)還需要好好惡補(bǔ)一下...