IP屬地：廣東
-
spark 啟動過程spark1.4.1 啟動過程 今天稍微沒那么忙了，趁著這個時間，準備把spark的啟動過程總結一下（），分享給大家。現在使用的spark1.4...
-
Hdfs讀寫原理介紹 首先，它是一個文件系統，有一個統一的命名空間——目錄樹 其次，它是分布式的，由很多服務器聯合起來實現功能； 1.hdfs文件系統會給客戶端...
-
spark streaming 與kafaka結合 低階 高階api的一些理解
1. createStream會使用 Receiver；而createDirectStream不會,數據會通過driver接收。 2.creat...
-
cdh部署
0、注意安裝時需要給server免密ssh登陸所有機器的權限 需要用到的命令：ssh -p 端口號 用戶@ip scp -P 端口號 文件名...
-
BlockManager架構簡介 BlockManager 是一個嵌入在 spark 中的 key-value型分布式存儲系統，是為 spark 量身打造的，Block...
-
Shuffle
# 簡介 shuffle 是spark 計算核心的的部分之一，很多優化也是基于shuffle來做，所以了解它也是必要的。stage按照是否是寬依...
-
druid 架構druid被設計成一個系統組合，每個系統都有不同的角色，一起構成一個工作系統。 結構圖
-
-
durid 概念
概念 druid是基于olap的數據庫查詢系統。有點類似現在開源的kylin。下面我先簡單介紹druid的一下基本概念，一些我認為需要重點展開和...