發(fā)簡(jiǎn)信
IP屬地：江西
-
Raft 木筏求生 游戲記錄通過這個(gè)游戲有一段時(shí)間了，游戲玩家出生在一個(gè)簡(jiǎn)單幾塊模板拼裝的木筏上，初始送了玩家一把鉤子。需要通過這個(gè)鉤子撈取海上的屋子不斷攀升科技，建造更多...
-
將近6年過去了，你變得怎么樣了？
無(wú)意間想起了簡(jiǎn)書這個(gè)平臺(tái)，翻看了一下上一篇文章的時(shí)間，發(fā)現(xiàn)竟然是“2018.10.29 22:39”。時(shí)間過得真快，轉(zhuǎn)眼間已經(jīng)快六年了。 我是一...
-
Spark Streaming實(shí)時(shí)流處理-4.分布式日志收集框架Flume分布式日志收集框架Flume 1.業(yè)務(wù)現(xiàn)狀分析 WebServer/ApplicationServer分散在各個(gè)機(jī)器上 想在大數(shù)據(jù)平臺(tái)Hadoo...
-
Spark Streaming實(shí)時(shí)流處理-3.分布式消息隊(duì)列Kafka
0. 目錄 Kafka概述 Kafka架構(gòu)及核心概念 Kafka部署及使用 Kafka容錯(cuò)性測(cè)試 Kafka API編程 Kafka實(shí)戰(zhàn) 1. ...
-
Spark Streaming實(shí)時(shí)流處理-2. Spark實(shí)戰(zhàn)環(huán)境搭建
0. 目錄 Spark源碼編譯 Spark環(huán)境搭建 Spark簡(jiǎn)單使用 1. Spark源碼編譯 http://spark.apache.org...
-
Spark Streaming實(shí)時(shí)流處理-1.初識(shí)實(shí)時(shí)流處理目錄 業(yè)務(wù)現(xiàn)狀分析 實(shí)時(shí)流處理產(chǎn)生背景 實(shí)時(shí)流處理概述 離線計(jì)算與實(shí)時(shí)計(jì)算對(duì)比 實(shí)時(shí)流處理框架對(duì)比 實(shí)時(shí)流處理架構(gòu)與技術(shù)選型 實(shí)時(shí)流處理在企業(yè)中...
-
資源調(diào)度框架YARN1. YARN產(chǎn)生背景 Hadoop1.x時(shí)：MapReduce1.x存在問題：?jiǎn)吸c(diǎn)故障&節(jié)點(diǎn)壓力大不易擴(kuò)展&不能支持除了MR以外的任務(wù)MapR...
-
分布式文件系統(tǒng)HDFS0. 普通分布式文件系統(tǒng)設(shè)計(jì)思路 文件以多副本的方式，整個(gè)文件存放到單機(jī)中。 缺點(diǎn):文件不管有多大都存儲(chǔ)在一個(gè)節(jié)點(diǎn)上，在進(jìn)行數(shù)據(jù)處理的時(shí)候很難進(jìn)...
-
Hadoop 概述1. hadoop是什么？ Apache開源軟件 計(jì)算框架--》分布式、可靠、可伸縮（任何節(jié)點(diǎn)刪除添加不會(huì)影響） 搜索引擎、海量數(shù)據(jù)存儲(chǔ) 2. ...