該插件是將項(xiàng)目中引用的第三方的jar包同時(shí)打入jar文件 步驟： 1. Eclipse在線(xiàn)更新方法 Help > Install New Software > Add， na...
發(fā)簡(jiǎn)信
IP屬地：重慶
-
eclipse在線(xiàn)安裝Fat jar插件 -
spark job， stage ，task介紹1. spark 如何執(zhí)行程序？ 首先看下spark 的部署圖： 節(jié)點(diǎn)類(lèi)型有： 1. master 節(jié)點(diǎn)： 常駐master進(jìn)程，負(fù)責(zé)管理全部worker節(jié)點(diǎn)。 2. wor...
-
Spark運(yùn)行原理
前兩篇我們講了spark的基礎(chǔ)知識(shí)，包括spark的體系結(jié)構(gòu)、執(zhí)行框架、spark的基本數(shù)據(jù)類(lèi)型以及spark中stage的劃分等等。本篇要介紹spark運(yùn)行的原理。包括sp...
-
-
Spark內(nèi)核源碼深度剖析：基于Yarn的兩種提交模式深度剖析Spark的三種提交模式 1、Spark內(nèi)核架構(gòu)，其實(shí)就是第一種模式，standalone模式，基于Spark自己的Master-Worker集群。 2、第二種，是基于YAR...
-
-
Hive數(shù)據(jù)管理
Hive是建立在Hadoop上的數(shù)據(jù)倉(cāng)庫(kù)基礎(chǔ)架構(gòu)。它提供了一系列的工具，用來(lái)進(jìn)行數(shù)據(jù)提取、轉(zhuǎn)換、加載，這是一種可以存儲(chǔ)、查詢(xún)和分析存儲(chǔ)在Hadoop中的大規(guī)模數(shù)據(jù)機(jī)制。可以把...
-
Hbase數(shù)據(jù)管理
Hbase就是Hadoop database。與傳統(tǒng)的mysql、oracle究竟有什么差別。即列式數(shù)據(jù)與行式數(shù)據(jù)由什么區(qū)別。NoSql數(shù)據(jù)庫(kù)與傳統(tǒng)關(guān)系型數(shù)據(jù)由什么區(qū)別： H...
-
hadoop核心架構(gòu)通過(guò)對(duì)Hadoop分布式計(jì)算平臺(tái)最核心的分布式文件系統(tǒng)HDFS、MapReduce處理過(guò)程，以及數(shù)據(jù)倉(cāng)庫(kù)工具Hive和分布式數(shù)據(jù)庫(kù)Hbase的介紹，基本涵蓋了Hadoop分布...
-
Scala學(xué)習(xí)筆記：Actor & Future
關(guān)于scala的Actor和經(jīng)常配合使用的Future Actor Creating Actor & best practice 步驟一：實(shí)現(xiàn)traitakka.actor....
-
<a href="https://links.jianshu.com/go?to=http%3A%2F%2Fblog.wu8685.com" target="_blank">http://blog.wu8685.com</a>
-
微信公眾號(hào)：Tsy遠(yuǎn)<br><br>Github：<a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgithub.com%2Ftsy12321" target="_blank">https://github.com/tsy12321</a><br><br>注意：<br>所有文章及以后更新已經(jīng)遷移至掘金，地址是 <a href="https://links.jianshu.com/go?to=https%3A%2F%2Fjuejin.im%2Fuser%2F5731de5071cfe4006cc024cf" target="_blank">https://juejin.im/user/5731de5071cfe4006cc024cf</a>
-
深入Java源碼解析容器類(lèi)List、Set、Map本篇文章帶你從Java源碼深入解析關(guān)于Java容器的概念。 參考文獻(xiàn)： Java容器相關(guān)知識(shí)全面總結(jié) Java官方API文檔 1 常用容器繼承關(guān)系圖 先上一張網(wǎng)上的繼承關(guān)系圖...
-
一個(gè)人的咖啡<br><br>ps：一個(gè)渣渣，喜好讀書(shū)的時(shí)候記點(diǎn)筆記。如果有希望一起交流學(xué)習(xí)的，可以隨時(shí)聯(lián)系～
-
如果你是程序員，或者有一顆喜歡寫(xiě)程序的心，喜歡分享技術(shù)干貨、項(xiàng)目經(jīng)驗(yàn)、程序員日常囧事等等，歡迎投稿《程序員》專(zhuān)題。 專(zhuān)題主編：小彤花園 http://www.lxweimin.com/users/4a4eb4feee62/ 【程序員】專(zhuān)題拒稿指北：http://www.lxweimin.com/p/7c8b33b5f63b 投稿須知： 1.收錄相關(guān)技術(shù)文章，但不限于技術(shù)，也可以是項(xiàng)目經(jīng)驗(yàn)類(lèi)的文章和程序員日常。 2.文章內(nèi)不得有任何推廣信息。包括但不限于公眾號(hào)、微博、微信，更不得在通過(guò)投稿后再修改文章加入推廣信息。你可以將這些推廣以及個(gè)人信息放在個(gè)人主頁(yè)介紹里。 3.字?jǐn)?shù)極少，段落混亂，大段代碼沒(méi)有放到代碼框的文章不收錄 4.不相關(guān)的內(nèi)容不收錄，請(qǐng)確認(rèn)文章內(nèi)容和本專(zhuān)題相關(guān) 目前針對(duì)優(yōu)質(zhì)作者及愛(ài)好者，開(kāi)設(shè)了官方程序員微信群，希望加入請(qǐng)發(fā)簡(jiǎn)信給主編小彤花園索取個(gè)人微信，主編會(huì)將你加入到【程序員】微信群，分享內(nèi)容，收獲知識(shí)。添加微信時(shí)備注昵稱(chēng)。
