一、高可用簡(jiǎn)介 Hadoop 高可用 (High Availability) 分為 HDFS 高可用和 YARN 高可用，兩者的實(shí)現(xiàn)基本類(lèi)似，但 HDFS NameNode ...
發(fā)簡(jiǎn)信
IP屬地：上海
-
Hadoop 系列（八）—— 基于 ZooKeeper 搭建 Hadoop 高可用集群
-
Hadoop 系列（七）—— HDFS Java API
一、 簡(jiǎn)介 想要使用 HDFS API，需要導(dǎo)入依賴(lài) hadoop-client。如果是 CDH 版本的 Hadoop，還需要額外指明其倉(cāng)庫(kù)地址： 二、API的使用 2.1 ...
-
Hadoop 系列（六）—— HDFS 常用 Shell 命令
1. 顯示當(dāng)前目錄結(jié)構(gòu) 2. 創(chuàng)建目錄 3. 刪除操作 4. 從本地加載文件到 HDFS 5. 從 HDFS 導(dǎo)出文件到本地 6. 查看文件內(nèi)容 7. 顯示文件的最后一千字節(jié)...
-
Hadoop 系列（五）—— Hadoop 集群環(huán)境搭建
一、集群規(guī)劃 這里搭建一個(gè) 3 節(jié)點(diǎn)的 Hadoop 集群，其中三臺(tái)主機(jī)均部署 DataNode 和 NodeManager 服務(wù)，但只有 hadoop001 上部署 Nam...
-
Hadoop 系列（四）—— Hadoop 開(kāi)發(fā)環(huán)境搭建
一、前置條件 Hadoop 的運(yùn)行依賴(lài) JDK，需要預(yù)先安裝，安裝步驟見(jiàn)： Linux 下 JDK 的安裝 二、配置免密登錄 Hadoop 組件之間需要基于 SSH 進(jìn)行通訊...
-
Hadoop 系列（三）—— 分布式計(jì)算框架 MapReduce
一、MapReduce概述 Hadoop MapReduce 是一個(gè)分布式計(jì)算框架，用于編寫(xiě)批處理應(yīng)用程序。編寫(xiě)好的程序可以提交到 Hadoop 集群上用于并行處理大規(guī)模的數(shù)...
-
Hadoop 系列（二）—— 集群資源管理器 YARN一、hadoop yarn 簡(jiǎn)介 Apache YARN (Yet Another Resource Negotiator) 是 hadoop 2.0 引入的集群資源管理系統(tǒng)...
-
Hadoop 系列（一）—— 分布式文件系統(tǒng) HDFS一、介紹 HDFS （Hadoop Distributed File System）是 Hadoop 下的分布式文件系統(tǒng)，具有高容錯(cuò)、高吞吐量等特性，可以部署在低成本的硬件上...
-
函數(shù)防抖和節(jié)流
在前端開(kāi)發(fā)的過(guò)程中，我們經(jīng)常會(huì)需要綁定一些持續(xù)觸發(fā)的事件，如 resize、scroll、mousemove 等等，但有些時(shí)候我們并不希望在事件持續(xù)觸發(fā)的過(guò)程中那么頻繁地去執(zhí)...
-
[教程] PDF 能一鍵生成書(shū)簽，PdgCntEditor了解一下~沒(méi)有書(shū)簽的電子書(shū)查閱起來(lái)挺不方便的。所以，在筆者看來(lái)，一本電子書(shū)沒(méi)有了書(shū)簽，感覺(jué)便沒(méi)有了她的靈魂。在本文，筆者將為大家推薦一款 PDF / PDG 電子書(shū)書(shū)簽一鍵生成工具及其...
-
大數(shù)據(jù)學(xué)習(xí)路線
一、大數(shù)據(jù)處理流程 上圖是一個(gè)簡(jiǎn)化的大數(shù)據(jù)處理流程圖，大數(shù)據(jù)處理的主要流程包括數(shù)據(jù)收集、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理、數(shù)據(jù)應(yīng)用等主要環(huán)節(jié)。下面我們逐一對(duì)各個(gè)環(huán)節(jié)所需要的技術(shù)棧進(jìn)行講解：...
-
開(kāi)源項(xiàng)目——大數(shù)據(jù)入門(mén)指南開(kāi)源項(xiàng)目地址：https://github.com/heibaiying/BigData-Notes ?? 前 言 大數(shù)據(jù)技術(shù)棧思維導(dǎo)圖 大數(shù)據(jù)常用軟件安裝指南 一、H...
-
Spring 5.x 、Spring Boot 2.x 、Spring Cloud 與常用技術(shù)棧整合
本項(xiàng)目倉(cāng)庫(kù)提供spring、spring-boot、spring-cloud 的常用整合用例。每個(gè)用例都提供詳細(xì)的圖文說(shuō)明，并給出官方文檔的具體鏈接作為參考。隨著spring...
-
如果你是程序員，或者有一顆喜歡寫(xiě)程序的心，喜歡分享技術(shù)干貨、項(xiàng)目經(jīng)驗(yàn)、程序員日常囧事等等，歡迎投稿《程序員》專(zhuān)題。 專(zhuān)題主編：小彤花園 http://www.lxweimin.com/users/4a4eb4feee62/ 【程序員】專(zhuān)題拒稿指北：http://www.lxweimin.com/p/7c8b33b5f63b 投稿須知： 1.收錄相關(guān)技術(shù)文章，但不限于技術(shù)，也可以是項(xiàng)目經(jīng)驗(yàn)類(lèi)的文章和程序員日常。 2.文章內(nèi)不得有任何推廣信息。包括但不限于公眾號(hào)、微博、微信，更不得在通過(guò)投稿后再修改文章加入推廣信息。你可以將這些推廣以及個(gè)人信息放在個(gè)人主頁(yè)介紹里。 3.字?jǐn)?shù)極少，段落混亂，大段代碼沒(méi)有放到代碼框的文章不收錄 4.不相關(guān)的內(nèi)容不收錄，請(qǐng)確認(rèn)文章內(nèi)容和本專(zhuān)題相關(guān) 目前針對(duì)優(yōu)質(zhì)作者及愛(ài)好者，開(kāi)設(shè)了官方程序員微信群，希望加入請(qǐng)發(fā)簡(jiǎn)信給主編小彤花園索取個(gè)人微信，主編會(huì)將你加入到【程序員】微信群，分享內(nèi)容，收獲知識(shí)。添加微信時(shí)備注昵稱(chēng)。
-
Hi，很高興在@IT·互聯(lián)網(wǎng)專(zhuān)題遇見(jiàn)你。 收錄范圍：收錄IT&互聯(lián)網(wǎng)行業(yè)觀察與思考，數(shù)碼產(chǎn)品極客體驗(yàn)分析等類(lèi)型文章 投稿須知：http://www.lxweimin.com/p/4edc76104c27 專(zhuān)題主編：@若錦 http://www.lxweimin.com/u/e4c63b354a77 官方社群：可聯(lián)系添加 @若錦 加入專(zhuān)題官方社群交流、學(xué)習(xí)，添加時(shí)備注簡(jiǎn)書(shū)ID。
