重啟service httpd restart時(shí)候無(wú)法完全重啟，出現(xiàn)錯(cuò)誤 Starting httpd: httpd: Could not reliably determin...
發(fā)簡(jiǎn)信
IP屬地：山東
-
重啟service httpd restart
-
安裝 pip install mysql-python時(shí)候報(bào)錯(cuò)
先用yum安裝myslq-devel，命令為：yum install mysql-devel -y 然后再輸入pip install mysql-python，就可以正常安裝...
-
cloudera-manager-agent-5
在配置cdh集群時(shí)候，以rpm包的方式安裝 cloudera-manager-agent-5....的時(shí)候一直報(bào)錯(cuò)無(wú)法安裝，網(wǎng)上找了很多方法 我自己的辦法是：在后面加上"--...
-
ssh免密登錄
打通ssh的時(shí)候通過(guò)scp將各節(jié)點(diǎn)文件拷貝到其他節(jié)點(diǎn)時(shí)候，一直錯(cuò)，后來(lái)我換了另一種方法。先在本節(jié)點(diǎn)中登錄其他節(jié)點(diǎn) 【XXXX@Xxxxx】#ssh192.168.x.x(其他...
-
虛擬機(jī)Ubuntu系統(tǒng)搭建Hadoop偽分布式常見(jiàn)問(wèn)題
一， 啟動(dòng)hadoop:start-dfs.sh報(bào)錯(cuò)：Error: JAVA_HOME is not set and could not be found. 解決方法: 編輯...
-
MapReduce常見(jiàn)問(wèn)題
1. 空指針異常 2. exceptionin thread “main” java.lang.UnsatisfiedLinkError:org.apache.hadoop....
-
kettle安裝之后閃退
下載完kettle,雙擊打開(kāi)Spoon.bat,后發(fā)現(xiàn)閃退，出現(xiàn)個(gè)黑框就退了，上網(wǎng)查了一下是因?yàn)槟J(rèn)內(nèi)存配置太大，所以需要更改一下； 具體辦法： 1，用Notepad++,或...
-
NomeNode的fsimage與editlog
Namenode主要維護(hù)兩個(gè)文件，一個(gè)是 fsimage，一個(gè)是 editlog。 fsimage保存了最新的元數(shù)據(jù)檢查點(diǎn)，包含了整個(gè)HDFS文件系統(tǒng)的所有目錄和文件的信息。...
-
HDFS的常用命令總結(jié)
我是個(gè)愛(ài)總結(jié)的乖孩子，各個(gè)命令CSDN和官方文檔上都有，我總結(jié)了自己操作過(guò)，用著順手常用的命令，也希望給其他同學(xué)有所幫助，希望各位前輩大佬多多批評(píng)。=，= ? cat：hdf...
-
某廠資深專家，內(nèi)容專業(yè)，領(lǐng)域?qū)Ｗⅲ淖挚陀^，技術(shù)深度，行業(yè)領(lǐng)先
-
hadoop的shuffle過(guò)程總結(jié)
我盡量用好懂的方式總結(jié)一下，踩過(guò)坑的前輩多提意見(jiàn)，同時(shí)也希望為各位同學(xué)提供幫助。 簡(jiǎn)單的打個(gè)比方，shuffle就是順豐快遞，將map端的數(shù)據(jù)經(jīng)過(guò)排序分類等一些列的操作，到r...
-
hive環(huán)境搭建Hive2.1.1安裝部署 一、Hive 運(yùn)行模式 與Hadoop類似，Hive也有 3 種運(yùn)行模式： 1. 內(nèi)嵌模式 將元數(shù)據(jù)保存在本地內(nèi)嵌的 Derby數(shù)據(jù)庫(kù)中，這是使用...
-
sqooph基礎(chǔ)+環(huán)境搭建+基本語(yǔ)句
有錯(cuò)歡迎糾正補(bǔ)充，愛(ài)你的任三爺。 1.什么是sqoop? Sqoop是一個(gè)轉(zhuǎn)換工具，用于在關(guān)系型數(shù)據(jù)庫(kù)與HDFS之間進(jìn)行數(shù)據(jù)轉(zhuǎn)換。就是把MySQL之類的關(guān)系型數(shù)據(jù)庫(kù)的數(shù)據(jù)類型...
-
爬蟲(chóng)模擬登陸代碼
學(xué)習(xí)新知識(shí)的時(shí)候，可能當(dāng)時(shí)無(wú)法立即理解，可是經(jīng)歷過(guò)這一痛苦的階段再回來(lái)看看，就有種柳暗花明的感覺(jué) 。所以要及時(shí)記筆記才對(duì)啊年輕人。 —— —— 任三爺 #coding=ut...
-
Elasticsearch環(huán)境搭建
學(xué)習(xí)新知識(shí)的時(shí)候，可能當(dāng)時(shí)無(wú)法立即理解，可是經(jīng)歷過(guò)這一痛苦的階段再回來(lái)看看，就有種柳暗花明的感覺(jué) 。所以要及時(shí)記筆記才對(duì)啊年輕人。 —— —— 任三爺 Elasticsea...
-
Elasticsearch入門基礎(chǔ)概念理解
學(xué)習(xí)新知識(shí)的時(shí)候，可能當(dāng)時(shí)無(wú)法立即理解，可是以后經(jīng)歷過(guò)這一痛苦的階段再回來(lái)看看，就有種柳暗花明的感覺(jué) 。 —— —— 任三爺 Elasticsearch有幾個(gè)核心概念。基本...
-
基于Flume的日志收集系統(tǒng)(一)架構(gòu)和設(shè)計(jì)轉(zhuǎn)自http://www.aboutyun.com/thread-8317-1-1.html 問(wèn)題導(dǎo)讀： 1.Flume-NG與Scribe對(duì)比，F(xiàn)lume-NG的優(yōu)勢(shì)在什么...
-
大數(shù)據(jù)學(xué)習(xí)之小白快速了解flume
科多大數(shù)據(jù)帶你來(lái)快速了解flume。 flume的整體基礎(chǔ)架構(gòu)包括三個(gè)，分別是source,chanel, sink. 下面是官網(wǎng)的截圖： 因此，優(yōu)化要從三個(gè)組件的角度去分別...
