引子 上一篇文章結(jié)束的時(shí)候,我親手立下了flag,要手寫2-3樹。經(jīng)過(guò)臥薪嘗膽半個(gè)月后,終于放棄了。因?yàn)?-3樹只是B樹的某個(gè)狀態(tài),寫了半天就寫...
介紹 AVL樹是最常見的自平衡二叉搜索樹了。關(guān)于二叉搜索樹大致的描述如下: 每個(gè)節(jié)點(diǎn)只有左右兩個(gè)子節(jié)點(diǎn) 每個(gè)節(jié)點(diǎn)的左子節(jié)點(diǎn)的值小于該節(jié)點(diǎn)值,每個(gè)...
背景 最近在做數(shù)據(jù)血緣關(guān)系相關(guān)的工作,最初級(jí)的版本我們是通過(guò)執(zhí)行計(jì)劃分析出表到表的計(jì)算關(guān)系。有同事在看了之后提出,希望能給一個(gè)字段到字段的計(jì)算關(guān)...
場(chǎng)景描述 我們?cè)诠ぷ髦杏袝r(shí)候需要使用JDBC操作Hive,但最近經(jīng)常出現(xiàn)每隔一段時(shí)間JDBC就超時(shí)沒(méi)反應(yīng)的情況。(這個(gè)問(wèn)題和MetaStore內(nèi)...
概述 我們的Hive是HortonWorks提供的1.2.1, 本文檔記錄下我們?cè)谑褂眠^(guò)程中遇到的問(wèn)題和解決方法。 問(wèn)題 高并發(fā)請(qǐng)求時(shí),請(qǐng)求報(bào)錯(cuò)...
說(shuō)明 最近關(guān)于YARN的配置,尤其是調(diào)試日志的信息,總是記不住,留個(gè)記錄,方便以后查看。 轉(zhuǎn)自董西成的博客,在此感謝董西成老師的分享。 如需轉(zhuǎn)載...
入口 hdfs腳本中,關(guān)于dfs的操作,統(tǒng)一走了org.apache.hadoop.fs.FsShell這個(gè)類。這個(gè)代碼在腳本第153行 這個(gè)類...
配置的修改 pom文件 hdfs代碼在hadoop-hdfs-project/hadoop-hdfs中,pom中關(guān)于依賴的其他hadoop模塊的...