發(fā)簡(jiǎn)信
IP屬地：海南
-
向量化與編譯執(zhí)行淺析??向量化執(zhí)行和編譯執(zhí)行是目前主流的兩種數(shù)據(jù)庫執(zhí)行引擎優(yōu)化手段，本文從以下幾個(gè)方面對(duì)向量化執(zhí)行和編譯執(zhí)行進(jìn)行淺析。一、以當(dāng)代CPU主要特性為背景...
-
一文詳解分布式數(shù)據(jù)庫并發(fā)控制??并發(fā)控制是數(shù)據(jù)庫系統(tǒng)實(shí)現(xiàn)的一個(gè)難點(diǎn)。本文分為三個(gè)部分對(duì)目前的分布式并發(fā)控制技術(shù)進(jìn)行淺析。一、從用戶并發(fā)訪問可能引起的各種問題入手，引出數(shù)據(jù)庫...
-
hive迷案之消失的分區(qū)文件
“有人把我一個(gè)分區(qū)表的某個(gè)分區(qū)數(shù)據(jù)文件刪掉了，這個(gè)能查出來么？”“具體什么情況？”“我有一個(gè)表存了近兩年的數(shù)據(jù)，按天分區(qū)，執(zhí)行show part...
-
LSM樹原理、應(yīng)用與優(yōu)化前言：為什么傳統(tǒng)數(shù)據(jù)庫使用B樹較多，而大數(shù)據(jù)存儲(chǔ)使用LSM樹較多？kudu為什么比hbase更適合支持OLAP查詢？ 上一篇場(chǎng)景和挑戰(zhàn) 提到數(shù)據(jù)...
-
淺談大數(shù)據(jù)原理(一) 場(chǎng)景和挑戰(zhàn)
上一篇書評(píng)向大家推薦了 Desinging Data-Intensive Applications 這本書。由這本書啟發(fā)，我也想整理一下自己在大...
-
Hive 子進(jìn)程死循環(huán)問題排查線上有個(gè)任務(wù)失敗了，查看工作機(jī)器上運(yùn)行的進(jìn)程情況，有個(gè)進(jìn)程比較陌生，如下圖 這個(gè)問題的詳細(xì)描述：https://marc.info/?l=ope...
-
淺談大數(shù)據(jù)原理 (Designing Data-Intensive Applications 書評(píng))
大數(shù)據(jù)生態(tài)的系統(tǒng)和技術(shù)層出不窮，我想簡(jiǎn)單羅列幾個(gè)都有一種不知從何列起的感覺。最開始我們可能會(huì)先去看看hadoop，了解一套成熟的分布式數(shù)據(jù)存儲(chǔ)和...
-
Calcite 原理解析Apache Calcite 是獨(dú)立于存儲(chǔ)與執(zhí)行的SQL解析、優(yōu)化引擎，廣泛應(yīng)用于各種離線、搜索、實(shí)時(shí)查詢引擎，如Drill、Hive、Kyli...
-
hive迷案之?dāng)?shù)據(jù)異常hive運(yùn)行一個(gè)查詢，可能會(huì)由于各種原因失敗，但不應(yīng)該出現(xiàn)執(zhí)行成功，但數(shù)據(jù)結(jié)果不正確。同樣的sql查詢，同樣的數(shù)據(jù)，卻出現(xiàn)了某一次查詢，沒有報(bào)錯(cuò)...