Prologue join是我們這些整天與數據打交道的人繞不開的一個詞，不管是在傳統的關系型數據庫，還是在大數據領域的數據倉庫/數據湖中，join都是常客。特別是對于OLAP...
發簡信
IP屬地：上海
-
漫談數據庫中的join -
你們現在解決了嗎？
Hive bitmap udf
背景 在hive中使用Roaring64Bitmap實現精確去重功能 主要目的：1.提升 hive 中精確去重性能，代替hive 中的 count(distinct uuid...
-
衛漸行 ·spark sql 使用這些udf會報錯：Caused by: java.lang.ClassNotFoundException: org.roaringbitmap.ArraysShim，是什么原因呀
-
ClickHouse遇見RoaringBitmap
Q&A Q：如圖。 A：當然是自帶的。其實RoaringBitmap正是ClickHouse位圖的底層實現（笑 RoaringBitmap的預備知識請見這里。 在CH中產生位...
-
hive導入到clickhouse的幾種方式總結
在開發過程中，需要從HDFS中導入數據到clickhouse中，探索了幾種方式，以及一些坑與大家分享； Waterdrop 參考大神的文章，實現快速的安裝，和相關配置如何快速...
-
SpringBoot框架：使用mybatis連接mysql數據庫完成數據訪問需要技術 java，MySql基本使用，mybatis技術的了解，maven基本安裝使用，SpringBoot使用，git的使用，idea使用基礎，mvc結構。 Java基礎...
-
mindsdb 源碼解析
應用對接的方式包含： mysql mongodb http 三種方式都可以實現對于預測器的透出；當然我們常見的都是http或者mysql的方式； 下面介紹mysql的方式實現...
-
Dubbo中的設計模式
最近在看阿里開源RPC框架Dubbo的源碼，順帶梳理了一下其中用到的設計模式。下面將逐個列舉其中的設計模式，并根據自己的理解分析這樣設計的原因和優劣。 責任鏈模式 責任鏈模式...
-
-
周學習復盤2021-11-07
非常快的兩個星期過去了，自己的狀態還沒有找回來，似乎在這兩個星期停止了學習的腳步一樣，感覺自己是一個遇到難就想逃避的一個人，明明知道解決這個難題會有非常大的進步，面對問題敢于...
-
-
周學習復盤2021-10-25
國慶回來狀態挺好的意識到了自己還要學習的非常多，時間也不會有多少了，Java基礎沒有學完Mysql數據庫上課也聽不懂了，課后沒有花時間去看，所以在上個星期一有時間就會去圖書館...
-
周學習復盤2021-10-10
國慶在家幾乎就是沒有心去學習，自己的打算是明天都學習，想著是每天都廢寢忘食，想的好，但是沒有一天是做到了的，這幾天也是意識到時間實在是不多了，一刻也不能放縱自己，放松了，應該...
-
Nessie 像git一樣管理你的數據
Nessie可以管理像git 分支，合并數據源等一些特性； 受git的版本管理啟發 跨表事務和可見性 支持hive,spark,AWS Athena,dremio，管理其數據...
-
本博客所有內容均適用知識共享-署名-相同方式共享（CC-BY-SA）4.0協議。
-
再談基數估計之HyperLogLog算法前言 在很久（好像也沒多久，4個月）之前，我曾經寫了一篇和主業無關的有點意思的小文章《基數估計探秘：Linear Counting與Flajolet-Martin算法》。但是...
