發簡信
IP屬地：江蘇
-
Docker學習筆記什么是docker Docker 是一個開源的應用容器引擎，基于 Go 語言 并遵從Apache2.0協議開源。 Docker 可以讓開發者打包...
-
Redis學習筆記Redis簡介 REmote DIctionary Server(Redis) 是一個由SalvatoreSanfilippo寫的key-val...
-
Hive自定義UDF、UDTF（initialize部分源碼解析）這里分析Hive中部分UDF及UDTF函數的源碼并依此進行自定義 1.UDF 這里UDF以Upper方法為例 此方法會將傳入的字符串變為大寫后返...
-
Sqoop導入My'SQL數據到hive及hdfs（全量及增量）Sqoop安裝 配置conf下的sqoop-env.sh文件 添加關鍵的環境變量 因為要使用mysql，需要把mysql驅動包添加到lib下 在...
-
MapReduce中DBInputFormat和DBOutputFormat的使用DBWritable 在通過Mapper讀取數據時可以選擇使用DBInputFormat或DBOutputFormat從Mysql或Oracle...
-
HBase int類型字段存儲亂碼用MR往HBase里寫Int類型遇到了亂碼問題，總結一下。 直接往HBase表里寫int，通過shell查詢 可以看到是一堆字節數組，hbase...
-
Flume SinkProcessor及ChannelSelector（一個channel對接多個sink的情況）今天在看網課做項目的時候使用flume的時候拿它和kafka對接，source使用的是一個TAILDIR,channel就是一個普通的memor...
-
Hadoop Partitioner分區與Shuffle的關系及自定義分區代碼初學Hadoop對學習的東西作一個總結。 Partitioner（分區） 我們知道Hadoop中默認使用的InputFormat是TextInp...
-
LinkedBlockingQueue及AQS哨兵節點的重要性線程池主要有兩種創建方式。 一種是選擇使用Executors線程池工具類，可以理解為線程池工廠類，通過該類設置好的一些靜態方法，創建指定類型的線...