IP屬地：浙江
-
ES索引設計
1.Shards數量規劃 一個index可以被分為多個shards，從而分布到不同的物理機上。Shard的劃分結果也會影響索引和查詢速度。每個分...
-
基于日志的CDC方案（Binlog）從 ETL 的角度進行分析，一般采集的都是業務庫數據，這里使用 MySQL 作為需要采集的數據庫，通過 Debezium 把 MySQL Bin...
-
Hive-3.1.2安裝、配置與服務啟動
注：所有操作皆以hive用戶運行 1.下載hive版本包apache-hive-3.1.2-bin.tar.gz進行解壓 2.修改配置文件 配置...
-
Maven私服搭建
1.介紹 MavenMaven是Apache的一個項目管理工具，它包含了一個項目對象模型 (Project Object Model)，一組標準...
-
Kafka Connect REST API 使用手冊
Kafka Connect 作為service提供了 REST API 服務 管理 Kafka Connector Kafka Connect ...
-
Maven deploy 打包到遠程倉庫以及從遠程倉庫下載jar包
1、Maven deploy 打包到遠程倉庫 mvn deploy 用來將項目工程生成的構件分發到遠程Maven倉庫。例如： Dreposito...
-
Hbase 客戶端批量寫入數據
hbase新版本中引入了 BufferedMutator，可以提供更加高效清晰的寫操作。 org.apache.hadoop.hbase.cli...
-
kafka connect啟動源碼分析
分布式模式下kafka-connect啟動運行： 啟動命令：bin/connect-distributed.sh conf/connect-di...
-
Kafka-connect-hdfs源碼解析
寫數據流程分析 啟動task類方法，HdfsSinkTask.java類中start 初始化DataWriter，DataWriter.java...
個人介紹