發簡信
IP屬地：廣東
-
wsl 安裝mysql
一般情況下,ubuntu16.04安裝mysql只需要運行以下命令即可: 但是,當我在wsl上的ubuntu里運行這個命令時,卻出現以下問題:①...
-
3.2 Spark Streaming 性能調優(二): 解決task傾斜
目錄1.系統架構2.環境搭建2.1本地環境下kafka批量導入數據2.2 kafka-manager的安裝與配置3.1 Spark Stream...
-
3.1 Spark Streaming 性能調優(一): 提高并行度目錄1.系統架構2.環境搭建2.1本地環境下kafka批量導入數據2.2 kafka-manager的安裝與配置3.1 Spark Stream...
-
2.1 本地環境下kafka批量導入數據目錄1.系統架構2.環境搭建2.1本地環境下kafka批量導入數據2.2 kafka-manager的安裝與配置3.1 Spark Stream...
-
2.2 kafka-manager的安裝與配置目錄1.系統架構2.環境搭建2.1本地環境下kafka批量導入數據2.2 kafka-manager的安裝與配置3.1 Spark Stream...
-
項目簡介
這個項目是基于spark streaming的日志分析系統,每分鐘提交一次job,統計一分鐘內的日志信息,同時也需要統計15分支內的異常ip信息...
-
簡介
前言 公司的一個大數據項目是通過使用spark每隔一分鐘統計一次15分鐘內的日志信息,一般40~50s左右就可以統計完,但是偶爾會出現某幾次任務...
-
1.系統架構目錄1.系統架構2.環境搭建2.1本地環境下kafka批量導入數據2.2 kafka-manager的安裝與配置3.1 Spark Stream...
-
2.環境搭建
目錄1.系統架構2.環境搭建2.1本地環境下kafka批量導入數據2.2 kafka-manager的安裝與配置3.1 Spark Stream...