學習了差不多一個星期，終于把flume-kafka-spark streaming貫通了，直接上流程圖： 一、環境部署 hadoop集群2.7.1zookeerper集群ka...
發簡信
IP屬地：北京
-
flume-kafka-spark streaming(pyspark)-hdfs實時日志實時計算 -
數據平臺實踐②——Logstash+Elasticsearch+Kibana簡介 在上一次的數據平臺實踐①中，對基于Flume，Kafka和Spark Streaming的數據平臺組合做了介紹，這一次對業界流行的ELK組合進行學習與實踐。關于ELK，...
-
[個推]打造100億SDK覆蓋量的大數據系統，個推從離線到實時演進的三階段打造100億SDK覆蓋量的大數據系統，個推從離線到實時演進的三階段 | 36大數據http://www.36dsj.com/archives/58518 //個推大數據系統演...
-
RDD、DataFrame和DataSet的區別
spark 2.X開始，三者的關系發生了變化，可以參考《且談Apache Spark的API三劍客：RDD、DataFrame和Dataset》 ,在2.X中DataFram...
-
使用阿里云虛擬主機搭建hadoop偽分布式環境環境： 準備工作：1.到阿里云虛擬主機網站申請虛擬服務器https://www.aliyun.com/ 2.查看該服務器防火墻是否關閉： 3、下載hadoop2.6.3 ，官...
-
優秀的計算機編程類博客 和 文章
優秀的計算機編程類博客 和 文章 介紹 優秀的計算機編程類博客是一些關于計算機方面的優秀博客。 歡迎大家將經常看的優秀博客或博客文章共享出來，您可以： 使用 Issues 以...
-
干貨：如何正確提升朋友圈照片的逼格今天來作死地八一八一個后期神器snapseed的使用方法。 純干貨。 多圖。 感覺會被圖片上傳給弄死…… 答應我，看在我寫得這么辛苦的份上，以后再發朋友圈的時候，努力裝裝逼不...
