
從3月份開始,陸續面了阿里,頭條,美團,快手四家公司的大數據開發崗位,近20場面試面下來挺耗費腦力的,不過結果還行,除了頭條外,目前拿到了其他三...
隨著人口紅利的慢慢削減,互聯網產品的廝殺愈加激烈,大家開始看好下沉市場的潛力,拼多多,趣頭條等廠商通過拉新獎勵,購物優惠等政策率先搶占用戶,壯大...
隨著移動互聯網的發展,萬物互聯成為了可能,這種互聯所產生的數據也在爆發式地增長,而這些數據恰好可以作為分析關系的有效原料。如果說以往的智能分析專...
雙生說:曹樂是典型學霸,清華本碩,多年互聯網大廠研發經驗,所以“資深”。我剛到新部門的時候,約各位合作部門的Leader請教,也算幫我做新崗位入...
更多大數據技術干貨,歡迎關注“大數據技術進階”微信公眾號。 前言:刪除kafka topic及其數據,嚴格來說并不是很難的操作。但是,往往給ka...
更多大數據技術干貨,歡迎關注“大數據技術進階”微信公眾號。 Shuffle簡介 Shuffle的本意是洗牌、混洗的意思,把一組有規則的數據盡量打...
當我們對于數據結構字段不夠確定或雜亂無章很難按一個概念去進行抽取的數據適合用使用什么數據庫?答案是什么,如果我們使用的傳統數據庫,肯定留有多余的...
0、背景上周四接到反饋,集群部分 spark 任務執行很慢,且經常出錯,參數改來改去怎么都無法優化其性能和解決頻繁隨機報錯的問題。看了下任務的歷...
翻譯自Spark官網文檔:https://spark.apache.org/docs/2.1.0/tuning.html 前言 由于大多數Spa...