對于長時間運行的Spark Streaming作業，一旦提交到YARN群集便需要永久運行，直到有意停止。任何中斷都會引起嚴重的處理延遲，并可能導致數據丟失或重復。YARN和A...
IP屬地：西藏
-
【轉載】Yarn上常駐Spark-Streaming程序調優 -
盤點那些不足10M，卻有逆天功能的軟件做為互聯網工作者，電腦上的軟件越裝越多，D盤、E盤、F盤的空間越來越不夠用啦！后來，專門搜集那些占量小，但是功能超強的軟件，以下就是我用過的一些軟件，感覺還不錯，拿來和大家分...
-
-
Fatal Python error: pycurl: libcurl link-time version is older than compile-time version
使用yum 時報如下錯誤 排查錯誤這里有解決方案http://rohitchauhanit.blogspot.com/2017/12/solution-of-fatal-py...
-
“Application rejected by queue placement policy”異常解決排查問題1.上面的報錯與隊列相關2.CDH yarn界面問題排查隊列生成的樣子異常
-
yaml文件怎么沒貼出來？
Kubernetes 配置Pod和容器(四)設置CPU和Mem限制
默認情況下pod運行沒有任何CPU和內存的限制。這意味著系統中的pod可以盡可能多的消耗CPU和內存在pod執行的節點。 基于多種原因用戶可能希望對系統中的單個pod的資源使...
-
如何在宿主機上操作Rancher2部署的K8S集群在遇到這個問題之后，我曾在微信群里面咨詢過，得到了一個大致的方向，但是網上的文章都有些問題，現給出一個可行解決方案1.首先安裝kubectl，安裝kubectl有多種方法，我...
-
-
排版成這個樣子也是醉了
rancher+harbor離線安裝
安裝docker，此docker為社區版docker。docker官方文檔：https://docs.docker.comdocker-ce的yum源： https://do...
-
supervisor 從安裝到使用
一、安裝 源碼安裝 先下載最新的supervisor安裝包：https://pypi.python.org/pypi/supervisor ， 如： 二、配置 1.生成配置文...
-
HDFS做HA時 standby namenode無法啟動
異常信息如下： 其實我也是網上看別人的博文的收到啟發解決的，只是我感覺他寫有點啰嗦，所以在解決問題開心之余就記錄了一下，不喜勿噴問題原因：因為在做HA的時候journalno...
-
CDH添加hive組件，異常解決CDH添加hive組件，異常解決CM界面異常 hive角色日志 解決辦法：google 了一下，關于這方面的錯誤都是spring的，看了幾個以后有人說是驅動版本跟MySQL的...
