1 何時執行runJob方法
SparkContext提供了runJob方法提交作業，比如foreach(println)這種action操作，觸發job的提交，SparkContext#runJob來提交的，當然最終是通過DAGScheduler組件來實現job的提交
2 runJob方法流程圖
runJob方法流程如下圖所示
3-SparkContext的runJOb方法.png
3-SparkContext的runJob方法
最后編輯于 ：
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明：文章內容（如有圖片或視頻亦包括在內）由作者上傳并發布，文章內容僅代表作者本人觀點，簡書系信息發布平臺，僅提供信息存儲服務。
平臺聲明：文章內容（如有圖片或視頻亦包括在內）由作者上傳并發布，文章內容僅代表作者本人觀點，簡書系信息發布平臺，僅提供信息存儲服務。
推薦閱讀更多精彩內容
- 學習博主的文章《Spark driver端得到executor返回值的方法》之后有感 文章中通過閱讀count方法...
- CSDN地址：https://blog.csdn.net/w1123900645/article/details/...
- 1.spark-shell 2.Scala for idea 最后，需要使用spark submit提交到spar...
- 資料整理，圖片來源自互聯網，如有侵權請聯系刪除--李小李 1-Spark Shuffle發展史 1.1 Shuff...
- 比如原始表的schema如下： 現在想將該DataFrame 的schema轉換成:id:String,goods...
