-
甘特圖怎么制作更方便？甘特圖制作方法" title="甘特圖怎么制作更方便？甘特圖制作方法" width="200" height="150">
-
OKR的實施標準步驟是什么？成功實施落地OKR的要點" title="OKR的實施標準步驟是什么？成功實施落地OKR的要點" width="200" height="150">
-
Spark性能優化 (2) | 算子調優
所有內容 ?2022-05-29大家好，我是不溫卜火，是一名計算機學院大數據專業大二的學生，昵稱來源于成語—不溫不火，本意是希望自己性情溫和。作為一名互聯網行業的小白，博主寫博客一方面是為了記錄自己的學習過程，另一方面是總結自己所犯...
-
2021年大數據Spark（七）：應用架構基本了解
所有內容 ?2022-05-29Spark 應用架構-了解 Driver 和Executors 從圖中可以看到Spark Application運行到集群上時，由兩部分組成：Driver Program和Executors。 第一、...
-
Spark RDD算子案例：兩種方式計算學生總分
所有內容 ?2022-05-29文章目錄 一、提出任務 二、準備工作 （一）啟動HDFS服務 （二）啟動Spark服務 三、實現步驟 （一）在Spark Shell里完成任務 （二）編寫Scala程序完成任務 1、創建Maven項目...
-
-
-
-
-
Spark的shuffle介紹
所有內容 ?2022-05-29Spark的shuffle介紹 shuffle簡介:在 DAG 階段以shuffle為界，劃分 stage， 上游 stage做 map task，每個maptask將計算結果數據分成多份，每一份對應...
-
2021年大數據Spark（二）：四大特點
所有內容 ?2022-05-29目錄 Spark 四大特點 速度快 易于使用 通用性強 運行方式 Spark 四大特點 Spark 使用Scala語言進行實現，它是一種面向對、函數式編程語言，能夠像操作本地集合一樣輕松的操作分布式數...
-
《Spark數據分析：基于Python語言 》 —3.1.2 Spark工作節點與執行器
所有內容 ?2022-05-293.1.2 Spark工作節點與執行器 Spark執行器是運行Spark的DAG中的任務的進程。執行器會占用Spark集群的從節點（工作節點）上的CPU和內存資源。每個執行器都是特定的Spark應用專...
