取消
顯示的結果
而不是尋找
你的意思是:

在任何火花應用,引發司機也扮演著關鍵的角色,執行以下功能:1。初始化一個火花會話2。與…

yunna_wei
新的貢獻者二世

在任何火花應用,引發司機也扮演著關鍵的角色,執行以下功能:

1。初始化一個火花會話

2。與集群管理器請求資源(CPU、內存等)引發的集群管理器的執行人(jvm)

3所示。將所有的火花操作轉換為DAG計算

4所示。DAG調度和分配計算任務在火花執行人

5。與火花執行人

避免超載引發司機/驅動程序失敗是絕對必要的保持高SLA火花應用程序。

建議分發工作負載成不同的小集群而不是許多應用程序運行在一個大集群中,無論多麼大的集群,火花的功能驅動程序不能被分配在一個集群中。

# dataengineering# apachespark

0回答0
歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map