06-25-202112:06點
我有一個spark-submit應用程序工作得很好8 gb執行人內存紗。我測試相同的工作對磚集群的遺囑執行人的記憶。然而,磚的工作是運行較慢。
這不是一個蘋果蘋果比較。當你設定8 gb作為紗線執行程序內存,然後在啟動容器,執行程序運行JVM正在8 gb的內存。因此,Xmx堆計算的價值。在磚,當你創建一個集群,8 gb的內存。給執行者JVM的內存更少。這是因為總實例是8 gb內存。
在原帖子查看解決方案
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。