為什麼磚在AWS集群開始時間小於5分鍾和EMR集群開始時間是15分鍾嗎?

[gud4eve]

我們從AWS EMR遷移到磚。poc期間我們已經注意到的一件事是,磚堆同樣大小和實例類型需要多小時間開始EMR相比。

我的理解是磚也將從相同的AWS請求實例池EMR。那麼為什麼AWS的服務(EMR)是緩慢在集群?

[werners1]

假設工人之間的配置是相同的EMR,磚(我認為他們是相同的,但我不確定),很可能安裝EMR集群上花更多的時間比安裝磚。磚一直在努力讓他們的節點盡快啟動並運行,也許亞馬遜沒有做這樣的事。

[gud4eve]

是的這也是我的假設。但我們有由磚說明文檔嗎?

[Hubert_Dudek1 · Accepted solution]

我聽說試圖改善在會議開始時間為兩年,這是一個永無止境的故事。池和serverless池將提供進一步的改進。推薦實例類型通常也更好,如磚正在與供應商。另外,我聽說GCC現在最快的啟動vm /集群。對我來說,大改進池部署時將會預裝庫(而不是設置在集群級別)。

[karthik_p]

@gud4eve什麼樣的集群您正在使用,你配置池。如果不是@Werner Stinckens說可能有機會磚努力得到配置實例以更快的方式