新火花集群中配置本地模式

[supremefist]

你好,

磚上我們有兩個工作區,刺激刺激和dev。,如果我們創建一個新的通用集群通過web界麵和去環境引發的UI,spark.master正確設置是將主機IP。這個結果在一個集群中,以獨立模式運行。

然而,我們有一個非常類似的工作空間,開發,如果我們創建一個新的通用集群在完全相同的方式,spark.master將當地[*],這意味著集群是在本地模式下運行,不試圖利用執行人!沒有設置被覆蓋或集群中定義不同的創建過程,我們都知道的!

有一些火花的配置在工作區或帳戶,我們需要改變為一個新的通用集群不默認本地模式?

提前謝謝!

[User16764241763]

@Riaan黑黝黝的

謝謝你發帖的磚社區。

你能共享集群配置的一個屏幕快照和火花集群UI——主頁?

[Kaniz]

嗨@Riaan黑黝黝的,你願意分享截圖嗎?

[supremefist · Accepted solution]

嘿,夥計們,謝謝你回到我和抱歉延遲。

我們設法找到問題由於磚的支持!有一個bash腳本,有人直接上傳到dbfs: /磚/ init啟動後設置集群到本地模式

一旦我們刪除它,一切都很好!讀者警告未來!

[Kaniz]

酷! !

對我們不是很好你回來和我們分享的解決方案嗎?

謝謝@Riaan黑黝黝的! !