09-20-202206:15我
如何啟用公平調度器使用python命令從磚的筆記本嗎?
09-20-202208:21我
spark.conf.set (“spark.scheduler。模式”,“公平”)sc.setLocalProperty (“spark.scheduler。池”、“pool1”)
請使用上麵的配置設置,使公平(round robin)模式,而不是默認的FIFO。
使用上麵的示例中,您還可以為每個工作/筆記本設置一個單獨的池。
10-02-202204:38我
嗨@Hariharan森
希望一切都好!隻是想檢查如果你能解決你的問題,你會很高興分享解決方案或答案標記為最佳?其他的請讓我們知道如果你需要更多的幫助。
我們很想聽到你的聲音。
謝謝!
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。