如何檢查一個火花屬性是可修改的筆記本

學習如何在Databricks筆記本中修改Spark屬性。

寫的亞當Pavlacka

最後發布日期:2022年5月16日

問題

您可以通過設置各種配置來優化應用程序。有些配置必須在集群級別設置,而有些則在筆記本電腦或應用程序中設置。

解決方案

要檢查是否可以在筆記本中設置特定的Spark配置,在筆記本單元格中運行以下命令:

% scala spark.conf.isModifiable(“spark.databricks.preemption.enabled”)

如果真正的返回時,則可以在筆記本中設置該屬性。否則,必須在集群級別設置。