問題
您可以通過設置各種配置來優化應用程序。有些配置必須在集群級別設置,而有些則在筆記本電腦或應用程序中設置。
解決方案
要檢查是否可以在筆記本中設置特定的Spark配置,在筆記本單元格中運行以下命令:
% scala spark.conf.isModifiable(“spark.databricks.preemption.enabled”)
如果真正的返回時,則可以在筆記本中設置該屬性。否則,必須在集群級別設置。
學習如何在Databricks筆記本中修改Spark屬性。
您可以通過設置各種配置來優化應用程序。有些配置必須在集群級別設置,而有些則在筆記本電腦或應用程序中設置。
要檢查是否可以在筆記本中設置特定的Spark配置,在筆記本單元格中運行以下命令:
% scala spark.conf.isModifiable(“spark.databricks.preemption.enabled”)
如果真正的返回時,則可以在筆記本中設置該屬性。否則,必須在集群級別設置。