嗨@Sai Kalyani P,
在磚的一個集群運行這個命令火花配置
.getAll spark.sparkContext.getConf () ()
上麵的命令將列出所有配置。
在這個返回的結果,尋找這個配置
(“spark.databricks.eventLog。dir”、“事件日誌”)這是事件日誌存儲的地方。
樹脂黃檢查這個屬性,它的默認情況下禁用。
(“spark.eventLog。啟用”、“錯誤”),
檢查這兩個文件。
ls將磚/司機/日誌/ stdout
ls將/磚/ /日誌/火花
默認情況下這些日誌不定期保存。
我們需要提到集群日誌位置,如果我們想要它ti可靠地存儲。