下載事件,司機,和執行人日誌

[RajeshRK]

嗨,團隊,

我可以看到登錄磚控製台通過導航工作流- >工作名稱- >日誌。這些日誌非常通用的stdout, stderr和log4-avtive.log。

如何下載事件,司機,立刻和執行人日誌的工作嗎?

問候,

拉傑什。

[匿名]

接待員:Kannan @Rajesh

下載事件,司機和執行人日誌在磚工作,您可以按照以下步驟:

1. 導航到“工作”部分的磚工作區。
2. 點擊職位名稱你想下載日誌。
3. 點擊“日誌”選項卡來查看日誌。
4. 向下滾動到“日誌存儲”部分,單擊“下載日誌”按鈕。
5. 在“下載日誌”對話框中,選擇您想要下載的日誌,如“司機日誌”、“遺囑執行人日誌”,“事件日誌”。
6. 指定日誌的時間範圍和你想要的格式下載。
7. 點擊“下載”按鈕下載ZIP文件中的日誌。

請注意下載日誌功能可以在磚企業版和磚Community Edition。然而,特定的日誌文件可供下載可能取決於磚集群配置和運行工作的用戶的權限。

[RajeshRK]

嗨Teja,

謝謝你的回複。

從磚工作空間

1)首先,我導航到工作流- >工作,然後尋找工作

2)打開了工作

3)點擊“日誌”,然後指向“火花司機日誌”。

4)沒有選擇“日誌存儲”。我有附上截圖。

問候,

拉傑什。

[Vidula_Khanna]

嗨@Rajesh Kannan R

希望一切都好!隻是想檢查如果你能解決你的問題,你會很高興分享解決方案或答案標記為最佳?其他的請讓我們知道如果你需要更多的幫助。

我們很想聽到你的聲音。

謝謝!

[匿名]

@Rajesh Kannan R可以配置集群日誌交付工作或互動集群。你可以選擇DBFS或S3 / ADLS作為目的地。一旦配置所有日誌包括驅動、遺囑執行人日誌事件日誌將被送到目的地。您可以使用重播sparkUI使用事件日誌如果sparkUI沒有加載集群終止後的工作。

https://docs.www.eheci.com/archive/compute/configure.html cluster-log-delivery-1

https://kb.www.eheci.com/clusters/replay-cluster-spark-events?from_search=113068791