取消
顯示的結果
而不是尋找
你的意思是:

為什麼我總是看到“遺囑執行人心跳超時”的消息引發司機日誌

User16869510359
尊敬的貢獻者

通常,我看到“遺囑執行人心跳超時”的消息引發司機日誌。有時工作與這個錯誤失敗。

將增加“spark.executor。heartbeatInterval“幫助緩解這個問題呢?

1接受解決方案

接受的解決方案

User16869510359
尊敬的貢獻者

這是一個常見的誤解,增加“spark.executor。heartbeatInterval”將有助於緩解或解決心跳問題。事實上,增加spark.executor。heartbeatInterval會增加錯誤和糟糕情況的機會。

這是因為“spark.executor。heartbeatInterval”決定了區間的心跳已經發送。增加的數量將減少心跳發送和火花時司機檢查心跳每2分鍾,有更多機會失敗。

為了減輕這個問題“spark.network.timeout”可以增加。可能到300年代。spark.network.timeout設定一個很高的值是不推薦,會延遲真正的失敗。

在原帖子查看解決方案

1回複1

User16869510359
尊敬的貢獻者

這是一個常見的誤解,增加“spark.executor。heartbeatInterval”將有助於緩解或解決心跳問題。事實上,增加spark.executor。heartbeatInterval會增加錯誤和糟糕情況的機會。

這是因為“spark.executor。heartbeatInterval”決定了區間的心跳已經發送。增加的數量將減少心跳發送和火花時司機檢查心跳每2分鍾,有更多機會失敗。

為了減輕這個問題“spark.network.timeout”可以增加。可能到300年代。spark.network.timeout設定一個很高的值是不推薦,會延遲真正的失敗。

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map