取消
顯示的結果
而不是尋找
你的意思是:

org.apache.http.conn。ConnectTimeoutException:這是什麼意思和如何解決它。

cmilligan
因素二世

我的團隊遇到了讓這個錯誤很經常在我們的一個大的工作。我重試政策設置為5,似乎是個解決問題的辦法和保持工作。它似乎不能立即接任務,但完成之後的一些其他任務同時運行。

我們分享我們的集群作為一個更大的團隊和工作運行不斷,但這似乎是唯一一個這樣失敗。有什麼我們能做的來解決這個錯誤呢?

1接受解決方案

接受的解決方案

Aviral-Bhardwaj
尊敬的貢獻者三世

嘿,@Coleman Milligan,

我也多次遇到這種類型的問題

你可以添加以下配置集群,它應該工作。

spark.executor。heartbeatInterval 60年代

spark.network.timeout 120年代

對於更多的細節,您可以探索這個文檔https://spark.apache.org/docs/latest/configuration.html

你會得到所有上述2配置的詳細信息

如果你喜歡我的答案,請選擇為最佳答案,upvote它

謝謝

Aviral Bhardwaj

在原帖子查看解決方案

1回複1

Aviral-Bhardwaj
尊敬的貢獻者三世

嘿,@Coleman Milligan,

我也多次遇到這種類型的問題

你可以添加以下配置集群,它應該工作。

spark.executor。heartbeatInterval 60年代

spark.network.timeout 120年代

對於更多的細節,您可以探索這個文檔https://spark.apache.org/docs/latest/configuration.html

你會得到所有上述2配置的詳細信息

如果你喜歡我的答案,請選擇為最佳答案,upvote它

謝謝

Aviral Bhardwaj

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map