取消
顯示的結果
而不是尋找
你的意思是:

工作階段失敗而終止:1863年任務階段10.0失敗了4次,最近的失敗:在舞台上失去了任務1863.3 10.0 (TID 2021)(10.0.4.7執行人2):org.apache.spark。SparkException: Python工人意外退出(崩潰):致命的Python埃羅

Ancil
因素二世

我得到以下錯誤一些時間運行磚從ADF的筆記本,

如果執行器節點是一個然後它工作正常,如果它增加2個或更多一些相同的數據乘以它的失敗。

集群細節:Standard_F4s_v2·工人:Standard_F4s_v2··11.2 1 - 8工人(包括Apache火花3.3.0,Scala 2.12)

文件“/磚/ python / lib / python3.9 /網站/ Levenshtein / __init__。py”在操作碼,343行

文件“/磚/ python / lib / python3.9 /網站/ fuzzywuzzy /StringMatcher.py”,在get_opcodes線45

文件“/磚/ python / lib / python3.9 /網站/ fuzzywuzzy /StringMatcher.py”,在get_matching_blocks第58行

文件“/磚/ python / lib / python3.9 /網站/ fuzzywuzzy /fuzz.py”,在partial_ratio線47

文件“/磚/ python / lib / python3.9 /網站/ fuzzywuzzy /utils.py”,在裝飾線47

文件“/磚/ python / lib / python3.9 /網站/ fuzzywuzzy /utils.py”,在裝飾線29

文件“/磚/ python / lib / python3.9 /網站/ fuzzywuzzy /utils.py”,38線裝飾

文件“/磚/ python / lib / python3.9 /網站/ my_package / my_function。py”,在scrap_url 30行

文件“/磚/ python / lib / python3.9 /網站/ my_package / my_function。py my_function”, 124行

文件“命令- 1514877556254536 > <”,在my_function第20行

文件“命令- 1514877556254534 > <”,在my_function_01第7行

文件“/磚/ / python / pyspark /火花util.py在包裝器”,84行

文件“/磚/ / python / pyspark /火花worker.py”,130行<λ>

文件“/磚/ / python / pyspark /火花worker.py”,591行映射器

文件“/磚/火花/ python / pyspark / sql /熊貓/serializers.py”,在init_stream_yield_batches 384行

文件“/磚/火花/ python / pyspark / sql /熊貓/serializers.py”,在dump_stream 91行

文件“/磚/火花/ python / pyspark / sql /熊貓/serializers.py”,在dump_stream 391行

文件“/磚/ / python / pyspark /火花worker.py”,885行過程

文件“/磚/ / python / pyspark /火花worker.py”,在主要的第893行

文件“/磚/ / python / pyspark /火花daemon.py在工人”,79行

文件“/磚/ / python / pyspark /火花daemon.py”,204行經理

文件“/磚/ / python / pyspark /火花daemon.py”,229行<模塊>

文件“/ usr / lib / python3.9 /runpy.py”,在_run_code 87行

文件“/ usr / lib / python3.9 /runpy.py”,在_run_module_as_main 197行

請幫我在這。和一個任務是,時間滯後問題嗎?

有時工作,有時不。

如果沒有添加包“Levenshtein”3任務2 h來完成。

8回答說8

Vidula_Khanna
主持人
主持人

嗨@Ancil便士

幫助我們建立一個充滿活力和足智多謀的社區通過識別和突出的貢獻。馬克最好的答案和表達你的欣賞!

swethaNandan
新的貢獻者三世

嗨@Ancil便士

你能給粘貼失敗任務的完成加10.0)(從失敗的階段,你要運行的代碼片段在筆記本上。另外,你認為你可以提高磚一樣支持門票嗎?

我有貼磚中所有可用的日誌數據

嗨@Swetha Nandajan

請查收完整的錯誤日誌。我有工作運行每一小時我的筆記本工作了20分。在那之後我得到以下錯誤。

是創造新的就業從ADF集群為每個運行。

集群細節:司機:Standard_F32s_v2·工人:Standard_F32s_v2·1工人·11.3 LTS(包括Apache火花3.3.0,Scala 2.12)。

我嚐試與錯誤數據QA環境中工作,但在測試環境20運行後得到以下錯誤。

錯誤

附件作為一個文件

請幫我

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map