取消
顯示的結果
而不是尋找
你的意思是:

日誌沒有完整性檢查錯誤當改變表屬性

LavaLiah_85929
新的貢獻者二世

下麵是完整性檢查錯誤時我們正在試圖將deletedRetentionFileDuration表屬性設置為10天。

image.png圖像

觀察:表數據是坐在S3。在S3中所有文件的大小是結核病。這張桌子有成千上萬的文件。

清除錯誤的最好方法是什麼,除了刪除和重新創建表嗎?

1接受解決方案

接受的解決方案

Hubert_Dudek1
尊敬的貢獻者三世

請備份你的表,然後運行文件的修複

FSCK table_name修理表

你也可以嚐試先讓排練

FSCK修理表table_name排練

如果數據刷新metastore分區可以有幫助

mytable MSCK修理表

在原帖子查看解決方案

2回答2

UmaMahesh1
尊敬的貢獻者三世

這可能是因為在事務日誌的問題。因為這是外部表和δ格式,創建或替換表應該解決這個問題。這應該解決事務日誌的問題。

但是如果問題仍然持續下去你可以聯係磚支持或設置這個confg跳過這個問題。

spark.conf.set (“spark.databricks.delta.state.corruptionIsFatal”,假)

希望這可以幫助. .

歡呼。

Hubert_Dudek1
尊敬的貢獻者三世

請備份你的表,然後運行文件的修複

FSCK table_name修理表

你也可以嚐試先讓排練

FSCK修理表table_name排練

如果數據刷新metastore分區可以有幫助

mytable MSCK修理表

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map