嘿,@Ajay Pandey,
相關信息是δ緩存,基本上如果集群不斷擴大或偶爾你可能會失去三角洲緩存碎片。確定DBIO文件碎片的位置操作確定哪些執行人文件緩存。
這是可以通過努力幫助一個更新的DBR如11.3或12. x。你也可以嚐試關閉緩存通過設置以下配置在筆記本上和觀察的行為:
spark.conf.set (“spark.databricks.io.cache。啟用”、“假”)
你也可以嚐試優化表(年代)
% sql優化(表名)
嘿,@Ajay Pandey,
相關信息是δ緩存,基本上如果集群不斷擴大或偶爾你可能會失去三角洲緩存碎片。確定DBIO文件碎片的位置操作確定哪些執行人文件緩存。
這是可以通過努力幫助一個更新的DBR如11.3或12. x。你也可以嚐試關閉緩存通過設置以下配置在筆記本上和觀察的行為:
spark.conf.set (“spark.databricks.io.cache。啟用”、“假”)
你也可以嚐試優化表(年代)
% sql優化(表名)
謝謝
謝謝