啟用自動模式演化為三角洲湖合並為一個SQL倉庫

[807326年]

你好!

我們試圖更新集成腳本,使用SQL倉庫而不是一般的計算集群獲取和更新數據,但是我們麵臨一個問題。我們使用自動模式演化表合並,但使用SQL倉庫,當我們試圖使它運行一個合並前查詢(集 spark.databricks。 δ 。 模式 .autoMerge.enabled = 真正的),我們得到一個錯誤:

databricks.sql.exc。DatabaseError:錯誤運行查詢:_LEGACY_ERROR_TEMP_DBR_0222 org.apache.spark.sql。AnalysisException:配置spark.databricks.delta.schema.autoMerge.enabled不可用。

有什麼辦法可以啟用自動模式演化為三角洲湖合並為一個SQL倉庫嗎?

[Kaniz · Accepted solution]

嗨@807326,根據所提供的信息,配置spark.databricks.delta.schema.autoMerge.enabled不是用於SQL倉庫。該配置隻用於三角洲湖表。

因此,它是不可能時使用自動模式演化合並表的SQL倉庫。

來源:
- - - - - -https://docs.www.eheci.com/delta/delta-batch.html automatic-schema-evolution
- - - - - -https://docs.www.eheci.com/sql/release-notes/index.html