三角洲表存儲

[Braxx]

我找不到解釋清楚,這裏希望某人做了一些闡述。

幾個問題:

1)三角洲表存儲在哪裏?

醫生說:“三角洲湖使用版本化的鑲花文件來存儲你的數據在你的雲存儲”

所以到底是存儲在哪裏?它可以存儲在任何存儲我使用例如blob存儲或DBFS或磚集群上的某個地方嗎?

2)如果我已經數據保存到鋪在我的Azure blob存儲和想將它們轉換為δ,這一改變會團上實現嗎?或者,這些數據將會在別的地方複製和保存為三角洲在新的位置?

蒂雅

B

[werners1 · Accepted solution]

如果你自己不定義任何存儲,數據存儲管理表,磚的意義在blob存儲訂閱(駐留在您所使用的雲提供商)。

如果你使用自己的blob存儲/數據湖,你可以(但你可以沒有)寫數據,非托管表。

但基本上可以把它存儲在雲中任何你想要的,隻要磚可以訪問它。

DBFS語義層上的實際存儲,使處理文件更容易。

所以如果你安裝3 blob存儲初版,您可以編寫任何這些3。

轉換成三角洲:

https://docs.microsoft.com/en-us/azure/databricks/spark/latest/spark-sql/language-manual/delta-conve..。。

但是你也可以選擇寫信給另一個位置數據複製和保存在三角洲湖格式。

[Braxx]

謝謝,很有幫助