更新表的SQL Server數據磚

[YS1]

你好,

我有SQL Server表是所有生活事務發生的主要地點,目前我讀通過pyspark dataframes和覆蓋他們日常的最新副本磚。問題是需要長時間將所有表從SQL Server複製到磚和表沒有主鍵的像一個id,有些表時間戳。問題是我怎樣才能隻讀的變化和寫我的磚表在一個有效的方法而不需要重寫整個表一次又一次?

[Stephen678]

你有任何sql server中的審計列表可以用於增量加載?

Sql server表滿載每次嗎?

[YS1]

對於第一個問題,一些表pkid或時間戳列,但有些不會。

對於第二個問題,一些表隻能得到附加到而另一些則截斷和重新創建(SQL Server)但在磚目前我們每天覆蓋它們。

[Vidula_Khanna]

嗨@YS1

希望你是好。隻是想看看你是否能夠找到一個回答你的問題,你想要一個答案標記為最好?它對其他成員也將很有幫助。

幹杯!