使用磚筆記本Bigquey寫模式特性。

[Sumeet_Dora]

目前使用df.write.format (“bigquery”),磚隻支持附加在寫作bigquery表和覆蓋模式。磚有選擇的執行摘要喜歡合並使用磚Bigquey筆記本。?

[Kaniz]

你好@Sumeet.Dora!我的名字叫Kaniz,我這裏的技術主持人。很高興認識你,謝謝你的問題!看看你的同行在社區有一個先回答你的問題。否則我將與我的團隊跟進,回到你soon.Thanks。

[User16869509900 · Accepted solution]

@Sumeet多拉,不幸的是沒有直接“並入”選項用於編寫Bigquery能夠使用磚筆記本。你可以寫一個中間三角洲表使用增量表中“並入”選項。然後從三角洲讀取表並執行一個完整的覆蓋bigquery表,這樣你得到最新的最新信息在三角洲表和bigquery。希望它能幫助

您可以參考“並入”選項的δ表https://docs.www.eheci.com/spark/latest/spark-sql/language-manual/delta-merge-into.html並入-…

這裏有一些例子筆記本寫bigquery能夠

https://docs.www.eheci.com/data/data-sources/google/bigquery.html example-notebooks

我們有過濾壓低,但那些從bigquery讀取數據時使用。同時,如果我找到任何替代方案,我將在這裏。