是否可以寫單火花流兩種不同三角洲表?建議在嗎?

[Ryan_Chynoweth · Accepted solution]

在這種情況下,最好的選擇是一個readStream閱讀源三角洲表。寫作時因為檢查點記錄控製δ表你可以為每個writeStreams維護單獨的日誌。

我建議將檢查點文件存儲在_checkpoint三角洲表目錄中的子目錄。“_”將允許火花忽略它當讀表,你能夠保持這些檢查點與適當的表。