你好所有的,
我想知道如何在三角洲更新新的數據表從新的csv文件。
下麵是我的代碼用於創建增量表從csv文件和加載數據。但我有新的更新文件並試圖加載新數據但不能任何指導將幫助。
代碼:
%的sql
設置spark.databricks.delta.schema.autoMerge.enabled = true;
創建表如果不存在catlog.schema.tablename;
複製到catlog.schema.tablename
從(SELECT * s3: / /桶/ test.csv)
FILEFORMAT = CSV
FORMAT_OPTIONS (“mergeSchema”=“真實”,“頭”=“真正的”)
但我有新文件和額外的數據。我如何加載,請指導?
謝謝
三角洲表中需要加載新數據文件