我想查詢一個MySQL表使用磚而不是閱讀完整的數據使用一個數據表選項,這將有助於在增量加載。
remote_table = (spark.read
.format (jdbc)
.option(“司機”,司機)
.option (“url”, url)
.option(“查詢”,查詢)
.option(“用戶”,用戶)
.option(“密碼”,密碼)
.load ()
)
請讓我知道如果有某種方式通過查詢
SELECT *從table_name last_modified_date >“yyyy-mm-dd”;
問候,
Swapnil