火花集群連接到SQL端點

[carroll_q2]

你好!是否可以從SQL中檢索數據端點的磚SQL角色使用數據的科學和工程形象嗎?換句話說,我想用pyspark DS&E磚SQL查詢一個表。

# DatabricksSQL

# DatabricksDS&E

# ConnectClustersToEndPoints

[werners1]

你不需要sql倉庫本身。ds & e需要一個典型的集群(不是一個sql端點)所以你可以很容易地從metastore讀取表使用spark.read.table ()。

連接sql端點ds集群似乎很奇怪,因為查詢計劃的一部分,將由執行sql端點和ds集群一部分的什麼?

現在你已經可以使用sql端點sql筆記本。

[carroll_q2 · Accepted solution]

@werners1謝謝你的回應!您做一些有效的點。具體來說,你的建議使用spark.read.table()解決方案。