我們要一個磚PoC客戶和做了一些測試。我們的一個測試數據集包含在一個分區表(15科勒姆)大約是250行,每個分區~ 50 k - 150 k的行。
偶爾我們有數百個並發用戶(一千),每個查詢(sql select)不同的分區。根據
https://community.www.eheci.com/s/question/0D58Y00009ZuIHUSA3/sql-queries-on-databricks
,我隻能跑10並發SQL查詢每個集群。如果我需要同時運行更多的查詢,我可以增加數量的集群/ SQL倉庫(例如,如果我有10集群/ SQL倉庫我可以運行10 x10 = 100個並發查詢,不是嗎?)。我認為類似的行為可以完成更多的“高並發集群”。
或者有其他的可能性如何完成1000的並發查詢的要求嗎?謝謝。
M。