在Databricks上部署DBT剛剛變得更簡單

在Databricks,沒有什麼比使我們的用戶更加生產力更快樂了,這就是為什麼我們很高興宣布DBT的本地適配器的原因。現在,使用SQL在數據鏈球上開發可靠的數據管道比以往任何時候都容易。

DBT是一種流行的開源工具,可讓新型的“分析工程師”使用簡單的SQL構建數據管道。一切都是在目錄中組織的,如純文本,使版本控製,部署和可檢驗性簡單。

與新的專用dbt-databricks今天的公共預覽中可用的適配器,DBT開發人員可以通過簡單地運行來啟動PIP安裝dbt-databricks。該包裝是開源的,並建立在DBT Labs和其他貢獻者領導的精彩作品上DBT Spark可能的。我們不僅通過刪除對ODBC驅動程序的任何依賴性來簡化安裝,而且還接受了DBT的“構型構圖”,以獲得最大的性能:

  • DBT模型默認使用Delta格式
  • 增量模型總是利用三角洲湖的合並聲明
  • 昂貴的查詢(例如獨特的關鍵一代)現在加速了光子

隨著我們繼續改善DBT和DBT之間的整體整合,該適配器的更多改進即將到來Databricks Lakehouse平Beplay体育安卓版本台。憑借創紀錄的性能和對標準SQL的全麵支持,它是運行數據倉庫工作負載的最佳場所,包括使用DBT構建的數據管道。

我們也對即將添加DBT雲的添加到合作夥伴連接Databricks的一站式商店供客戶發現和集成市場上的最佳數據和AI工beplay体育app下载地址具。DBT Cloud是DBT Labs提供的托管服務,該服務可幫助數據分析師和數據工程師協作構建和生產DBT項目。beplay娱乐ios在一月份,任何數據助劑客戶都將能夠從合作夥伴Connect啟動DBT Cloud的免費試用,並自動整合這兩種產品。也就是說,這兩種產品已經可以一起工作,我們鼓勵您將DBT雲連接到Databricks今天。

說到DBT Labs,我們希望在他們的會議上見到您,CoaleSce從今天開始!雷諾Xin將有一個爐邊聊天與Drew Banin一起,DBT實驗室的CPO和Ricardo Portillo將談論為金融服務構建數據管道利用DBT和Databricks。您絕對應該檢查一下,並加入DBT社區懈怠的對話#Coalesce-Databricks。我們期待您的反饋!

請繼續關注Databricks如何與DBT合作的更多令人興奮的更新,並觀看我們的GitHub存儲庫用於新版本。

免費嚐試Databricks 開始

注冊

Baidu
map