取消
顯示的結果
而不是尋找
你的意思是:

使用三角洲的優點是什麼生活表(DLT)數據構建工具(印度生物技術部)磚嗎?

Prachi_Sankhala
新的因素

請解釋了一些用例展示DLT和印度生物技術部之間的區別。

1接受解決方案

接受的解決方案

Priyag1
尊敬的貢獻者二世

@Prachi Sankhala這些用例

在原帖子查看解決方案

7回複7

Priyag1
尊敬的貢獻者二世

數據構建工具(印度生物技術部)是一個轉換工具,旨在簡化分析工程師的工作數據管道工作流。隻有ETL轉換的具體實現過程。

而三角洲生活表(DLT)是一個框架,讓用戶可以更容易設計數據管道和控製數據質量。它涵蓋了整個ETL過程和集成數據磚

Priyag1
尊敬的貢獻者二世

用例:

數據沿襲圖

使數據團隊更有效率,數據沿襲圖可以用來發現問題在數據更容易和更快。這也使簡單的團隊的新成員,數據分析師或其他同事了解的數據管道。

  • 印度生物技術部

數據沿襲圖包括源表在數據倉庫中,不同的轉換後的表和儀表板顯示表的業務價值。但是不可能盤旋在或單擊表和看到更多的信息。

  • 三角洲生活表

譜係圖顯示的數據表,數據加載後湖和不同表的數據轉換。更多關於不同的表的信息可以通過單擊表獲得。

  • 比較

顯示表的來源和轉換,但隻有印度生物技術部還顯示數據的終點是什麼,如果這是一個儀表板,應用程序或數據科學管道。

Priyag1
尊敬的貢獻者二世

增量表

在大數據的數據量非常龐大,不可能每次加載所有數據添加了幾行,延遲將是巨大的。為了解決這個問題,增量表隻加載這些額外的行。轉換第一花了幾個小時滴現在幾秒鍾。

  • 印度生物技術部

增量模型創建整個表是第一次運行適應的SQL代碼在增量運行逐步轉換數據

  • 三角洲生活表

增量地轉換和加載湖的數據從數據到數據倉庫都是可能的。

  • 比較

兩者都可以逐步轉換數據,但是三角洲生活表也可以逐步加載數據。

Priyag1
尊敬的貢獻者二世

詳細的日誌記錄

的工程師保持不同的基礎設施和連接,記錄是非常重要的定位誤差是什麼,更重要的是,在一個特定的錯誤發生。日誌記錄,可以準確地確定出了問題非常有效地和行動可以立即發生。這樣一條生產線沒有經曆太多或任何停機時間。

  • 印度生物技術部

運行生成的日誌是一個印度生物技術部命令在命令行界麵,存儲在一個文件夾指定日誌在項目文件夾中。

三角洲生活表

  • 日誌直接集成在UI中。每個事件的更多信息可以找到當點擊特定的事件。
  • 實時更新當在集群上運行。
  • 失敗的數據質量要求的捕獲事件日誌
  • 自動監控、恢複和管理

比較

都有一個廣泛的日誌,但隻有三角洲生活表有實時更新和視覺界麵的過程。

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map