Databricks認證和徽章

湖屋培訓和認證的新標準

Databricks認證數據工程師專業

Databricks認證數據工程師專業認證考試評估個人使用Databricks執行高級數據工程任務的能力。這包括了解Databricks平台和開發工具，如Apache Spark、Delta Lake、MBeplay体育安卓版本Lflow以及Databricks CLI和REST API。它還評估構建優化和清潔的ETL管道的能力。此外，還將評估使用一般數據建模概念的知識將數據建模到Lakehouse。最後，在部署前確保數據管道的安全、可靠、監視和測試也將包括在本次考試中。通過該認證考試的個人可以使用Databricks及其相關工具完成高級數據工程任務。

登記

為了獲得這一認證，獲獎者必須通過認證考試。要取得此認證，請登錄或在我們的網站上創建帳戶認證平台Beplay体育安卓版本．

學習途徑

該認證是數據工程師學習途徑的一部分。

學習的道路

考試的細節

關於認證考試的關鍵細節如下所示。

最低限度合格候選人

最低限度合格的候選人應該能夠:

了解如何使用Databricks平台及其工具的好處，包括:Beplay体育安卓版本

Beplay体育安卓版本平台(筆記本、集群、作業、Databricks SQL、關係實體、repo)
Apache Spark (PySpark, DataFrame API，基本架構)
Delta Lake(基於sql的Delta api、基本架構、核心功能)
Databricks CLI(部署基於筆記本的工作流)
Databricks REST API(配置和觸發生產管道)

使用Spark和Delta Lake api構建數據處理管道，包括:

構建批量處理的ETL管道
構建增量處理的ETL管道
優化工作負載
刪除數據
使用變更數據捕獲(CDC)來傳播變更

模型數據管理解決方案，包括:

Lakehouse(青銅/銀/金架構，數據庫，表，視圖和物理布局)
一般數據建模概念(鍵、約束、查找表、緩慢變化的維度)

使用圍繞安全和治理的最佳實踐構建生產管道，包括:

使用acl管理筆記本和作業權限
創建麵向行和列的動態視圖來控製用戶/組訪問
安全存儲個人身份信息(PII)
根據GDPR和CCPA的要求安全地刪除數據

配置告警和存儲來監控和記錄生產作業，包括:

設置通知
配置SparkListener
記錄記錄的指標
導航和解釋Spark UI
調試錯誤

遵循管理、測試和部署代碼的最佳實踐，包括:

依賴關係管理
創建單元測試
創建集成測試
調度工作
版本控製代碼/筆記本電腦
編製工作

持續時間

測試人員將有120分鍾的時間完成認證考試。

問題

認證考試有60道選擇題。問題將按高級別專題按以下方式分發:

Databricks工裝- 20% (12/60)
數據處理- 30% (18/60)
數據建模- 20% (12/60)
安全和治理- 10% (6/60)
監控和記錄- 10% (6/60)
測試和部署- 10% (6/60)

成本

認證考試的每一次嚐試都將花費200美元。測試人員可能需要繳納稅款，這取決於他們的地點。測試人員可以想參加多少次考試就可以參加多少次，但每次考試都需要支付200美元。

測試艾滋病

在這次考試中沒有可用的測試輔助工具。

編程語言

這個認證考試的代碼示例將主要使用Python。但是，對Delta Lake功能的任何和所有引用都將在SQL中進行。

過期

由於數據工程師的職責和Databricks Lakehouse平台的能力變化的速度，本認證的有效期為每個測試人員通過認證考試之日起2年。Beplay体育安卓版本

準備

為了學習認證考試評估的內容，考生應參加以下Databricks Academy課程之一:

教師指導:高級數據工程與數據庫
自定進度:使用Databricks的高級數據工程(即將推出)

考生還可以通過參加認證考試的概述課程(即將推出)來了解更多關於認證考試的知識。