連接到瑪蒂利安
Matillion ETL是一個專門為雲數據庫平台(包括Databricks)構建的ETL/ELT工具。Beplay体育安卓版本Matillion ETL有一個現代的,基於瀏覽器的UI,具有強大的,下推式ETL/ELT功能。
您可以集成Databricks SQL倉庫(以前Databricks SQL端點)和Databricks集群Matillion。
使用夥伴連接連接到Matillion
本節描述如何使用Partner Connect來簡化Databricks工作區中的現有SQL倉庫或集群連接到Matillion的過程。
需求
看到需求使用夥伴連接。
連接的步驟
要使用Partner connect連接到Matillion,請遵循本節中的步驟。
提示
如果您已有Matillion帳戶,Databricks建議您手動連接到Matillion。這是因為合作夥伴連接中的連接體驗針對新的合作夥伴帳戶進行了優化。
在側欄中,單擊合作夥伴聯係.
單擊Matillion瓷磚。
的電子郵件框顯示Databricks帳戶的電子郵件地址。Matillion使用此電子郵件地址提示您創建一個新的Matillion帳戶或登錄到您現有的Matillion帳戶。
點擊連接到Matillion ETL或登錄.
瀏覽器中會打開一個新選項卡,其中顯示Matillion Hub。
在Matillion中完成屏幕上的說明,以創建14天的Matillion試用帳戶或登錄到現有的Matillion帳戶。
重要的
如果出現錯誤,說明您組織中的某人已經在Matillion中創建了帳戶,請聯係您組織的管理員之一,並讓他們將您添加到組織的Matillion帳戶。在他們添加你之後,登錄到你現有的Matillion帳戶。
完成屏幕上的說明以提供您的工作詳細信息,然後單擊繼續.
完成屏幕上的說明以創建組織,然後單擊繼續.
單擊您創建的組織,然後單擊添加Matillion ETL實例.
點擊繼續瀏覽AWS.
打開Amazon EC2控製台。
遵循使用亞馬遜機器映像啟動Matillion ETL在Matillion ETL文檔中,從步驟5開始。然後在Amazon Web Services (EC2)上訪問Matillion ETL在Matillion ETL文檔中。
遵循關聯實例在Matillion ETL文檔中。
在瀏覽器中打開Matillion ETL,然後創建項目對話框。
遵循在Databricks項目上創建一個Delta Lake在Matillion文檔中。
中的設置三角洲湖泊連接節中,輸入以下信息:
為工作區ID,輸入Databricks工作區的ID。看到工作區實例名、url和id.
為用戶名,輸入單詞
令牌
.為密碼,輸入Databricks個人訪問令牌的值。
為了得到工作區ID並生成個人訪問令牌,執行以下操作:
返回到瀏覽器中的Partner Connect選項卡。
請注意工作區ID.
點擊生成一個新的令牌.
控件的新選項卡將在瀏覽器中打開用戶設置Databricks界麵。
點擊生成新令牌.
可選地輸入描述(注釋)和過期期限。
點擊生成.
複製生成的個人訪問令牌並將其存儲在安全的位置。
返回到瀏覽器中的Matillion選項卡。
中的設置三角洲湖違約節內的這些說明,為集群,選擇SQL倉庫或集群的名稱。
繼續下一個步驟.
手動連接到Matillion
本節描述如何手動將Databricks工作區中的現有SQL倉庫或集群連接到Matillion。
請注意
您可以使用Partner connect連接到Matillion,以簡化體驗。
需求
在手動集成Matillion之前,您必須具備以下條件:
一個Matillion ETL實例,您可以使用它來啟動AWS CloudFormation,一個亞馬遜機器圖像(AMI),或AWS市場.
Databricks個人訪問令牌。
請注意
作為安全最佳實踐,當使用自動化工具、係統、腳本和應用程序進行身份驗證時,Databricks建議您使用屬於的訪問令牌服務主體而不是工作區用戶。要為服務主體創建訪問令牌,請參見管理服務主體的訪問令牌.
連接的步驟
要手動連接到Matillion,請執行以下操作:
獲取工作區中要使用的現有計算資源(SQL倉庫或集群)的名稱。稍後,您將選擇該名稱來完成計算資源和Matillion ETL實例之間的連接。
遵循連接到Matillion ETL實例並登錄到它在Matillion文檔中。
遵循在Databricks項目上創建一個Delta Lake在Matillion文檔中。
中的設置三角洲湖泊連接節中,輸入以下信息:
為工作區ID,輸入Databricks工作區的ID。看到工作區實例名、url和id.
為用戶名,輸入單詞
令牌
.為密碼,輸入Databricks個人訪問令牌。
中的設置三角洲湖違約節內的這些說明,為集群,選擇SQL倉庫或集群的名稱。
繼續下一個步驟.