連接到針

預覽

這個特性是在公共預覽。

針可以幫助你鞏固你的所有業務數據從不同的數據庫和SaaS應用程序(Salesforce, Hubspot Marketo,等等)到三角洲湖。

下麵是使用與磚縫的步驟。

第一步:生成一個磚個人訪問令牌

針驗證使用磚與磚個人訪問令牌。生成一個個人訪問令牌,按照說明磚個人訪問令牌。另請參閱管理個人訪問令牌。

請注意

作為一個安全最佳實踐,驗證自動化工具時,係統中,腳本和應用程序,磚屬於建議您使用訪問令牌服務主體而不是用戶工作區。為服務主體,創建訪問令牌管理服務主體的訪問令牌。

針將數據寫入一個S3 bucket和磚集成的集群將從該位置讀取數據。因此集成集群需要安全訪問S3 bucket。

AWS資源的訪問,你可以啟動磚集成集群實例的配置文件。實例配置文件應該訪問分期S3 bucket和目標S3 bucket,你想寫三角洲表。創建一個實例配置文件和配置集成集群使用的角色,按照說明安全訪問S3 bucket使用實例配置文件。

作為一種替代方法,您可以使用我憑證透傳,使特定於用戶的訪問S3數據從一個共享集群。

啟用自動優化你通過添加以下屬性火花配置:

                spark.databricks.delta.optimizeWrite.enabled真實spark.databricks.delta.autoCompact.enabled真實
               

集群配置的細節,請參閱配置集群。

看到檢索連接細節的步驟來獲得JDBC URL和HTTP路徑。

去針登錄頁麵,按提示操作。