磚工作流示例腳本/方法部署工作。json其他工作區

[Databricks_-Dat]

可能有人點我在正確的方向來部署的工作從一個工作空間中的其他工作區使用josn文件Devops CI / CD管道嗎?提前謝謝。

[yuvapraveen_k]

你好,

請使用磚工作GIT存儲庫API來提取工作流定義作為公關之前簽入過程的一部分。在你devops管道,可以根據需要提交的參數使用磚從管道和部署它使用API部署活動或更高的環境。在這個過程中,您還可以使用一種不同的集群設置在部署期間。在許多情況下,集群設置在生產環境中會高於開發環境,因為它處理更多的數據。

[Databricks_-Dat]

謝謝你的快速回複。這聽起來可行的對我們我們使用devops部署piepline。但是我找不到一種自動化的方式鏈接自動工作流定義Git。它必須手動上傳回購GIT簽入?如果可能的話,請指導如何部署管道可以在目的地工作區中創建工作流嗎?它雖然運行python腳本將創建json使用更新後的參數?正如你所說,我需要改變池ID、集群配置等。

謝謝你的幫助!

[yuvapraveen_k]

你是受歡迎的。有一個功能,發布的數據磚自動關聯的工作流定義GIT。請參考下麵的鏈接,

//www.eheci.com/blog/2022/06/21/build-reliable-production-data-and-ml-pipelines-with-git-..。

流的,下麵是你應該遵循的步驟。

步驟1:將工作流與磚的GIT存儲庫功能。如果功能仍然是不可用的,你可以有一個非常簡單的python或shell腳本(使隻有一個API調用)安裝在當地使用這個文檔https://docs.www.eheci.com/workflows/jobs/jobs - 2.0 api.html(這是我們遵循的方法由於我們執行git磚之前添加了功能集成。

步驟2:開發人員檢入代碼。同行批準的公關。

步驟3:Devops管道可以選擇從git工作流配置文件夾,1)執行替換在azure Devops管道使用字符串替換和部署磚工作流在你更高的環境使用任務或一個API調用。2)起程拓殖任務也可以用來部署工作流可能比選項1。

希望有幫助。