集群內訪問工作區文件初始化腳本

[glebex]

問候!

我現在麵臨一個問題在訪問工作區文件從init腳本。

文檔中解釋說,可以把init腳本在工作區文件(鏈接)。這個工作非常好,init腳本被實際執行。

然而,似乎不可能引用一個工作區文件從init腳本本身。例如如果我放置pyproject。toml文件在我的工作區文件夾(/ workspace /用戶/(電子郵件保護)/ pyproject.toml)。這個pyproject訪問。toml在init腳本失敗。

我也想調試一下,試圖根目錄列表(“/”)和/ init腳本執行期間工作區目錄。“ls /”輸出的結果/工作區文件夾可見,然而,“ls /工作區”拋出一個錯誤:

ls:不能開的目錄“/工作區”:無效的論點

我使用Azure磚與集群由我創建DB運行時12.2 LTS毫升。工作區溢價和我管理工作區。

當我看到別人也麵臨著同樣的問題

問候,

Gleb Smolnik

[FRG96]

嗨@Anonymous@glebex

我想使用磚工作區導出REST API使用curl在init腳本下載在本地工作區文件。
推薦的方法是什麼磚實例URL和API的令牌傳遞給init腳本執行上下文?

[User16855814319]

當我們使用磚CLI -它沒有複製. txt文件和另一個解決方案使用磚API,它使用dbfs沒有關於工作區文件API。隻是想檢查是否有另一種方式訪問工作區文件在集群init腳本。

[Kaniz]

嗨@Gleb Smolnik,我們一直沒有收到你自從上次反應@Suteja卡努裏語和@Werner Stinckens,我檢查看看她的建議幫助你。

否則,如果你有任何解決方案,請與社區分享,因為它可以幫助別人。

同時,請別忘了點擊“選擇最佳”按鈕時提供的信息幫助解決你的問題。

[jacob_hill_prof]

@Gleb Smolnik您可能還想嚐試克隆一個github回購init腳本然後存儲依賴需求。txt文件和其他init腳本。通過這樣做你可以把大量的init腳本使用的集群動態轉換的源。

init.sh

git克隆< github回購url > my_repo。git git - c。/ my_repo結帳common_cluster_init #檢出非主要分支pip安裝- r。/ my_repo / init / dbricks_clusters /需求。txt #在回購中使用腳本