有沒有一種方法在同一會話並發運行筆記本?

[有德]

試著用,

dbutils.notebook.run (notebook.path筆記本。超時,notebook.parameters)

但這需要20秒開始新會話。%運行使用相同的會話,但無法弄清楚如何使用它來運行並發筆記本。

[Hubert_Dudek1 · Accepted solution]

dbutils.notebook.run開始一份新工作,這就是為什麼需要這個時間和測試你可以啟動多個並發使用ThreadPool或其他異步庫。可能與更好的服務器,它可以是10秒,而不是20。

%運行執行等其他筆記本是筆記本的代碼運行(如包括在某些語言)。

也許你可以計劃一個不同的架構方式(但這取決於用例),這種方式是沒有時間而不是關鍵項目(分析)。流和δ生活表應該使用相反,如果它是一個項目的時候,20多歲的延遲是太多了。

[User16484554092]

另一種方法是使用喬布斯API並與現有的集群利用notebook_task (existing_cluster_id)。

[Prabakar]

您可以使用崗位工作流程。它幫助你並行運行筆記本以及順序。

[有德]

有辦法給其他使用工作流數據從一個筆記本嗎?