取消
顯示的結果
而不是尋找
你的意思是:

有沒有一種方法在同一會話並發運行筆記本?

有德
新的貢獻者三世

試著用,

dbutils.notebook.run (notebook.path筆記本。超時,notebook.parameters)

但這需要20秒開始新會話。%運行使用相同的會話,但無法弄清楚如何使用它來運行並發筆記本。

1接受解決方案

接受的解決方案

Hubert_Dudek1
尊敬的貢獻者三世

dbutils.notebook.run開始一份新工作,這就是為什麼需要這個時間和測試你可以啟動多個並發使用ThreadPool或其他異步庫。可能與更好的服務器,它可以是10秒,而不是20。

%運行執行等其他筆記本是筆記本的代碼運行(如包括在某些語言)。

也許你可以計劃一個不同的架構方式(但這取決於用例),這種方式是沒有時間而不是關鍵項目(分析)。流和δ生活表應該使用相反,如果它是一個項目的時候,20多歲的延遲是太多了。

在原帖子查看解決方案

14日回複14

Hubert_Dudek1
尊敬的貢獻者三世

dbutils.notebook.run開始一份新工作,這就是為什麼需要這個時間和測試你可以啟動多個並發使用ThreadPool或其他異步庫。可能與更好的服務器,它可以是10秒,而不是20。

%運行執行等其他筆記本是筆記本的代碼運行(如包括在某些語言)。

也許你可以計劃一個不同的架構方式(但這取決於用例),這種方式是沒有時間而不是關鍵項目(分析)。流和δ生活表應該使用相反,如果它是一個項目的時候,20多歲的延遲是太多了。

User16484554092
新的貢獻者二世
新的貢獻者二世

另一種方法是使用喬布斯API並與現有的集群利用notebook_task (existing_cluster_id)。

Prabakar
尊敬的貢獻者三世
尊敬的貢獻者三世

您可以使用崗位工作流程。它幫助你並行運行筆記本以及順序。

有德
新的貢獻者三世

有辦法給其他使用工作流數據從一個筆記本嗎?

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map