並行執行任務並行處理多個文件

[Phani1]

你好,

如果我們有多個任務下的工作,如何調用一個特定的任務工作。

我們有任何API調用的工作和其特定的任務,而不是工作。

用例:當我們收到多個消息從事件中心,每個基本任務的工作流程並行地從事件中心的消息。

注意:所有的工作的任務是指向相同的筆記本。

[Kaniz]

嗨@Janga Reddy,

您可以使用一個工作運行數據處理或數據分析任務在磚與可伸縮集群的資源。

你的工作可以由一個任務或一個大的多任務工作流與複雜的依賴關係。

磚管理任務的編排、集群管理、監視和錯誤報告為您的工作。

你可以立即運行您的工作或定期通過一個易於使用的調度係統。使用筆記本,你可以實現工作任務的壇子,三角洲生活表管道,Python, Scala,火花提交和Java應用程序。

你通過UI的工作創造就業機會,就業API,或磚CLI。工作界麵允許您監控、測試和排除你的跑步和完成工作。

開始:

• 創建您的第一個磚工作流的工作快速入門。
• 學習如何創建、視圖和運行工作流與數據磚工作用戶界麵。
• 了解喬布斯API更新支持創建和管理工作流與數據磚工作。

[Phani1]

謝謝你的回答,我的問題是,如果我們有多個任務的工作,我們如何調用特定的任務,我能看到API來調用工作,但不是一個特定的任務。請找到附件,供你參考。