取消
顯示的結果
而不是尋找
你的意思是:

磚JAR任務類型的功能

Chanu
新的貢獻者二世

你好,我想了解磚JAR基於工作流的任務。我可以解釋JAR是類似spark-submit運行基於集群?在日誌中,我希望看到的

com spark-submit——類。xyz, num-executors 4

等等,然後還有一個任務類型介紹了最近我認為——火花提交任務類型。如果我們有一個JAR來執行,並引發提交任務類型和JAR類型隱式相似或不同的工作嗎?

2回答2

Debayan
尊敬的貢獻者三世
尊敬的貢獻者三世

嗨,你能通過https://docs.www.eheci.com/workflows/jobs/how-to-use-jars-in-workflows.html讓我們知道如果這可以幫助嗎?

Chanu
新的貢獻者二世

你好,我試著用了工作流> CreateTask > JarTaskType > >工作UploadedMyJAR類和JobCluster創建和測試這一任務。這個罐子讀取一些表作為輸入,做一些轉換和輸出寫一些其他表。我想知道這個罐子可以解釋為任務類型

com spark-submit——類。xyz - num-executors

工作嗎?因為我在尋找這樣的條目在日誌文件中,但不能找到任何。JAR任務類型的工作原理,如何是我的實際問題嗎?

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map