12-16-202102:11我
你好,
我開發一個集群節點初始化腳本(https://docs.gcp.www.eheci.com/clusters/init-scripts.html環境變量),以便安裝一些自定義庫。
閱讀的文檔數據磚我們可以得到一些環境變量與數據相關的當前運行的集群節點。
但我需要找出引發& Scala版本目前被部署。這是可能的嗎?
謝謝提前
問候
12-16-202106:16點
嗯,這是一個出租汽車司機的想法,也許有一個更好的辦法,但你可以
ls /磚/罐/火花*
和解析結果的火花和Scala版本。你會看到像火花——命令——command-spark_3.1_2.12_deploy文件。包含版本的jar。
在原帖子查看解決方案
12-16-2021早上07:00
嗨@A Huarte !我的名字叫Kaniz,我這裏的技術主持人。很高興認識你,謝謝你的問題!看看你的同行在社區中有一個回答你的問題。否則我將盡快給你回電。謝謝。
12-16-202108:32我
嗨Kaniz,非常感謝。當然我將學習在這個論壇。
12-16-2021十12點
嗨@A裏你可以得到DBR的火花和scala版本,您將使用集群。
12-16-2021十是
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。