07-10-202307:45我
大家好!
我試圖讓火花上下文通過運行SparkSession builder . py文件命令,當我試著運行它直接工作,但是如果我有一個筆記本和一個細胞如果我使用% sh命令運行python“myfilename”它給了一個錯誤,我想創建一個新的會話。如何解決呢?
任何幫助將不勝感激。
謝謝
07-10-202307:53我
嗨@deficiant_codgesparksession和sparkcontext,磚已經提供變量。
使用火花sparksession和scsparkcontext。我認為這將幫助你。
07-10-202308:11我
其實我有一些用例,我必須強製運行python文件使用% sh和我不能夠訪問這些變量。我知道這些變量,但問題是他們隻是不工作。看到下麵的圖片:
07-10-2023上午08:42
@deficiant_codge你可以嚐試以下:
07-10-2023上午08:44——編輯07-10-2023上午08:44
我試著它還附加,附加的圖片,但它不工作
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。