取消
顯示的結果
而不是尋找
你的意思是:

不能引發上下文中運行在一個單元中運行python文件使用% sh

deficiant_codge
因素二世

大家好!

我試圖讓火花上下文通過運行SparkSession builder . py文件命令,當我試著運行它直接工作,但是如果我有一個筆記本和一個細胞如果我使用% sh命令運行python“myfilename”它給了一個錯誤,我想創建一個新的會話。如何解決呢?

任何幫助將不勝感激。

deficiant_codge_1 - 1689000063074. - pngdeficiant_codge_2 - 1689000103143. - png

謝謝

6個回答6

赫曼特
重視貢獻二世

@deficiant_codgesparksession和sparkcontext,磚已經提供變量。

使用火花sparksession和scsparkcontext。
我認為這將幫助你。

赫曼特索尼

其實我有一些用例,我必須強製運行python文件使用% sh和我不能夠訪問這些變量。我知道這些變量,但問題是他們隻是不工作。
看到下麵的圖片:

deficiant_codge_0 - 1689001870121. - pngdeficiant_codge_1 - 1689001889304. - png

@deficiant_codge你可以嚐試以下:

_spark_session = SparkSession \
構建器 ()\
瀏覽器名稱 ( “myapp” )\
getOrCreate ()
赫曼特索尼

我試著它還附加,附加的圖片,但它不工作

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map