Pyspark 3.3.0 exceptAll 11.3 LTS但不是在本地工作

[140015年]

你好,

目前我在升級過程DBR到11.3版本LTS版在我的工作。pyspark版本升級到3.3.0後我發現,本地機器exceptAll功能壞了(它看起來像其他人也有類似的問題)。它拋出錯誤列不能被發現(見附截圖)。奇怪,是什麼在磚11.3 LTS集群(它使用火花3.3.0根據文檔)同樣的計算工作!

這怎麼可能?我缺少什麼?

[140015年]

隻是為了記錄pyspark升級到版本3.3.1解決這個問題,但我想參照相同版本的pyspark像我對LTS……

[Vidula_Khanna]

嗨@Jacek Dembowiak

希望一切進行得很順利。

隻是想檢查如果你能解決你的問題。如果是的,你會很高興的答案標記為最好,其他成員可以找到解決方案更快嗎?如果不是,請告訴我們,我們可以幫助你。

幹杯!