舊火花版本加載到火花筆記本

[dbu_spark]

我有磚運行時工作將最新10.0 Beta(包括Apache火花3.2.0,Scala 2.12)。

在筆記本上,當我檢查火花的版本,我看到版本3.1.0 3.2.0代替版本

我需要處理工作負載的火花3.2版本,版本修複了https://github.com/apache/spark/pull/32788

截圖集群配置和舊火花版本在筆記本上。

[Hubert_Dudek1]

如果你使用池請檢查預加載的版本是集也在池中。

如果不是這個問題我不能幫助我甚至還沒有看到10.0(畢竟這是β)

[匿名]

我得到了同樣的事情,當我測試出來。我想這就是為什麼它是β,應該得到固定很快我想象。

[dbu_spark]

我不使用池。謝謝你的更新。希望這很快被固定。

[Dan_Z]

這是由於一些法律術語相關的開源火花和磚的火花。由於開源尚未公布v3.2火花,我們不允許調用一個在DBR 10 v3.2呢。雖然它可能補丁已經在那裏。