我有磚運行時工作將最新10.0 Beta(包括Apache火花3.2.0,Scala 2.12)。
在筆記本上,當我檢查火花的版本,我看到版本3.1.0 3.2.0代替版本
我需要處理工作負載的火花3.2版本,版本修複了https://github.com/apache/spark/pull/32788
截圖集群配置和舊火花版本在筆記本上。
我不認為這是裝載3.2火花。我還看到了問題writeUTF已固定在火花3.2 - >https://github.com/apache/spark/pull/32788
引起的:java。UTFDataFormatException:編碼字符串太長:97548字節java.io.DataOutputStream.writeUTF (DataOutputStream.java: 364) java.io.DataOutputStream.writeUTF (DataOutputStream.java: 323)
無論如何,我將等待磚運行時的正確反映正確的版本。