我在升級到11.3的過程。我用火花3.3.0,scala 2.12, maven和塞多納1.2.0孵化並遵循安裝塞多納概述在這裏。一切都進行的很順利到達塞多納在7.3版本,但目前扔功能和提供一個零例外函數的構造函數。
創建集群,我通過一個json配置中概述的init腳本位置和設計上麵的鏈接。然後我點maven標準坐標(據我所知它在磚應該檢查罐的位置,如果他們沒有下載從maven回購)。
我已經檢查了數據的函數,在幾何沒有null值。我曾經嚐試過不同版本,直接從dbfs加載jar,手動經曆數據為null或意想不到的價值。我試過一個以上的數據集將這個函數。都做同樣的事情。
我道歉,如果這沒有多大意義,我沒有很多經驗數據磚。