現在磚新的運行時版本是可用的
PySpark內存分析-內存分析現在啟用PySpark用戶自定義函數。這提供了內存的信息增量、內存使用和出現的數量為每個行代碼在一個用戶定義的函數。
動態修剪刪除和更新
刪除
和
更新
現在使用動態文件和分區修剪實例,提高了性能。例如,動態修剪是一個較小的源表時啟用用於更新或刪除行更大的表。
錯誤修複
JSON解析固定一個問題自動加載程序,所有列作為字符串。以前,cloudFiles。在ferColumnTypes was not set or set to false and the JSON contained nested objects.
