2022年5月11日由manjunath.swamy更新
由於訪問令牌無效，作業失敗
當使用dbutils.secrets.get() (AWS | Azure | GCP)時，長時間運行的作業(如流作業)在48小時後失敗。例如:%python streamingInputDF1 = (spark .readStream .format("delta") .table("default.delta_sorce")) def writeIntodelta(batchDF, batchId): table_name = dbutil…
0分鍾閱讀時間
2022年5月23日由manjunath.swamy更新
連接後下載完整結果時出錯
問題:你正在筆記本上處理兩個表格。您執行一個連接。您可以預覽輸出，但是當您嚐試下載完整的結果時，會得到一個錯誤。SQL語句錯誤:AnalysisException: Found duplicate column(s) when insert into dbfs:/ databicks -results/ reproduction Error創建兩個表。%python from pyspark.sql.functions
0分鍾閱讀時間
2022年6月1日由manjunath.swamy更新
與JDBC應用程序不一致的時間戳結果
當使用JDBC應用程序和Databricks集群時，在標準時間和夏令時之間切換時，會看到java.sql.Timestamp結果不一致。產生原因Databricks集群默認使用UTC。timestamp使用JVM的本地時區。如果Databricks集群以字符串形式返回2021-07-12 21:43:08,JVM將解析i…
0分鍾閱讀時間
加載更多