約翰於2023年1月20日更新。Lourdu

連接到GCP秘密管理器時SSL異常

提示本文適用於使用Databricks Runtime 7.3 LTS和9.1 LTS的集群。存儲在GCP秘密管理器服務中的問題秘密可以使用google-cloud-secret-manager客戶端庫檢索。在Databricks Runtime 9.1 LTS及以下版本上,您的代碼可能會出現SSLHandshakeException錯誤消息。示例代碼:import com.google.clo…

1分鍾閱讀時間
2023年2月24日由John更新。Lourdu

無法使用Python客戶端訪問增量共享表

問題增量共享是一個獨立於平台的開放協議,用於與其他組織Beplay体育安卓版本安全地共享數據。在使用開放共享模型時,接收方可以使用增量共享Python庫以隻讀格式訪問共享數據。當嚐試使用任何Python客戶端訪問共享表時,您會得到一個SSLCertVerificationError…

1分鍾閱讀時間
約翰於2023年1月20日更新。Lourdu

在查詢Hive和Unity Catalog表時出現重疊路徑錯誤

當你運行查詢時,你得到一個重疊路徑錯誤消息。sparkexception:您的查詢試圖通過多個授權機製訪問重疊路徑,目前不支持。產生原因當一個記事本中的一個單元查詢一個Apache Hive表時發生路徑重疊錯誤…

0分鍾讀取時間
約翰於2023年1月20日更新。Lourdu

在審計日誌中查找來自禁止IP地址的連接

IP訪問列表可用於根據已知的網絡位置限製對Databricks的訪問。一旦啟用,IP訪問列表要求用戶從允許的地址登錄。如果用戶試圖從訪問列表之外的IP地址登錄,則會被拒絕。查看IP訪問列表文檔了解更多細節。最佳實踐包括體育…

1分鍾閱讀時間
約翰於2022年3月4日更新。Lourdu

檢索被禁用用戶擁有的查詢

當Databricks SQL用戶從組織中刪除時,該用戶擁有的查詢仍然保留,但僅對已經擁有訪問權限的人可見。Databricks SQL管理員可以將所有權轉讓給其他用戶,也可以刪除被禁用的用戶帳戶擁有的警報、儀表板和查詢。克隆查詢a Databricks…

0分鍾讀取時間
約翰於2022年5月9日更新。Lourdu

在Windows下使用Databricks命令行創建過程錯誤失敗

當在Windows中嚐試訪問Databricks CLI (AWS | Azure | GCP)時,您得到一個創建進程失敗的錯誤消息。產生原因如果係統上安裝了多個Databricks命令行實例,可能會出現這種情況。如果Windows係統上的Python路徑包含空格。提示在pip中有一個已知的問題,導致pip安裝…

0分鍾讀取時間
約翰於2022年5月11日更新。Lourdu

通過init腳本安裝Turbodbc

Turbodbc是一個Python模塊,它使用ODBC接口訪問關係數據庫。它依賴於libboost-all-dev、unixodbc-dev和python-dev包,這些包需要按順序安裝。可以手動安裝,也可以使用init腳本自動安裝。在記事本中運行這個示例腳本…

0分鍾讀取時間
約翰於2022年10月28日更新。Lourdu

使用Terraform在帳戶級別創建用戶、組或服務主體時出錯

Unity Catalog使用Databricks帳戶身份來解析用戶、服務主體和組,並強製權限。可以使用Terraform管理這些標識。當您試圖在帳戶級別創建用戶、服務主體或組時,您的Terraform代碼失敗並出現set ' host '屬性錯誤消息。2022 - 10 - 06 - t…

1分鍾閱讀時間
2023年2月24日由John更新。Lourdu

向Delta Live Tables管道添加自定義標記

在集群上管理Delta Live Tables管道時,您可能希望使用自定義標記進行內部跟蹤。例如,您可能希望使用標簽在不同部門之間分配成本。或者您的組織可能有一個全局集群策略,該策略要求在實例上添加標簽。不遵守群集策略可能導致群集…

0分鍾讀取時間
由John於2023年1月11日更新。Lourdu

創建外部位置時權限被拒絕錯誤

外部位置是一個存儲位置,例如S3桶,可以在此位置上創建外部表或托管表。具有使用外部位置權限的用戶或組可以訪問外部位置內的任何存儲路徑,而無需直接訪問存儲憑據。審核外部位置和存儲管理方案。

0分鍾讀取時間
約翰於2022年10月31日更新。Lourdu

通過審計日誌可以確定是誰刪除了集群

默認情況下,通用集群配置將在最後一次終止集群後30天刪除。如果管理員固定集群,則可以將集群配置保留超過30天。在任何一種情況下,管理員都可以在任何時候手動刪除集群配置。如果你想經營一份工作……

1分鍾閱讀時間
約翰於2023年1月20日更新。Lourdu

使用雪花作為數據源時,SQL訪問控製錯誤

問題Spark在Databricks中使用雪花連接器(Snowflake Connector)對雪花進行讀寫操作。連接器使Snowflake看起來像另一個Spark數據源。當你試圖查詢雪花時,你會得到一個SnowflakeSQLException錯誤消息。SQL訪問控製錯誤:privileges to…

0分鍾讀取時間
約翰於2022年5月16日更新。Lourdu

Python命令失敗AssertionError:錯誤的顏色格式

你運行一個Python筆記本,它失敗了,並提示AssertionError:錯誤的顏色格式消息。堆棧跟蹤示例:File "/local_disk0/tmp/1599775649524-0/PythonShell.py",第39行,in from ipython .nbconvert. filtering .ansi import ansi2html File "", line 983, in _find_and_load File "<…

1分鍾閱讀時間
約翰於2022年11月30日更新。Lourdu

日誌含義ADLS Gen2上的AAD令牌超時,讀表失敗

可以使用Azure服務主體使用OAuth 2.0配置ADLS Gen2存儲的訪問。您可以使用OAuth 2.0和Azure Active Directory (Azure AD)應用程序服務主體進行身份驗證,安全地訪問Azure存儲帳戶中的數據。您正在嚐試訪問外部表(存儲在根存儲之外的表…

3分鍾閱讀時間
約翰於2022年5月16日更新。Lourdu

訪問已刪除用戶擁有的筆記本

當您從Databricks刪除用戶(AWS | Azure)時,將在工作空間中創建一個特殊的備份文件夾。此備份文件夾包含已刪除用戶的所有內容。工作空間中的備份文件夾顯示為- Backup -#。提示隻有admin用戶可以訪問備份文件夾。訪問備份文件夾:以…方式登錄Databricks。

0分鍾讀取時間
加載更多