Databricks-connect 11.3與統一目錄嗎?

[DataEngineer92]

Databricks-connect 11.3工作統一目錄啟用集群或不呢?我試圖利用databricks-connect Azure DevOps管道使用微軟托管代理。但獲得低於databricks-connect測試命令運行時錯誤。

錯誤:

org.apache.spark。SparkException:沒有憑據的範圍。

ValueError: Scala命令未能產生正確的結果

[匿名]

@Rey喬恩:

Databricks-connect應與統一目錄啟用集群。你看到的錯誤可能造成的問題與你的憑證。這裏有一些你可以采取的措施來解決這個問題:

1. 仔細檢查,你提供了正確的數據磚實例URL,個人訪問令牌(PAT),和組織ID配置databricks-connect時。
2. 確保您使用的憑證有正確的權限訪問集群。你可能需要與磚管理員聯係,以確保正確的訪問控製配置。
3. 驗證集群運行和訪問。這可以通過檢查集群的狀態在磚工作區或通過運行一個簡單的火花工作對集群使用磚CLI。
4. 再次嚐試運行databricks-connect測試命令的- verbose標誌是否任何額外的打印錯誤消息。這可能提供更多的洞察,是什麼導致了這個問題。

[marvin1]

嗨,我有同樣的問題。我使用databricks-connect 11.3與11.3運行時Unity-enabled單節點集群。我是磚在集群上管理和管理權限。我生成了一個新帕特和接收此消息。

我沒有看到一個選項來運行databricks-connect詳細模式。請詳細解釋一下嗎?

❯databricks-connect測試——冗長

用法:databricks-connect。exe [h]{配置、測試、get-jar-dir get-spark-home}

databricks-connect。exe:錯誤:無法識別的參數:——冗長

謝謝!

[Vidula_Khanna]

嗨@Rey喬恩

謝謝你發布你的問題在我們的社區!我們很高興幫助你。

幫助我們為您提供最準確的信息,請您花一些時間來回顧反應和選擇一個最好的回答了你的問題嗎?

這也將有助於其他社區成員可能也有類似的問題在未來。謝謝你的參與,讓我們知道如果你需要任何進一步的援助!

[bastih · Accepted solution]

嗨@Rey喬恩

可悲的是,databricks-connect DBR版本< 13不支持加州大學,限製部分中概述:https://docs.www.eheci.com/dev-tools/databricks-connect-legacy.html的局限性。

使用加州大學,我們建議使用DBR版本與databricks-connect > = 13,支持加州大學,有許多額外的生活質量改善了以前的版本。

最好的,

塞巴斯蒂安。