不能安裝com.microsoft.azure.kusto: kusto-spark

[blackcoffeeAR]

你好,

我想安裝/更新圖書館com.microsoft.azure.kusto: kusto-spark_3.0_2.12:3.1.x

試圖與Maven中央存儲庫安裝和使用起程拓殖。

這是以前和現在安裝工作總是以錯誤:

│錯誤:不能創建庫:mvn: com.microsoft.azure.kusto: kusto-spark_3.0_2.12:3.1.7失敗:圖書館的司機節點集群上安裝未遂……,但都以失敗告終。請參考以下錯誤消息來解決圖書館或接觸磚的支持。錯誤代碼:DRIVER_LIBRARY_INSTALLATION_FAILURE。錯誤信息:java . util . concurrent。ExecutionException: io。FileNotFoundException:文件文件:/ local_disk0 / tmp / clusterWideResolutionDir / maven /常春藤/罐/ io.netty_netty-transport-native-kqueue-4.1.59.Final.jar並不存在

我不確定它是磚或Maven庫的問題。

安裝其他庫如com.microsoft.azure: azure-eventhubs-spark_2.12:2.3.22作品。

集群配置:

{"自動定量":{“min_workers”: 1、“max_workers”: 4},“cluster_name”:“....”“spark_version”:“11.3.x-scala2.12”、“spark_conf ": {“spark.locality。等待”:“1800年代”},“azure_attributes ": {“first_on_demand”: 1、“可用性”:“ON_DEMAND_AZURE”、“spot_bid_max_price”: 1},“node_type_id”:“Standard_F8s”、“driver_node_type_id”:“Standard_F8s”、“ssh_public_keys”: [],“custom_tags ": {},“cluster_log_conf ": {“dbfs”:{“目的地”:“dbfs: / cluster-logs}},“spark_env_vars ": {},“autotermination_minutes”: 0,”enable_elastic_disk”:真的,”cluster_source”:“用戶界麵”、“init_scripts”: [],“cluster_id .....“:}

謝謝你的幫助

[Hubert_Dudek1]

從11.3,安裝已經改變了。之前,在控製平麵,現在是在數據平麵。基本上,在集群上安裝全部完成。也許是因為Azure環境的路由設置集群沒有訪問權https://repo.maven.apache.org/(之前在控製飛機,所以沒有問題,路由從磚,但這建築是不正確的。愛人就是為什麼它改變了)

[blackcoffeeAR]

但我不能安裝,因為其他庫安裝從相同的庫(例如com.microsoft.azure azure-eventhubs-spark_2.12:2.3.22):

[phisolani]

我也有同樣的問題一個稍微不同的版本的連接器(變化對小版本)。我有一個工作,每小時運行,具體地說,這開始於1月23日開始發生。錯誤確實相同的說:

運行結果不可用:工作失敗與錯誤消息庫安裝失敗庫由於對maven用戶錯誤{坐標:“com.microsoft.azure.kusto: kusto-spark_3.0_2.12:3.1.6”}。錯誤消息:圖書館的司機節點集群上安裝嚐試0123 - 210011 - 798 - kk68l和失敗。請參考以下錯誤消息來解決圖書館或接觸磚的支持。錯誤代碼:DRIVER_LIBRARY_INSTALLATION_FAILURE。錯誤信息:java . util . concurrent。ExecutionException: io。FileNotFoundException:文件文件:/ local_disk0 / tmp / clusterWideResolutionDir / maven /常春藤/罐/ io.netty_netty-transport-native-kqueue-4.1.59.Final.jar並不存在

我試著安裝maven和“io.netty: netty-transport-native-kqueue: 4.1.59.Final”工作。然而,當安裝“com.microsoft.azure.kusto: kusto-spark_3.0_2.12:3.1.6”它顯示以下錯誤,指向不同的jar文件:

圖書館的司機節點集群上安裝嚐試0131 - 110547 yen1qo6z和失敗。請參考以下錯誤消息來解決圖書館或接觸磚的支持。錯誤代碼:DRIVER_LIBRARY_INSTALLATION_FAILURE。錯誤信息:java . util . concurrent。ExecutionException: io。FileNotFoundException:文件文件:/ local_disk0 / tmp / clusterWideResolutionDir / maven /常春藤/罐/ io.netty_netty-resolver-dns-native-macos-4.1.59.Final.jar並不存在

同時,我可以確認其他通過maven庫可以安裝,例如,“com.databricks: databricks-jdbc: 2.6.32”(見下麵的截圖)

[blackcoffeeAR]

你好@Pedro Heleno Isolani,

我臨時的解決方法是手動安裝失蹤libs /罐:

io.netty: netty-transport-native-kqueue: 4.1.59.Final

io.netty: netty-resolver-dns-native-macos: 4.1.59.Final

io.netty: netty-transport-native-epoll: 4.1.59.Final。

錯誤的主要原因是,在安裝期間的“網狀的*”罐子kusto-spark-lib下載不同的文件名:

netty-transport-native-kqueue-4.1.59.Final-osx-x86_64.jar

BR