沒有安裝集群範圍SparkR圖書館

[羅斯]

試圖安裝SparkR集群並成功安裝其他包如tidyverse通過凹口。下麵的錯誤是複製,你可以提供的任何幫助我將非常感謝!

磚運行時10.4 LTS

圖書館的司機節點集群上安裝嚐試0527 - 101647 p8flqbiy和失敗。請參考以下錯誤消息來解決圖書館或接觸磚的支持。錯誤代碼:DRIVER_LIBRARY_INSTALLATION_FAILURE。錯誤信息:錯誤:錯誤安裝R包:不安裝包錯誤:包“SparkR”不可用這個版本的R

完整的錯誤日誌可以在/磚/司機/ library-install-logs / r -包裝-安裝- 2022 - 08 - 04 - t12:04:30z - 8 gumapnw.log

錯誤:錯誤安裝R包:不安裝包錯誤:包“SparkR”不可用這個版本的R

完整的錯誤日誌可以在/磚/司機/ library-install-logs / r -包裝-安裝- 2022 - 08 - 04 - t12:04:30z - 8 vp_gpk1.log

[Prabakar]

嗨@Ross漢密爾頓看起來未能得到包安裝。你可以檢查日誌來理解這個問題。

我相信失敗是因為依賴失蹤。我建議檢查依賴庫和安裝它們。

你可以嚐試以下步驟。

一)從筆記本安裝自由使用命令。

install.packages ()

b)安裝lib複製到dbfs。

cp - r / local_disk / env / dbfs / path_to_r_library

c)使用init腳本庫安裝在集群自由路徑。

# #定義腳本腳本的內容= " " # !/bin/bash R -香草< < EOF係統(“cp - R / dbfs / path_to_r_library /磚/火花/ R / lib /”,實習生= T)問()EOF”“”

[羅斯]

嗨

恐怕解決不工作:

install.packages (SparkR)包安裝到/ local_disk0 /。ephemeral_nfs / env / renv - 1 - c6d7759 - 7751 - 4681 - 8489 - a027452405f0”(如“自由”是未指定的)警告:包的SparkR”不可用這個版本的R R的版本這個包的版本可能是可用在其它地方,看到的想法https://cran.r-project.org/doc/manuals/r-patched/R-admin.html安裝包

但是如果我去加載庫SparkR這工作好。我認為這是同樣的問題在安裝包到集群。

庫(SparkR)附加包:“SparkR”蒙麵_by_以下對象”。GlobalEnv”: setLocalProperty蒙麵以下對象從“包:統計”:浸,過濾器,滯後,na。省略,預測,sd, var,窗口下麵的對象從“包:基地”....蒙麵

[Prabakar]

你在日誌中找到任何信息?

完整的錯誤日誌可以在/磚/司機/ library-install-logs / r -包裝-安裝- 2022 - 08 - 04 - t12:04:30z - 8 vp_gpk1.log

[Vivian_Wilfred]

嗨@Ross漢密爾頓

我相信SparkR內置磚RStudio和你不必顯式地安裝它。你可以直接導入庫(SparkR)從你的上麵的評論,它適合你。

你所看到的錯誤消息可能是紅鯡魚。這是否回答了你的問題還是我遺漏了什麼東西?