無法運行筆記本即使集群和數據庫運行/表在“數據”選項卡是不可見的。

[匿名]

我們使用Dataricks AWS。我不能夠運行一個筆記本即使集群運行。當我運行一個細胞,它返回“取消”。當我檢查事件日誌的集群,它顯示了“Metastore下降”。看不到任何數據庫或表,我在“數據”選項卡中,創建其繼續顯示加載並返回一些錯誤。

感謝幫助。

[Atanu]

所以這意味著你仍然需要檢查你的配置外部metastore。

如果你運行低於-什麼輸出

% scala

val metastoreURL = spark.sparkContext.hadoopConfiguration.get (“javax.jdo.option.ConnectionURL”)

val metastoreUser = spark.sparkContext.hadoopConfiguration.get (“javax.jdo.option.ConnectionUserName”)

val metastorePassword = spark.sparkContext.hadoopConfiguration.get (javax.jdo.option.ConnectionPassword)打印(metastoreURL)

打印(metastoreUser)

此外,值得嚐試重新檢查配置。

[User16753725182 · Accepted solution]

這意味著網絡是不錯,但是火花配置中有些問題了。

DBR版本和蜂巢版本是什麼?請檢查f您正在使用一個兼容的版本。

如果你不指定任何版本,需要1.3,你就不會在這種情況下使用jar。

請使用以下配置適當的值,

spark.hadoop.datanucleus。fixedDatastore假spark.hadoop.datanucleus。spark.hadoop.datanucleus autoCreateSchema如此。spark.hadoop.javax.jdo.option autoCreateTables如此。ConnectionURL jdbc: mariadb: / / <數據庫名稱> .cj11tymkwz5w.us -西方- 2. rds.amazonaws.com: 3306 / databricks_metastore嗎?createDatabaseIfNotExist = true spark.hadoop.javax.jdo.option。ConnectionDriverName org.mariadb.jdbc。司機spark.hadoop.javax.jdo.option。ConnectionUserName <價值> spark.hadoop.javax.jdo.option。ConnectionPassword <值>

[jose_gonzalez]

嗨@Dhusanth Thangavadivel,

隻是一個友好的後續。做@Kavya馬諾哈爾帕爾的反應幫助你解決這個問題?