HiveMetastoreClient問題和內部磚Metastore。

[lecardozo]

我一直在試圖使用HiveMetastoreClient類在Scala中提取一些元數據從內部Metastore磚,沒有成功。我目前使用7.3 LTS運行時。

錯誤似乎與一些客戶端和蜂巢Metastore模式版本之間不一致,但我不能立即告訴原因。通過運行以下Scala代碼片段:

% scala org.apache.hadoop.hive.metastore進口。HiveMetaStoreClient org.apache.hadoop.hive.conf進口。HiveConf var HiveConf = new HiveConf var客戶= new HiveMetaStoreClient (HiveConf)客戶機。可以獲得的(“my_db”、“my_table”)

我得到以下MetaException

引起的:javax.jdo。JDOException:異常拋出時執行查詢:選擇“org.apache.hadoop.hive.metastore.model截然不同。MTable”NUCLEUS_TYPE、A0.CREATE_TIME A0.LAST_ACCESS_TIME, A0.OWNER, A0.RETENTION, A0.IS_REWRITE_ENABLED, A0.TBL_NAME, A0.TBL_TYPE, A0。從中環TBL_ID A0 A0 DBS左外部連接。DB_ID = B0。DB_ID A0的地方。TBL_NAME = ?和B0。“名字”= ?NestedThrowables: java.sql。SQLSyntaxErrorException: (conn=18979393) Unknown column 'A0.IS_REWRITE_ENABLED' in 'field list'

有誰知道可能是什麼問題?

運行時:7.3 LTS

配置:

spark.sql.hive.metastore。版本:0.13.0

[匿名]

你好,@Lucas卡多佐!我的名字是風笛手,我是一個主持人的磚。歡迎光臨!很高興見到你。謝謝你的問題。讓我們給它一段時間成員回應你的問題。我們會再循環在以後如果我們需要。

[Kaniz]

嗨@Lucas卡多佐,似乎是錯誤的SQLSyntaxErrorException這意味著你有一個語法錯誤在您的SQL語句。

州,有一個名為“未知列A0.IS_REWRITE_ENABLED在“字段列表”。

你能請檢查列名再次嗎?

[lecardozo]

嗨,@Kaniz Fatma !謝謝你的回複

這個SQL語句生成的HiveMetastoreClient這些列的磚內部Metastore (metastore_db)。

你知道如果有任何的更新數據磚內部Metastore模式,可以使它在某種程度上不符合“HiveMetastoreClient”?看起來客戶希望這個專欄存在,但似乎它不是

[Atanu]

@Lucas卡多佐也許這可以幫助-https://stackoverflow.com/questions/63782822/setting-up-azure-sql-external-metastore-for-azure-datab..。