Python三角洲湖

[delta_lake]

我有設置一個虛擬環境在我現有的hadoop集群。因為當前集群沒有火花> 3,所以我使用虛擬環境安裝δ火花。當試圖訪問的hdfs kerberose,得到以下錯誤。你能幫助建議嗎

客戶端身份驗證模式簡單,機製不支持區,身份驗證:kerberos_only

從三角洲進口* builder = pyspark.sql.SparkSession.builder.appName (“MyApp”) \ config (“spark.sql。擴展”、“io.delta.sql.DeltaSparkSessionExtension”) \ config (“spark.sql.catalog。spark_catalog”、“org.apache.spark.sql.delta.catalog.DeltaCatalog”)火花= configure_spark_with_delta_pip (builder) .getOrCreate () spark.read.parquet (“hdfs / parquet_path”)

[Kaniz]

你好@三角洲湖!我的名字叫Kaniz,我這裏的技術主持人。很高興認識你,謝謝你的問題!看看你的同行在社區有一個先回答你的問題。否則我將與我的團隊跟進,回到你soon.Thanks。

[User16753724663]

嗨@Vasanth P,

請您確認您正在使用的DBR版本集群?

有多個DBR版本可用不同的火花和scala版本可以直接利用集群磚。

[Kaniz]

嗨@Vasanth P,隻是一個友好的後續。你還需要幫助或上述反應幫助你找到解決方案了嗎?請讓我們知道。