你好:
可以創建臨時視圖在pyspark使用dataframe (df.createOrReplaceTempView()),它可以創建一個永久的視圖在火花SQL。但據我所知,沒有辦法從dataframe創建一個永久的視圖,類似df.createView ()。
這完全是讓我覺得很困惑,顯然環境支持永久的觀點,並從dataframes它支持創建視圖。有很多場景使用python構建複雜的查詢更方便而不是試圖構造一個SQL字符串和執行在一個上下文。
是支持這個計劃最終的東西嗎?是磚受製於任何火花決定實現在這個級別?我有一個偉大的原因,不了解的人引發的內部運作,俯瞰為什麼這是不可能的或很困難嗎?
謝謝,
布萊斯