取消
顯示的結果
而不是尋找
你的意思是:

使用SQL或火花特別% SQL磚的筆記本,有辦法使用分頁或抵消或跳過嗎?

User16783853501
新的貢獻者二世
新的貢獻者二世

使用SQL或火花特別% SQL磚的筆記本,有辦法使用分頁或抵消或跳過嗎?

2回答2

Anand_Ladda
尊敬的貢獻者二世

你能闡明你所尋找的是什麼,你的用例是什麼嗎?你在問是否有偏愛使用火花SQL或直接與% SQL或SQL別的嗎?

sajith_appukutt
尊敬的貢獻者二世

沒有抵消支持。這裏有一些可能的解決方法

  • 如果你的數據都是在一個分區(很少的情況:slightly_smiling_face:),您可以創建一個列monotonically_increasing_id和應用過濾條件。如果有多個分區,monotonically_increasing_id不會連續

  • 使用除(在你的情況中下麵的sql的代碼)。但是,這將是一個昂貴的操作
df1 = df.limit (10);df2 = df.except (df1);df2.limit (20);

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map