取消
顯示的結果
而不是尋找
你的意思是:

之間的區別是什麼合並和重新分區洗牌時分區在火花

Anand_Ladda
尊敬的貢獻者二世
1接受解決方案

接受的解決方案

Anand_Ladda
尊敬的貢獻者二世

實質上合並多個分區分組到一個更大的分區。所以合並使用,當你想減少分區的數量(任務)也沒有影響排序順序。例:當你想寫出一個CSV文件輸出,而不是多個部分

你想引起洗牌時使用重新分區,分區的數量變化。重新分配一個常見的用例是刪除斜在文件大小或開始一個小/不同數量的分區比默認的火花

在原帖子查看解決方案

1回複1

Anand_Ladda
尊敬的貢獻者二世

實質上合並多個分區分組到一個更大的分區。所以合並使用,當你想減少分區的數量(任務)也沒有影響排序順序。例:當你想寫出一個CSV文件輸出,而不是多個部分

你想引起洗牌時使用重新分區,分區的數量變化。重新分配一個常見的用例是刪除斜在文件大小或開始一個小/不同數量的分區比默認的火花

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map