取消
顯示的結果
而不是尋找
你的意思是:

如何優化PySpark之間的轉換和箭?

User16776430979
新的貢獻者三世

似乎您可以轉換dataframes和箭頭對象之間用熊貓作為中介,但是有一些限製(例如,它收集DataFrame中的所有記錄的司機和應該做的一小部分數據,點擊類型轉換警告和耗盡內存)。

更有效和優化方法是什麼從PySpark箭頭嗎?

1回複1

Kaniz
社區經理
社區經理

嗨@josephine.ho !我的名字叫Kaniz,我這裏的技術主持人。很高興認識你,謝謝你的問題!看看你的同行在論壇上先回答你的問題。否則我們將很快跟進與回複。

歡迎來到磚社區:讓學習、網絡和一起慶祝

加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。

點擊在這裏注冊今天,加入!

參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。

Baidu
map