09-07-202201:03我
嘿,夥計們,
我用petastorm培訓款,首先我將火花df make_spark_convertor物化數據集,然後打開一個讀者。
雖然我隻在開始訓練子集的數據沒問題,但每件事當我用所有數據集與Python 500批我的筆記本崩潰後的內核是反應遲鈍,你們知道這發生了什麼嗎?
我看到有點類似的問題,我已把線程轉儲,但沒有理解它。
除了我得到很多未來的警告petastorm pyarrow,知道如何避免所有這些警告嗎?
11-11-2022下午07:26
同樣的錯誤。這開始在筆記本電腦前幾天過去用於運行良好。現在,我無法完成一個筆記本。
我已經禁用幾乎所有輸出直播結果緩衝區,但問題依然存在。我剩下< 50行被記錄/打印。如果磚不能處理這樣一個最少的輸出,它不是一個可用的解決方案。
從未顯出
加入我們的快速增長的數據專業人員和專家的80 k +社區成員,準備發現,幫助和合作而做出有意義的聯係。
點擊在這裏注冊今天,加入!
參與令人興奮的技術討論,加入一個組與你的同事和滿足我們的成員。