瀏覽
磚
幫助
登錄
開始使用磚
開始討論
開始資源
磚平台Beplay体育安卓版本
技術博客
磚平台的討論Beplay体育安卓版本
工程數據
機器學習
倉庫&分析
數據治理
管理和架構
學習
學習討論
培訓產品
認證
學習路徑
認證
組
地區和利益集團
美洲
亞太地區
利益集團
事件
社區灣
社區討論
社區新聞&成員認可
sarvesh
貢獻者三世
自
11-16-2021
06-26-2023
用戶數據
28
的帖子
2
解決方案
14
榮譽給
12
榮譽收到
磚
關於sarvesh
用戶活動
的帖子
回複
審計Vertica表在火花!
12-20-2021
我試圖使用審計從Vertica火花和獲得正確的表大小,但審計函數可以找到的最小大小字節,但我們正在位甚至小於字節的數據。val大小= f”選擇審計(table_name);”
讀值百分比火花(沒有鑄造)
12-01-2021
我xlsx文件單個列;percentage30 % 40% 50% -10% 0.00% 0% 0.10% 110% 99.99% 99.98% -99.99% -99.98%當我讀到這個使用Apache-Spark把我得到的是,| |百分比0.3 + - - - - - - - - - - - + | | | 0.4 | 0.5 | | | -0.1 | 0.0 | | |……
我們可以讀一個excel文件與許多表索引嗎?
11-25-2021
我想讀一個excel文件3表有整數作為名稱,表1名= 21表2名= 24表3名= 224我得到這個數據從用戶不能改變表的名稱,但引發閱讀這些是一個問題。代碼- v……
. lang。OutOfMemoryError: GC開銷限製超過。(解決)
11-22-2021
解決方案:——我不需要添加任何遺囑執行人或驅動程序內存我要做在我的例子中是添加這個:——選項(“maxRowsInMemory”, 1000)。之前我甚至不讀9 mb文件現在我剛讀了一個50 mb的文件,而不會產生任何錯誤。{val df =火花。讀.f……
異常的線程org.apache.spark.sql“主要”。AnalysisException:不能修改引發的價值配置:spark.executor.memory;
11-22-2021
我試圖讀取16 mb的excel文件,我得到一個gc開銷限製超過錯誤來解決,我想提高我的遺囑執行人記憶,spark.conf.set (“spark.executor。記憶”、“8 g”),但我有以下堆棧:使用火花的默認l…
查看更多
在火花Re:閱讀百分比值(鑄造)
12-01-2021
鑄造並不是我想要的想我得到一個大excel文件數百萬行,鑄造會超級慢。
再保險:. lang。OutOfMemoryError: GC開銷限製超過。(解決)
12-01-2021
完成
再保險:. lang。OutOfMemoryError: GC開銷限製超過。(解決)
11-25-2021
找到一種方法
再保險:. lang。OutOfMemoryError: GC開銷限製超過。(解決)
11-25-2021
謝謝你我隻是找到了一個解決辦法,我提到過我的問題,在閱讀我的文件我所需要做的就是添加,選擇(“maxRowsInMemory”, 1000)。
再保險:. lang。OutOfMemoryError: GC開銷限製超過。(解決)
11-23-2021
我試著讀它沒有這些款我得到同樣的錯誤(gc開銷限製),我在本地運行這些是我的規格。
查看更多
榮譽從
用戶
數
Kaniz
2
Vivek_12
1
匿名
1
Hubert_Dudek1
7
sarvesh
1
查看所有
榮譽給
用戶
數
Hubert_Dudek1
5
werners1
5
jose_gonzalez
2
sarvesh
1
Kaniz
1
查看所有
map