你好,
從昨天起,沒有一個已知的原因,一些命令,用於運行日報現在陷入了“命令運行”狀態。命令為:
dataframe.toPandas ()
dataframe.show (n = 1)
dataframe.description ()
dataframe.write.format (csv) .save(位置)
陷入“運行命令…”狀態,我收到沒有輸出
(或錯誤),直到服務器停止活動。在最好的情況下,命令
運行很長一段時間後,在糟糕的情況下,這項工作不能完成由於
不活動。
這是突然發生的,因為昨天沒有更新
磚運行或集群中。我將不勝感激任何建議。
關於集群:
61 gb | | 8核DBR 10.4 LTS |火花3.2.1 | Scala 2.12
問候,路易斯
嗨@Luiz Carneiro,
你能把你的火花的行動更CMD(段落)並運行一次檢查,它可以把額外的時間。同時,熊貓隻運行在你的驅動。你嚐試使用Python或Scala api呢?如果您熟悉熊貓api,那麼您可以使用考拉。這裏的文檔https://koalas.readthedocs.io/en/latest/
嗨@Luiz Carneiro,
你能把你的火花的行動更CMD(段落)並運行一次檢查,它可以把額外的時間。同時,熊貓隻運行在你的驅動。你嚐試使用Python或Scala api呢?如果您熟悉熊貓api,那麼您可以使用考拉。這裏的文檔https://koalas.readthedocs.io/en/latest/