如何從數據幀刪除空行。

[dhanunjaya]

可以假設,如果我有10列在一個數據幀,所有10列空值100行200行,我如何可以跳過空行?

[dillon_bostwick]

您可以使用.drop()函數,它可以作為DataFrameNaFunctions的一部分。

Scala:

https://spark.apache.org/docs/2.1.0/api/java/org/apache/spark/sql/DataFrameNaFunctions.html下降()

Python:

https://spark.apache.org/docs/latest/api/python/pyspark.sql.html?highlight=nafunctions pyspark.sql.D……

[dhanunjaya]

@dillon,

下降不會幫助我在我的例子中,我有一個200行表中有100行,空有適當的值的行和休息。

[searro]

簡單的你可以使用.drop()函數,可以作為DataFrameNaFunctions的一部分。

[Malan_Francois_]

@searro,它會很高興有一個格式良好的例子。