PySpark 2.0 DataFrame的大小或形狀

Question

我想了解PySpark中DataFrame的大小/形狀。我沒有看到可以做到這一點的單一功能。

在Python我可以做

data.shape() 

是否有PySpark類似的功能。這是我目前的解決辦法，但我正在尋找一個元素一個

row_number = data.count() 
column_number = len(data.dtypes) 

列數的計算是不理想......

Answer 1

我覺得沒有像星火data.shape類似的功能。但我會用len(data.columns)而不是len(data.dtypes)

Answer 2

print((df.count(), len(df.columns))) 

Answer 3

df.count（），用於在功能將這個行