Spark Count函數

在Spark中,count函數返回數據集中存在的元素數。

count函數的示例

在此示例中,計算數據集中存在的元素數量。使用並行化集合創建RDD。

scala> val data = sc.parallelize(List(1,2,3,4,5))

現在,可以使用以下命令讀取生成的結果。

scala> data.collect

count函數

應用count()函數來計算元素數。

scala> val countfunc = data.count()

Spark Count函數