当前位置: 首页 > 教程 > Spark >

Spark Count函数

精华
小牛编辑
101浏览
2023-03-14

在Spark中,count函数返回数据集中存在的元素数。

count函数的示例

在此示例中,计算数据集中存在的元素数量。使用并行化集合创建RDD。

scala> val data = sc.parallelize(List(1,2,3,4,5))

现在,可以使用以下命令读取生成的结果。

scala> data.collect

count函数

应用count()函数来计算元素数。

scala> val countfunc = data.count()