Apache Pig SUM 函数

Apache Pig SUM 函数用于查找单列包中数值的总和。它需要一个用于全局总和的前面的 GROUP ALL 语句和一个用于组总和的 GROUP BY 语句。它忽略空值。

SUM 函数示例

在此示例中,我们计算给定数值的总和。

执行 SUM 函数的步骤

  • 在本地机器上创建一个文本文件并插入元组列表。
$ nano evalsum.txt

Apache Pig SUM 函数

  • 检查插入到文本文件中的元组。
$ cat evalsum.txt

Apache Pig SUM 函数

  • 上传特定目录下 HDFS 上的文本文件。
$ hdfs dfs-put evalsum.txt /pigexample
  • 开启猪 MapReduce 运行模式。
$ pig
  • 加载包含数据的文件。
grunt> A = LOAD '/pigexample/evalsum.txt' USING PigStorage(',') AS (a1:chararray,a2:chararray,a3:float) ;
  • 现在,执行并验证数据。
grunt> DUMP A;

Apache Pig SUM 函数

  • 让我们根据"a1"字段对数据进行分组。
grunt> B = GROUP A BY a1; 
grunt> DUMP B;

Apache Pig SUM 函数

  • 让我们返回给定数值的总和。
grunt> Result = FOREACH B GENERATE group, SUM(A.a3);
grunt> DUMP Result;

Apache Pig SUM Function

在这里,我们得到了想要的输出。

下一章:Apache Pig TOKENIZE 函数

Apache Pig TOKENIZE 函数用于拆分现有字符串并在结果中生成词袋。 令牌函数示例在此示例中,我们将字符串拆分为令牌。 执行令牌函数的步骤 在本地机器 ...