AI 中文社
Copyright © 2022-2024 aizws.net · 网站版本: v1.2.6·内部版本: v1.23.3·
页面加载耗时 0.00 毫秒·物理内存 71.9MB ·虚拟内存 1299.8MB
欢迎来到 AI 中文社区（简称 AI 中文社），这里是学习交流 AI 人工智能技术的中文社区。 为了更好的体验，本站推荐使用 Chrome 浏览器。
Apache Pig FOREACH运算符
Apache Pig FOREACH 运算符根据数据列生成数据转换。建议使用FILTER操作来处理数据元组。
FOREACH运算符示例
在这个例子中，我们遍历存在于
执行 FOREACH 运算符的步骤
- 在本地计算机上创建一个文本文件并为其提供一些值。
$ nano pforeach.txt
- 检查写入文本文件中的值。
$ cat pforeach.txt
- 上传特定目录下 HDFS 上的文本文件。
$ hdfs dfs-put pforeach.txt /pigexample
- 开启猪 MapReduce 运行模式。
$ pig
- 加载包含数据的文件。
grunt> A = LOAD '/pigexample/pforeach.txt' USING PigStorage(',') AS (a1:int,a2:int,a3:int) ;
- 现在，执行并验证数据。
grunt> DUMP A;
- 让我们遍历两列的数据。
grunt> fe = FOREACH A generate a1,a2; grunt> DUMP fe;
在这里，我们得到了想要的输出。
下一章：Apache Pig Group Operator
Apache Pig GROUP 运算符用于将数据分组为一个或多个关系。它将包含相似组键的元组分组。如果组键有多个字段，则将其视为元组，否则将与组键的类型相同。结果，它提供了一个每组包含一 ...