Spark Union 函数

2025 年 3 月 17 日 | 阅读 1 分钟

在 Spark 中,Union 函数返回一个新数据集,其中包含不同数据集中存在的元素的组合。

Union 函数的例子

在这个例子中,我们组合了两个数据集的元素。

  • 要在 Scala 模式下打开 Spark,请使用以下命令。
Spark Union Function
  • 使用并行集合创建 RDD。
  • 现在,我们可以使用以下命令读取生成的結果。
Spark Union Function
  • 使用并行集合创建另一个 RDD。
  • 现在,我们可以使用以下命令读取生成的結果。
Spark Union Function
  • 应用 union() 函数以返回元素的并集。
  • 现在,我们可以使用以下命令读取生成的結果。
Spark Union Function

在这里,我们得到了期望的输出。


下一主题Spark 交集函数