本文介绍: 要理解宽窄依赖,首先我们需要了解 Transformations,什么是 Transformations?在 Spark 中,核心数据结构是不可变的,这意味着它们一旦创建就不能更改。这看起来可能是个比较奇怪的概念,如果不能更改,那要怎么使用它呢?要 “change一个 DataFrame我们必须提示 Spark 如何我们拥有的 DataFrame 修改我们想要的样子。这些操作称为 Transformations。Transformations使用 Spark 表达业务逻辑核心

目录

1、前言

2、宽窄依赖

2.1 窄依赖

2.2 宽依赖

3、宽窄转换的算子


        要理解宽窄依赖,首先我们需要了解 Transformations,什么是 Transformations?在 Spark 中,核心数据结构是不可变的ÿ

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注