热门标签
更多>
搜索结果
查询Tags标签： 血缘关系，共有 3条记录-
第五章_Spark核心编程_Rdd_血缘关系
1. RDD 血缘关系/*RDD 血缘关系*//** 1. 什么是Rdd的血缘关系？* 1.RDD 只支持粗粒度转换，即在大量记录上执行的单个操作。* 2.将创建 RDD 的一系列 Lineage (血统)记录下来,以便恢复丢失的分区。* 3.RDD的 Lineage 会记录RDD的 元数据信息和转换行为* 当该R…
2022/4/1 14:19:42 人评论 次浏览 -
RDD的血缘关系
窄依赖：窄依赖表示每一个父(上游)RDD 的 Partition 最多被子（下游）RDD 的一个 Partition 使用 宽依赖：宽依赖表示同一个父（上游）RDD 的 Partition 被多个子（下游）RDD 的 Partition 依赖，会引起 Shuffle
2022/1/25 6:05:56 人评论 次浏览 -
什么是RDD?带你快速了解Spark中RDD的概念!
看了前面的几篇Spark博客，相信大家对于Spark的基本概念以及不同模式下的环境部署问题已经搞明白了。但其中，我们曾提到过Spark程序的核心，也就是弹性分布式数据集(RDD)。但到底什么是RDD,它是做什么用的呢？本篇博客，我们就来详细讨论它们的使用情况。文章目录 RDD概述…
2021/6/1 18:27:24 人评论 次浏览
