首页 > 试题广场 >

下面哪个操作是窄依赖()

[单选题]
下面哪个操作是窄依赖()
  • join
  • filter
  • group
  • sort
窄依赖:父RDD与子RDD的分区之间是一对一的关系,例如map,flatMap,还有filter,不涉及Shuffle操作
宽依赖是父RDD与子RDD的分区之间是多对多的关系,宽依赖也对应Shuffle操作,例如reduceBykey和groupByKey等
发表于 2021-10-24 17:38:54 回复(0)
RDD中的依赖关系分为窄依赖(narrow dependency)和宽依赖(wide dependency),二者的主要区别在于是否包含shuffle操作。
发表于 2022-06-19 10:47:41 回复(0)