运维网's Archiver
论坛
›
spark
› 王家林每日大数据语录Spark篇0014(2015.11.4于南宁)
zhanghong
发表于 2019-1-31 06:17:49
王家林每日大数据语录Spark篇0014(2015.11.4于南宁)
对于Spark中的join操作,如果每个partition仅仅和特定的partition进行join那么就是窄依赖;对于需要parent RDD所有partition进行join的操作,即需要shuffle,此时就是宽依赖。
页:
[1]
查看完整版本:
王家林每日大数据语录Spark篇0014(2015.11.4于南宁)