zhanghong 发表于 2019-1-31 06:17:49

王家林每日大数据语录Spark篇0014(2015.11.4于南宁)

对于Spark中的join操作,如果每个partition仅仅和特定的partition进行join那么就是窄依赖;对于需要parent RDD所有partition进行join的操作,即需要shuffle,此时就是宽依赖。  




页: [1]
查看完整版本: 王家林每日大数据语录Spark篇0014(2015.11.4于南宁)