shuffle并行度的疑问
text.map(num => num) .setParallelism(2) //设置map算子的并行度为2 .shuffle .print() .setParallelism(4) //设置print算子的并行度为4 老师这是你StreamPartitionOpScala里面的代码,为什么在shuffle之前还要在设置一下并行度啊?不是值验证shuffle的随机性吗
3
收起
恭喜解决一个难题,获得1积分~
来为老师/同学的回答评分吧
0 星