- 博客(1)
- 收藏
- 关注
转载 MapReduce全过程
shuffle过程 shuffle概念 shuffle的本意是洗牌、混洗的意思,把一组有规则的数据尽量打乱成无规则的数据。而在MapReduce中,shuffle更像是洗牌的逆过程,指的是将map端的无规则输出按指定的规则“打乱”成具有一定规则的数据,以便reduce端接收处理。其在MapReduce中所处的工作阶段是map输出后到reduce接收前,具体可以分为map端和reduce端前后两个部...
2019-02-25 17:42:11 3462 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人