Loading...
🗺️
Map-Reduce
Répartit le calcul sur plusieurs nœuds à l'aide d'opérations map et reduce
Complexité: highParallélisation
In 30 seconds
- What
- Répartit un grand jeu de données entre des workers parallèles, chacun traitant un sous-ensemble de façon indépendante, puis combine les résultats en une réponse finale.
- When to use
- Traitement de jeux de données massifs où l'exécution sur une seule machine est trop lente et où les résultats intermédiaires peuvent être calculés indépendamment.
- Watch out
- Le coût de coordination et la latence réseau peuvent annuler les gains de parallélisation sur de petits jeux de données ou avec des opérations de réduction coûteuses.
Loading technique guide…