Module M15
La formation « Administration Optimisation d’un cluster Hadoop » a vocation à former des ingénieurs et exploitants du SI à l’administration des clusters Hadoop. Cette formation s’adresse à des populations de formation en informatique (administrateurs du SI) ayant une solide connaissance de Linux.
Programme administration, optimisation d’un cluster Hadoop
- Rappels rapides sur l’écosystème Hadoop
- Ajouter des utilisateurs et leur donner accès aux services du cluster et à HDFS
- Traiter les besoins d’impersonnification
- Monitorer son cluster – les logs
- Arrêter et redémarrer les services Hadoop
- Tour des propriétés de Hadoop importantes pour l’optimisation
- Configurer les containers yarn
- Configurer le capacity scheduler
- Dé-commissionner et re-commissionner des nœuds dans le cluster Hadoop
- Load balancer les données en cas d’ajout de nœud
- Troubleshooting : les problèmes classiques
Pré-requis : Module M1, Module M2 & Connaissance solide de Linux