Apache Hadoop pour Administrateurs

Objectifs

Cette formation Certification Cloudera Administrateurs pour Hadoop Apache vous permettra de :

• Reposer les bases de l'environnement Hadoop et HDFS
• Poser les bases de Hadoop Cluster : choix du matériel, "configuring nodes"
• Configurer, déployer et gérer des Clusters : utiliser “Cloudera Manager for Easy Installation”, “Configuration Management Tools” et Ganglia,
• Rajouter et retirer des « Cluster Nodes », rééquilibrer un Cluster et optimiser un Cluster
• Gérer des tâches : Le “FIFO Scheduler”, Le “FairScheduler”
• Gérer les “Log files” d’Hadoop
• Utiliser le “NameNode” et “Job Tracker Web UI”
• Troubleshooting
• Savoir "Benchmarking" un Cluster

Programme

UNE INTRODUCTION A HADOOP ET HDFS

• Pourquoi Hadoop
• HDFS
• MapReduce
• Hive, Pig, HBase, et d’autres écosystèmes projet
• Exercices pratiques

PLANNING YOUR HADOOP CLUSTER

• Choisir le bon matériel
• Réseau
• “Configuring Nodes”

CONFIGURER ET DEPLOYER UN CLUSTER

• Types de déploiement
• Installer Hadoop
• Utiliser “Cloudera Manager for Easy Installation”
• Les paramètres de configuration typiques
• Utiliser “Configuration Management Tools”
• Exercices pratiques

GERER LES TACHES

• Gérer les tâches en cours
• Exercices pratiques
• Le “FIFO Scheduler”
• Le “FairScheduler”
• Exercices pratiques

GESTION DE CLUSTERS

• HDFS
• Exercices pratiques : copier des données entre clusters
• Rajouter et retirer des « Cluster Nodes »
• Rééquilibrer un Cluster
• Exercices pratiques : Optimiser un Cluster

CLUSTER MONITORING ET TROUBLESHOOTING

• Gérer les “Log files” d’Hadoop
• Utiliser le “NameNode” et “Job Tracker Web UI”
• Exercices pratiques
• Gestion de Cluster avec Ganglia
• Troubleshooting
• Benchmarking un Cluster

CONCLUSION DE LA FORMATION HADOOP ADMINISTRATEURS

• Cloudera Certified Administrator for Apache Hadoop Exam