Hadoop – MapReduce pour architectes et administrateurs
Objectifs
- Acquérir les meilleurs pratiques pour l’administration d’Apache Hadoop 2.0
- Savoir définir la taille d’un cluster et comment le déployer
- Savoir installer et configurer Hadoop MapR
- Comprendre comment gérer en permanence et maintenir des noeuds dans le cluster
- Être capable d’optimiser la performance d’un cluster
- Savoir déplacer et gérer les données dans le cluster ou encore ajouter et enlever des noeuds de données
- Être en mesure de surveiller les statuts et l’état de santé du cluster dans un outil de monitoring Comprendre comment mettre en place une haute solution de disponibilité
- Connaître les meilleures pratiques pour déployer un cluster Hadoop MapR
Programme
Fondement, planification et installation
- Introduction à la plateforme de données Hadoop 2.0
- Stockage Hadoop : Architecture HDFS
- Prérequis pour l’installation
- Hadoop Operating System (YARN) et MapReduce
Configuration et gestion de données
- Service de configuration
- Configuration HDFS
- Configuration de Hadoop Operating System (YARN) et MapReduce
- Configuration HBase
- Configuration ZooKeeper
- Configuration Schedulers
- Intégrité des données
- Extract-Load-Transform (ELT) Data Movement
- Copie de données entre les clusters
Management des données / Operations
- HDFS service Web
- Apache Hive Data Warehouse
- Transfert de données aves Sqoop
- Mouvement de données log avec Flume
- HDFS NFS Gateway
- Workflow management : Oozie
- Management du cycle de vie des données avec Falcon
- Monitoring des Services
- Mise en service ou hors service des noeuds et services
MOYENS PÉDAGOGIQUES ET TECHNIQUES D’ENCADREMENT DES FORMATIONS
Modalités pédagogiques :
- Évaluation des besoins et du profil des participants.
- Apport théorique et méthodologique : séquences pédagogiques regroupées en différents modules.
- Contenus des programmes adaptés en fonction des besoins identifiés pendant la formation.
- Méthodes expositive, active et participative.
- Réflexion et échanges sur cas pratiques.
- Retours d'expériences.
- Corrections appropriées et contrôles des connaissances à chaque étape, fonction du rythme de l’apprenant mais également des exigences requises au titre de la formation souscrite.
Modalités d’évaluation :
- Le formateur évalue la progression pédagogique du participant tout au long de la formation au moyen de travaux pratiques, étude de cas et mise en situation.
Éléments matériels :
- Mise à disposition des outils nécessaires au bon déroulement des travaux pratiques.
- Support de cours au format numérique projeté sur écran et transmis au participant en fin de la formation.
Référent pédagogique et formateur :
- Chaque formation est sous la responsabilité du directeur pédagogique de l’organisme de formation.
- Le bon déroulement est assuré par le formateur désigné par l’organisme de formation.
MOYENS PERMETTANT LE SUIVI ET L’APPRÉCIATION DES RÉSULTATS
- Feuilles de présences signées des participants et du formateur par demi-journée.
- Attestation de fin de formation mentionnant les objectifs, la nature et la durée de l’action et les résultats de l’évaluation des acquis de la formation.
Please login to get access to the quiz
Back to