Analyse de données avec Hadoop
Formation créée le 16/03/2021. Dernière mise à jour le 26/03/2024.
Version du programme : 1
Programme de la formation
Formation pratique pour maîtriser le fonctionnement d'Hadoop Distributed File System (HDFS).
Objectifs de la formation
- Maîtriser les bases d'Hadoop Distributed File System.
- Savoir manipuler des données dans un Cluster Hadoop.
Profil des bénéficiaires
Pour qui
- Ingénieur de données (Data Engineer),le Développeur Big Data,
Prérequis
- Maîtrise des technologies du Big Data et des techniques de data management
Contenu de la formation
-
INTRODUCTION
- Une présentation d'Hadoop
- Vous verrez des exemples d'utilisation dans différents secteurs
-
L'ECOSYSTEME D'HADOOP
- Hadoop Distributed File System (HDFS)
- Utilisation à travers YARN du paradigme MapReduce
-
MANIPULATION DES DONNEES DANS UN CLUSTER HADOOP
- Hue, Fonctionnement de l'interface Web
- Hive, base de données ou non ?
- Fonctionnement de Pig
- Comment, pourquoi et quand utiliser Tez
- Fonctionnement Oozie
- Utilisation de Sqoop
Équipe pédagogique
Les experts qui animent la formation sont des spécialistes des matières abordées. Ils ont été validés par nos équipes pédagogiques tant sur le plan des connaissances métiers que sur celui de la pédagogie, et ce pour chaque cours qu’ils enseignent. Ils ont au minimum cinq à dix années d’expérience dans leur domaine et occupent ou ont occupé des postes à responsabilité en entreprise.
Suivi de l'exécution et évaluation des résultats
- En amont de la formation : entretien permettant l’analyse des besoins des participants et/ou questionnaire de positionnement
- L’évaluation des compétences est réalisée : - Par des exercices pratiques et/ou mises en situation, tout au long de la formation - Par un exercice de synthèse et/ou un questionnaire d’auto-évaluation et/ou une certification, en fin de formation
- Feuille de présence émargée par demi-journée par les stagiaires et le formateur
- Formulaires d'évaluation de la formation à chaud et à froid (3mois après la session)
- Attestation de fin de formation avec relevé des compétences acquises.
- DANS LE CAS DE FORMATIONS A DISTANCE Il est nécessaire que le stagiaire : - Possède un PC ou un Mac, avec le logiciel installé dans la bonne version - Une connexion internet stable d’au moins 8Mo/s - Un navigateur Web récent - Zoom ou Teams devra être installé (accompagnement possible)
Ressources techniques et pédagogiques
- Exposés, aides visuelles, support de cours, exercices pratiques d’utilisation
- Questions/réponses entre les stagiaires et le formateur
- En présentiel : ordinateurs Mac ou PC, connexion internet, tableau blanc/paperboard, vidéoprojecteur, partage de documents
- A distance : logiciel de visio-conférence, partage d’écran formateur et stagiaire, partage de documents
Capacité d'accueil
Entre 1 et 8 apprenants
Délai d'accès
2 semaines
Accessibilité
Les personnes atteintes de handicap souhaitant suivre cette formation sont invitées à nous contacter directement, afin d’étudier ensemble les possibilités de suivre la formation.
Délai d'accès : Les inscriptions doivent être réalisées une semaine avant le début de la formation.
La formation peut être suivie :
- En inter-entreprises : 2 à 6 personnes. Session maintenue si 2 personnes confirmées.
- En intra-entreprise : 1 à 8 personnes
- Individuellement : planifiée selon les disponibilités de chacun
Horaires et rythmes :
- En présentiel : 9h à 17h, journées consécutives ou non
- A distance : sessions de 2h sur lundi 9h au samedi 12h
Lieu de formation :
- Sur site client
- A distance