Analyse de données avec Hadoop
Version du programme : 1
Type de formation
Formation mixteDurée de formation
21 heures (3 jours)Accessibilité
OuiAnalyse de données avec Hadoop
Formation pratique pour maîtriser le fonctionnement d'Hadoop Distributed File System (HDFS).
Objectifs de la formation
- Maîtriser les bases d'Hadoop Distributed File System.
- Savoir manipuler des données dans un Cluster Hadoop.
Profil des bénéficiaires
- Ingénieur de données (Data Engineer),le Développeur Big Data,
- Maîtrise des technologies du Big Data et des techniques de data management
Contenu de la formation
INTRODUCTION
- Une présentation d'Hadoop
- Vous verrez des exemples d'utilisation dans différents secteurs
L'ECOSYSTEME D'HADOOP
- Hadoop Distributed File System (HDFS)
- Utilisation à travers YARN du paradigme MapReduce
MANIPULATION DES DONNEES DANS UN CLUSTER HADOOP
- Hue, Fonctionnement de l'interface Web
- Hive, base de données ou non ?
- Fonctionnement de Pig
- Comment, pourquoi et quand utiliser Tez
- Fonctionnement Oozie
- Utilisation de Sqoop
Équipe pédagogique
Suivi de l'exécution et évaluation des résultats
- En amont de la formation : entretien permettant l’analyse des besoins des participants et/ou questionnaire de positionnement
- L’évaluation des compétences est réalisée : - Par des exercices pratiques et/ou mises en situation, tout au long de la formation - Par un exercice de synthèse et/ou un questionnaire d’auto-évaluation et/ou une certification, en fin de formation
- Feuille de présence émargée par demi-journée par les stagiaires et le formateur
- Formulaires d'évaluation de la formation à chaud et à froid (3mois après la session)
- Attestation de fin de formation avec relevé des compétences acquises.
- DANS LE CAS DE FORMATIONS A DISTANCE Il est nécessaire que le stagiaire : - Possède un PC ou un Mac, avec le logiciel installé dans la bonne version - Une connexion internet stable d’au moins 8Mo/s - Un navigateur Web récent - Zoom ou Teams devra être installé (accompagnement possible)
Ressources techniques et pédagogiques
- Exposés, aides visuelles, support de cours, exercices pratiques d’utilisation
- Questions/réponses entre les stagiaires et le formateur
- En présentiel : ordinateurs Mac ou PC, connexion internet, tableau blanc/paperboard, vidéoprojecteur, partage de documents
- A distance : logiciel de visio-conférence, partage d’écran formateur et stagiaire, partage de documents
Capacité d'accueil
Délai d'accès
Accessibilité
Les personnes atteintes de handicap souhaitant suivre cette formation sont invitées à nous contacter directement, afin d’étudier ensemble les possibilités de suivre la formation. Délai d'accès : Les inscriptions doivent être réalisées une semaine avant le début de la formation. La formation peut être suivie : - En inter-entreprises : 2 à 6 personnes. Session maintenue si 2 personnes confirmées. - En intra-entreprise : 1 à 8 personnes - Individuellement : planifiée selon les disponibilités de chacun Horaires et rythmes : - En présentiel : 9h à 17h, journées consécutives ou non - A distance : sessions de 2h sur lundi 9h au samedi 12h Lieu de formation : - Sur site client - A distance