Analyse de données en environnement Hadoop

Objectifs

Connaitre les fonctionnements d'Hadoop Distributed File System (HDFS) et YARN / MapReduce
Savoir explorer HDFS et suivre l'exécution d'une application YARN
Déterminer les fonctionnements et l'utilisation les différents outils de manipulation des données

Programme de la formation

- Hadoop

• Comprendre Hadoop et son écosystème
• Quels impacts de l'arrivée d'Hadoop dans un SI traditionnel ?
• Le Hadoop Distributed File System (HDFS)
• Introduction aux données dans HDFS
• MapReduce Framework et YARN

- Pig

• Introduction à Pig
• Programmation Pig avancée
• Troubleshooting et optimisation avec Pig
• Résolution des problèmes avec Pig
• Utiliser l'UI Web d'Hadoop
• Démo optionnelle : résolution d'un « Failed Job » avec l'UI Web
• Echantillonnage de données et débogage
• Vue d'ensemble des performances
• Comprendre le plan d'exécution
• Astuces pour améliorer la performance de vos « Pig Jobs »

- Hive

• Programmation Hive
• Utilisation de HCatalog
• Programmation Hive avancée
• Etendre Hive
• Transformation de données avec des Scripts personnalisés
• Fonctions définies par l'utilisateur
• Paramétrer les requêtes
• Exercices « Hands-On » : transformation de données avec Hive
• Programmation Hive avancée (suite)
• Analyse de données et statistiques

- Sqoop

• Import/Export avec Sqoop (SGBDR HDFS)
• Sqoop, fonctions avancées
• Définition de workflow avec Oozie

- Optionnel : (sous réserve de temps)

• Introduction à H-Base
• Exemple d'ingestion de données avec l'ETL Talend
• Créer son propre cluster Hadoop (plateforme de test)

Validation et sanction

Attestation de formation

Type de formation

Non certificiante

Sortie

Sans niveau spécifique

Code Rome

Modalités pédagogiques

Durée

21 heures en centre

Conventionnement : Non

Financeur(s)

Autre

Public(s)

Tout public

Modalités de recrutement et d'admission

Niveau d'entrée : Sans niveau spécifique

Conditions spécifiques et prérequis

Aucun\n\nProcédure d'admission: \nUn formulaire d'auto-évaluation proposé en amont de la formation nous permettra d'évaluer votre niveau et de recueillir vos attentes. Ce même formulaire soumis en aval de la formation fournira une appréciation de votre progression.

Modalités d'accès

formation entièrement présentielle

Adresse

41 rue de la Découverte
CS 37623
31676 - Labège

Responsable : Data Value
Téléphone fixe :
Contacter l'organisme

Contact sur la formation

41 rue de la Découverte
CS 37621
31676 - Labège

Responsable : Monsieur Cédric CALAS
Téléphone fixe : 0972567567
fax :
Site web :
Contacter l'organisme

Contacter l'organisme formateur

Data Value
SIRET: 81837224500014
31676 Labège
Responsable :
Téléphone fixe :
Site web :
Contacter l'organisme

du 20/05/2026 au 22/05/2026
débutant le : 20/05/2026

Adresse d'inscription

41 rue de la Découverte
31676 - Labège

Etat du recrutement : Ouvert
Modalités : Entrées / Sorties à dates fixes

Data Value
SIRET : 81837224500014

Adresse

41 rue de la Découverte
CS 37621
31676 - Labège

Téléphone fixe : 0972567567
Contacter l'organisme