Aller au contenu principal

Expert en infrastructures de données massives- Data Engineer - Data Engineer

Date de mise à jour :
Identifiant Offre Info : 03_251260656F
Organisme responsable : Simplon.co Auvergne Rhône Alpes (ouvre dans un nouvel onglet)

Nouvelle recherche

Référentiels

Code Rome

  • M1801 Administration de systèmes d'information
  • M1802 Expertise et support en systèmes d'information
  • M1803 Direction des systèmes d'information
  • M1805 Études et développement informatique
  • M1806 Conseil et maîtrise d'ouvrage en systèmes d'information

Formacode

  • 24218 : Transmission numérique
  • 31036 : Administration base de données
  • 31052 : Data Warehouse
  • 71654 : Logiciel système gestion bases données

Présentation de la formation

Objectifs

Analyser l'expression d'un besoin de projet data dans une étude de faisabilité en explorant, à l'aune des enjeux stratégiques de l'organisation, le besoin métier avec les parties prenantes pour valider les orientations et sélectionner les hypothèses techniques du projet avec le ou les commanditaire(s). Cartographier les données disponibles en référençant les usages, les sources, les métadonnées et les données afin de valider les hypothèses techniques du projet data.…

  • Analyser l'expression d'un besoin de projet data dans une étude de faisabilité en explorant, à l'aune des enjeux stratégiques de l'organisation, le besoin métier avec les parties prenantes pour valider les orientations et sélectionner les hypothèses techniques du projet avec le ou les commanditaire(s).
  • Cartographier les données disponibles en référençant les usages, les sources, les métadonnées et les données afin de valider les hypothèses techniques du projet data.
  • Concevoir un cadre technique d'exploitation des données en analysant les contraintes techniques, de moyens et la cartographie des données afin de définir une réponse technique adaptée aux ressources mobilisables dans le respect du RGPD et d'une démarche éco-responsable.
  • Réaliser une veille technique et réglementaire en sélectionnant des sources et en collectant et traitant les informations collectées afin de formuler des recommandations projet toujours en phase avec l'état de l'art.
  • Planifier la réalisation d'un projet data en attribuant les moyens nécessaires et en définissant les étapes de réalisation et les méthodes de suivi du projet afin de d'organiser sa mise en oeuvre
  • Superviser la réalisation d'un projet data en organisant les méthodes, les outils de travail et la communication entre les parties prenantes, afin d'accompagner les membres de l'équipe dans la réussite du projet
  • Communiquer tout au long de la réalisation du projet data sur les orientations, les réalisations et leurs impacts en élaborant la stratégie et les supports de communication afin d'informer toutes les parties prenantes des évolutions ou des opportunités internes comme externes, portés par le projet.
  • Automatiser l'extraction de données depuis un service web, une page web (scraping), un fichier de données, une base de données et un système big data en programmant le script adapté afin de pérenniser la collecte des données nécessaires au projet.
  • Développer des requêtes de type SQL d'extraction des données depuis un système de gestion de base de données et un système big data en appliquant le langage de requête propre au système afin de préparer la collecte des données nécessaires au projet.
  • Développer des règles d'agrégation de données issues de différentes sources en programmant, sous forme de script, la suppression des entrées corrompues et en programmant l'homogénéisation des formats des données afin de préparer le stockage du jeu de données final.
  • Créer une base de données dans le respect du RGPD en élaborant les modèles conceptuels et physiques des données à partir des données préparées et en programmant leur import afin de stocker le jeu de données du projet.

Programme de la formation

Analyser l'expression d'un besoin de projet data dans une étude de faisabilité en explorant, à l'aune des enjeux stratégiques de l'organisation, le besoin métier avec les parties prenantes pour valider les orientations et sélectionner les hypothèses techniques du projet avec le ou les commanditaire(s). Cartographier les données disponibles en référençant les usages, les sources, les métadonnées et les données afin de valider les hypothèses techniques du projet data.…

  • Analyser l'expression d'un besoin de projet data dans une étude de faisabilité en explorant, à l'aune des enjeux stratégiques de l'organisation, le besoin métier avec les parties prenantes pour valider les orientations et sélectionner les hypothèses techniques du projet avec le ou les commanditaire(s).
  • Cartographier les données disponibles en référençant les usages, les sources, les métadonnées et les données afin de valider les hypothèses techniques du projet data.
  • Concevoir un cadre technique d'exploitation des données en analysant les contraintes techniques, de moyens et la cartographie des données afin de définir une réponse technique adaptée aux ressources mobilisables dans le respect du RGPD et d'une démarche éco-responsable.
  • Réaliser une veille technique et réglementaire en sélectionnant des sources et en collectant et traitant les informations collectées afin de formuler des recommandations projet toujours en phase avec l'état de l'art.
  • Planifier la réalisation d'un projet data en attribuant les moyens nécessaires et en définissant les étapes de réalisation et les méthodes de suivi du projet afin de d'organiser sa mise en oeuvre
  • Superviser la réalisation d'un projet data en organisant les méthodes, les outils de travail et la communication entre les parties prenantes, afin d'accompagner les membres de l'équipe dans la réussite du projet
  • Communiquer tout au long de la réalisation du projet data sur les orientations, les réalisations et leurs impacts en élaborant la stratégie et les supports de communication afin d'informer toutes les parties prenantes des évolutions ou des opportunités internes comme externes, portés par le projet.
  • Automatiser l'extraction de données depuis un service web, une page web (scraping), un fichier de données, une base de données et un système big data en programmant le script adapté afin de pérenniser la collecte des données nécessaires au projet.
  • Développer des requêtes de type SQL d'extraction des données depuis un système de gestion de base de données et un système big data en appliquant le langage de requête propre au système afin de préparer la collecte des données nécessaires au projet.
  • Développer des règles d'agrégation de données issues de différentes sources en programmant, sous forme de script, la suppression des entrées corrompues et en programmant l'homogénéisation des formats des données afin de préparer le stockage du jeu de données final.
  • Créer une base de données dans le respect du RGPD en élaborant les modèles conceptuels et physiques des données à partir des données préparées et en programmant leur import afin de stocker le jeu de données du projet.

Validation et sanction

Expert en infrastructures de données massives

Type de formation

Certifiante

Niveau de sortie

Bac + 5 et plus

Durée, rythme, financement

Modalités pédagogiques

Pédagogie active

Durée

En centre

672 h

En entreprise

2009 h

Financement

Conventionnement
Oui
Financeur
  • OPCO

    Programme : Contrat d'apprentissage, Contrat de professionnalisation

Conditions d'accès

Public visé

  • Tout public

Modalités de recrutement et d'admission

Inscription sur candidature

Niveau d'entrée

Sans niveau spécifique

Conditions spécifiques et prérequis

votre état d'esprit une tre?s forte motivation, a? de?montrer lors de la candidature curieux et cre?atif, avec un bonne capacite? d'expression a? l'oral et a? l'e?crit pre?t a? travailler en e?quipe et a? collaborer autour de projets la volonte? de vous investir dans la dure?e dans un parcours de formation intense votre niveau de mai?trise technique cette formation s'adresse en priorité à des personnes disposant, par le diplôme ou l'expérience professionnelle de compétences en gestion de projet : identification des besoins, rédaction technique, suivi du planning, liaison client-équipes de compétences techniques telles que installation et gestion de services, programmation de scripts d'automatisation sous linux, conception de bases de données, maîtrise de sql et manipulation de données pour qualification, programmation (php, python, java) d'une maîtrise de l'anglais technique

Modalités d'accès

  • Accessible en contrat d'apprentissage
  • Accessible en contrat de professionnalisation

Lieu de réalisation de l'action

Modalités d'enseignement

Formation mixte

Adresse

34 Rue Antoine Primat
69100 Villeurbanne

Responsable : Simplon.Co

Périodes prévisibles de déroulement des sessions

Début

Fin

Adresse d'inscription
34 Rue Antoine Primat
69100 Villeurbanne
État du recrutement
Ouvert
Modalités
Entrées / Sorties à dates fixes