Data engineer
Date de mise à jour :
Identifiant Offre Info : 14_AF_0000183542
Organisme responsable :
Data ScienceTech Institute
(ouvre dans un nouvel onglet)
Référentiels
Code Rome
- M1403 Études et prospectives socio-économiques
- M1802 Expertise et support en systèmes d'information
- M1805 Études et développement informatique
Formacode
- 31009 : Architecture système information
- 31023 : Gestion données massives
- 31025 : Analyse de données
- 31082 : Intégration informatique
- 71654 : Logiciel système gestion bases données
Présentation de la formation
Objectifs
Analyser le fonctionnement d'une organisation et ses flux de données à partir d'une cartographie des données et d'une étude préalable. Décrire, en les formalisant, des cas d'usages du domaine de la Data en exploitant des méthodes d'idéation et en prenant en compte les spécificités de l'écosystème. Elaborer un système de veille technologique et réglementaire propre au secteur du numérique avec une attention particulière sur les thèmes du cloud, du décisionnel…
- Analyser le fonctionnement d'une organisation et ses flux de données à partir d'une cartographie des données et d'une étude préalable.
- Décrire, en les formalisant, des cas d'usages du domaine de la Data en exploitant des méthodes d'idéation et en prenant en compte les spécificités de l'écosystème.
- Elaborer un système de veille technologique et réglementaire propre au secteur du numérique avec une attention particulière sur les thèmes du cloud, du décisionnel et du Big Data.
- Initier une étude de faisabilité de l'architecture data en collaboration avec un Data Scientist ou un Data Analyst, en sélectionnant et en catégorisant les données à traiter.
- Elaborer un prototype de l'architecture data en utilisant la technologie retenue sur un périmètre fonctionnel réduit afin d'évaluer son opérationnalité et sa pertinence.
- Rédiger les spécifications techniques et fonctionnelles générales de l'architecture d'analyse de données massives en analysant les besoins et les retours d'expérience du prototype afin de préparer la mise en œuvre du projet
- Concevoir un processus de collecte et de traitement de données massives en déterminant le référentiel de données, en créant des procédures de sélection et d'extraction de données multiples ainsi que des solutions de stockages afin de préparer le paramétrage des outils d'extraction, de traitement et de chargement
- Elaborer une doctrine de collecte et de traitement des données exhaustive et commune à l'organisation en décrivant les étapes et calculs de traitement et de visualisation des données dans le respect des normes juridiques et des procédures garantissant la sécurité des données et des systèmes afin de réduire les risques juridiques
- Intégrer des donnés à la solution de traitement en extrayant les sources au préalable, en élaborant des circuits automatisant les flux de données et en transformant les données de différentes sources afin de les mettre en forme et les harmoniser avant de les stocker
- Alimenter les environnements de stockage en lançant la procédure de chargement des données et en supervisant son bon fonctionnement afin d'avoir à disposition une base correctement structurée et des données actualisées et exploitables
- Installer et paramétrer des solutions de stockage de données massives en structurant des bases de données NoSQL, en organisant des systèmes de fichiers distribués et de stockage répartis de données afin d'obtenir un environnement de stockage opérationnel et conforme aux spécifications
- Mettre à disposition l'ensemble des données aux Data Scientists ou aux Data Analysts selon un format exploitable en s'appuyant sur les données de référence du système d'information afin de garantir la qualité de données et la consolidation des systèmes de stockage de données sur le cloud au sein de Data Warehouse/Data Lake...
Programme de la formation
Validation et sanction
Type de formation
Certifiante
Niveau de sortie
Bac + 5 et plus
Durée, rythme, financement
Durée
En centre
840 h
En entreprise
890 h
Financement
- Conventionnement
- Oui
Conditions d'accès
Public visé
- Tout public
Modalités de recrutement et d'admission
Concours, Tests pratiques
Niveau d'entrée
Sans niveau spécifique
Conditions spécifiques et prérequis
Bac+3 minimum
Lieu de réalisation de l'action
Modalités d'enseignement
Formation entièrement en présentielle
Adresse
4 Rue de la Collegiale75005 Paris 5e
Responsable : Data ScienceTech Institute
Périodes prévisibles de déroulement des sessions
Début
Fin
- Adresse d'inscription
-
Data ScienceTech Institute
75005 Paris 5e - État du recrutement
- Ouvert
- Modalités
- Entrées / Sorties à dates fixes