Programmer avec Apache Spark de Databricks
Date de mise à jour :
Identifiant Offre Info : 14_AF_0000218368
Organisme responsable :
OCTO Academy
(ouvre dans un nouvel onglet)
Présentation de la formation
Objectifs
Décrire les fondamentaux de Spark Exploiter les APIs de base de Spark pour manipuler des données Concevoir et implémenter des cas d'usage typiques de Spark Construire des pipelines de données et requêter de larges jeux de données grâce à Spark SQL et aux DataFrames Analyser les jobs Sparks à l'aide des interfaces d'administration et des logs au sein des environnements Databricks Créer des jobs de type Structured Streaming Découvrir les bases du fonctionnement interne…
- Décrire les fondamentaux de Spark
- Exploiter les APIs de base de Spark pour manipuler des données
- Concevoir et implémenter des cas d'usage typiques de Spark
- Construire des pipelines de données et requêter de larges jeux de données grâce à Spark SQL et aux DataFrames
- Analyser les jobs Sparks à l'aide des interfaces d'administration et des logs au sein des environnements Databricks
- Créer des jobs de type Structured Streaming
- Découvrir les bases du fonctionnement interne de Spark
- Découvrir le pattern Deltalake
Programme de la formation
Apache Spark est un moteur d'analyses unifiées ultra-rapide pour le big data et le machine learning. Depuis sa sortie, il a connu une adoption rapide par les entreprises de secteurs très divers. Des acteurs majeurs du monde de l'internet tels que Netflix, Yahoo et eBay l'ont déployé à très grande échelle, traitant ensemble plusieurs peta-octets de données sur des clusters de plus de 8 000 nœuds. En deux jours, cette formation propose un panorama pratique de la solution Apache…
En deux jours, cette formation propose un panorama pratique de la solution Apache Spark en alternant des présentations théoriques et des exercices pratiques. Ce module couvre les APIs de base de Spark, les fondamentaux et les mécanismes du framework, mais aussi les outils de plus haut-niveau, dont SQL, ainsi que ses capacités de traitement en streaming et l'API de machine learning.
A l'issue de la session, les notebooks peuvent être conservés et être réutilisés dans le service cloud gratuit Databricks Community Edition, pour lequel la compatibilité est garantie. Il est également possible d'exporter le notebook sous forme de code source pour exécution sur n'importe quel environnement Spark.
Ce cours officiel prépare à la certification "Databricks Certified Associate Developer for Apache Spark 3.0". La certification se passe après la formation et n'est pas obligatoire.
Validation et sanction
Type de formation
Non certifiante
Niveau de sortie
Sans niveau spécifique
Durée, rythme, financement
Durée
En centre
14 h
Financement
- Conventionnement
- Oui
Conditions d'accès
Public visé
- Tout public
Niveau d'entrée
Sans niveau spécifique
Conditions spécifiques et prérequis
-
Lieu de réalisation de l'action
Modalités d'enseignement
Formation entièrement en présentielle
Adresse
34 Avenue de l'OpéraOcto Academy-
75002 Paris 2e
Responsable : OCTO Academy
Périodes prévisibles de déroulement des sessions
Début
Fin
- Adresse d'inscription
-
OCTO Academy
75002 Paris 2e - État du recrutement
- Ouvert
- Modalités
- Entrées / Sorties à dates fixes