Programmer avec Apache Spark de Databricks

Objectifs

Cette formation de 3 jours propose un panorama pratique de la solution Apache Spark en alternant des présentations et des exercices pratiques. Elle couvre les APIs de base de Spark, les fondamentaux et les mécanismes du framework, mais aussi les outils plus haut-niveau dont SQL, ainsi que ses capacités de traitement en streaming et l'API de machine learning.
A l'issue du cours, les notebooks peuvent être conservés et être utilisés dans le service cloud gratuit Databricks Community Edition, pour lequel la compatibilité est garantie. Il est également possible d'exporter le notebook sous forme de code source pour exécution sur n'importe quel environnement Spark.

Programme de la formation

Décrire les fondamentaux de Spark.
Exploiter les APIs de base de Spark pour manipuler des données.
Concevoir et implémenter des cas d'usage typiques de Spark.
Construire des pipelines de données et requêter de larges jeux de données grâce à Spark SQL et aux DataFrames.
Analyser les jobs Sparks à l'aide des interfaces d'administration et des logs au sein des environnements Databricks.
Créer des jobs de type Structured streaming et Machine learning.

Validation et sanction

Attestation d'acquis ou de compétences;Attestation de suivi de présence

Type de formation

Non certifiante

Sortie

Sans niveau spécifique