Python sur Spark avec Databricks

Objectifs

Maîtriser la librairie PySpark afin d'utiliser Apache Spark avec le langage de programmation Python sur un environnement Databricks.


Compétences visées

- Connaître l'environnement Databricks

- Se familiariser avec la librairie PySpark afin d'utiliser Apache Spark avec le langage de programmation Python

- Savoir manipuler de grands volumes de données avec Pyspark

- Mettre en oeuvre des méthodes de Machine Learning avec Pyspark

Programme de la formation

Principaux thèmes abordés

- Présentation de Databricks

- Introduction à Spark

- Présentation de PySpark et l'API Pyspark RDD

- Utilisation de l'API Pyspark SQL

- Introduction au Machine Learning

- Machine Learning avec PySpark

Validation et sanction

Attestation de formation

Type de formation

Non certifiante

Sortie

Sans niveau spécifique