Parcours
Le formateur a développé des pipelines de traitement et d’analyse avec PySpark et a mené plusieurs projets de données en temps réel associant Kafka, Spark Streaming, Spark SQL et stockage distribué. Son parcours couvre aussi Hadoop, HDFS, Hive, HBase ainsi que l’utilisation de Databricks dans son environnement de compétences.
Cette page vise les équipes techniques qui doivent aborder les principes du traitement de données à grande échelle. Le formateur présente PySpark à travers des usages précis : lecture de données, transformations, agrégations, requêtes SQL, traitement de flux et préparation de données analytiques. L’objectif est de relier les concepts distribués à des manipulations concrètes.
La session peut commencer par l’architecture générale de Spark et les DataFrames, puis progresser vers les transformations et actions. Des ateliers permettent de traiter des fichiers structurés, de produire des agrégats et d’introduire Spark SQL. Pour les publics déjà avancés, le déroulé peut inclure les principes de traitement de flux avec Spark Streaming.
Domaines d’expertise
- Apache Spark
- PySpark
- Spark SQL
- Spark Streaming
- DataFrames
- Kafka
- HDFS et Hive
- Databricks
Certifications et références
- Spark Fundamentals I — Cognitive Class
- Spark Fundamentals II — Cognitive Class
Approche pédagogique
- 1Présentation des concepts de calcul distribué utiles au projet
- 2Prise en main de PySpark et des DataFrames
- 3Ateliers de lecture et transformation de données
- 4Pratique de Spark SQL sur des cas analytiques
- 5Introduction adaptée au traitement de flux si nécessaire
Publics accompagnés
- Data engineers
- Développeurs Python
- Architectes data juniors
- Étudiants avancés en informatique
Secteurs d’intervention
Ses 5 formations
Formation Apache Spark et PySpark pour data engineers
Comprendre et pratiquer le traitement distribué de données avec Spark et PySpark.
Formation Power BI pour créer des tableaux de bord
Concevoir des tableaux de bord Power BI à partir d’indicateurs utiles aux équipes métiers.
Formation Apache Airflow pour équipes data à Laâyoune
Mettre en place des workflows data plus lisibles, planifiés et automatisés avec Apache Airflow.
Formation machine learning avec Python à Laâyoune
Apprendre à construire et évaluer des modèles de machine learning à partir de données préparées.
Formation Python pour l’analyse de données à Laâyoune
Une formation Python concrète pour transformer des données brutes en analyses exploitables.
Ce formateur correspond à votre projet ? FormaGroup vous met en relation et organise la formation : programme, dates, lieu ou classe virtuelle.
Contacter le formateur