Formateur·rice Apache Spark et PySpark — Région Dakhla Oued Ed Dahab

Votre rôle chez FormaGroup

Cette mission consiste à accompagner des professionnels dans la prise en main de Spark et de son interface Python pour traiter de grands volumes de données. Les sessions peuvent être proposées en présentiel ou à distance, selon les modalités de la mission.

Missions confiées

1. 1Présenter l’architecture de Spark et son environnement d’exécution afin d’expliquer comment les traitements distribués sont organisés.
2. 2Guider les participants dans la manipulation des DataFrames PySpark et la mise en œuvre d’opérations adaptées à leurs données.
3. 3Animer des exercices de chargement et d’écriture de données dans des formats courants, en abordant les choix de partitionnement.
4. 4Faire pratiquer les transformations, agrégations et jointures sur des jeux de données représentatifs de traitements analytiques.
5. 5Accompagner la construction d’un pipeline de traitement de bout en bout, réutilisable et intégrable dans un flux de données.
6. 6Enseigner des méthodes d’optimisation et de diagnostic de performance pour aider les participants à améliorer leurs traitements Spark.

Programme de formation à animer

Une maîtrise pédagogique des thèmes suivants est attendue :

Public à former

Approche pédagogique attendue

• Construire les explications à partir de cas pratiques couvrant les DataFrames, les transformations, les agrégations et les jointures.
• Faire réaliser des exercices de chargement et d’écriture de données dans des formats courants, avec une attention portée au partitionnement.
• Guider les participants dans la création progressive d’un pipeline de traitement de bout en bout.
• Prévoir des mises en pratique sur l’optimisation des transformations et le diagnostic de performance.
• Adapter l’accompagnement pédagogique aux profils techniques des participants et à leurs usages de la donnée.

Profil recherché

• Vous maîtrisez de manière confirmée Apache Spark et PySpark, notamment les DataFrames, les transformations distribuées et les opérations analytiques.
• Vous savez expliquer l’architecture Spark, le partitionnement, les formats de données et les principes d’optimisation des traitements.
• Vous êtes en mesure d’enseigner la construction de pipelines de données et de faire pratiquer le chargement, l’écriture, les jointures et les agrégations.
• Vous avez une expérience de la formation d’adultes et savez adapter vos explications à des data engineers, des data analysts et des développeurs Python.

Disponibilité et mobilité

Compétences clés

Mots-clés de l’offre