Job description
Contexte :
Dans le cadre d’un projet de migration vers le cloud Azure, nous recherchons pour notre client un(e) Data Engineer capable de concevoir, développer et optimiser des pipelines de données robustes et scalables, au sein d’un environnement Big Data basé sur une architecture Médaillon (Azure Synapse Analytics, Apache Spark, Python/SQL).
- Démarrage : ASAP
- Localisation : Casablanca, Maroc
Missions :
- Concevoir et développer des pipelines d’ingestion et de transformation de données
- Participer à la mise en place et à l’évolution d’une architecture Data Médaillon (Bronze/Silver/Gold)
- Développer des traitements Big Data avec Spark (PySpark / Spark SQL)
- Industrialiser les flux de données sur Azure Synapse Analytics
- Optimiser les performances des traitements et des requêtes SQL
- Assurer la qualité, la fiabilité et la traçabilité des données
- Mettre en place des mécanismes de monitoring et d’alerting
- Participer aux choix d’architecture technique et aux bonnes pratiques Data Engineering
- Collaborer avec les équipes Data, BI, Data Scientist et métiers
- Participer aux phases de recette, de déploiement et de support
Compétences techniques requises :
Cloud & Data Platform
- Azure Synapse Analytics
- Databricks
- Azure Data Lake Storage (ADLS)
- Azure Data Factory (ADF) – apprécié
- Architecture Data Lakehouse
Big Data
- Apache Spark, Spark SQL, PySpark
- Optimisation des traitements distribués
Développement
- Python, SQL avancé, gestion des performances SQL
Architecture Data
- Architecture Medallion (Bronze / Silver / Gold)
- Modélisation de données, gestion des flux batch
Outils & Méthodologies
Atout majeur :
- Expérience avec l’IA générative, notamment Claude Code (très grand plus)
Profil recherché :
- Formation supérieure (Bac+5 en informatique, data ou équivalent)
- Expérience confirmée en Data Engineering sur Azure
- Maîtrise des pipelines Spark et de l’architecture Medallion
- Autonomie, rigueur, capacité à travailler en équipe agile