En tant qu'Ingénieur Data ETL (Extract, Transform, Load), vous jouerez un rôle essentiel dans la gestion et l'optimisation des flux de données au sein de notre organisation. Vous serez responsable de concevoir, développer et maintenir les pipelines ETL pour garantir l'intégrité, la fiabilité et la qualité des données dans nos systèmes.
Responsabilités :
Concevoir et développer des pipelines ETL robustes pour extraire, transformer et charger efficacement les données à partir de différentes sources vers nos entrepôts de données.
Collaborer avec les équipes métier pour comprendre les besoins en matière de données et traduire ces besoins en solutions techniques.
Optimiser les performances des pipelines ETL en identifiant et en résolvant les goulots d'étranglement, en améliorant les requêtes SQL et en mettant en œuvre des techniques d'optimisation.
Assurer la qualité des données en mettant en place des contrôles de qualité et des mécanismes de validation des données.
Participer à la documentation technique, à la gestion des configurations et à la surveillance des environnements ETL.
Collaborer avec les équipes d'ingénierie des données et les analystes pour répondre aux besoins d'analyse et de reporting.
Maintenir une veille technologique sur les tendances et les meilleures pratiques en matière de traitement des données et de gestion des pipelines ETL.
Compétences requises :
Solide expérience dans le développement de pipelines ETL avec des outils tels qu’Apache Spark, Apache NiFi, Talend, Informatica, etc.
Maîtrise des langages de requête SQL et des bases de données relationnelles telles que PostgreSQL, MySQL, Oracle, etc.
Compréhension des concepts de modélisation de données et des techniques d'optimisation des requêtes.
Connaissance des langages de programmation comme Python, Java ou Scala est un plus.
Capacité à travailler de manière autonome tout en étant un membre efficace d'une équipe multidisciplinaire.
Fortes compétences en résolution de problèmes et capacité à travailler dans un environnement dynamique et en évolution rapide.
Excellentes compétences en communication verbale et écrite.
Profil
Diplôme universitaire en informatique, en génie logiciel, en sciences des données ou dans un domaine connexe.
Expérience professionnelle démontrée dans le développement et la gestion de pipelines ETL, de préférence dans un environnement d'entreprise.
Informations contractuelles
Ce poste offre une opportunité passionnante de contribuer à l'optimisation des flux de données et à la prise de décision basée sur les données au sein de notre organisation. Si vous êtes passionné par les technologies de données et que vous avez les compétences nécessaires pour relever ce défi, nous serions ravis de vous accueillir dans notre équipe.