Nous recherchons un(e) Data Engineer spécialisé(e) en Data Quality afin de renforcer une équipe en charge de la fiabilité, de la qualité et de la gouvernance des données. Vous évoluerez dans un environnement cloud moderne et contribuerez à la mise en place de frameworks de validation, d?observabilité et d?automatisation de la qualité des données au sein de pipelines data à forte volumétrie.
Missions principales :
Définir et mettre en ?uvre des règles de qualité des données (complétude, cohérence, unicité, exactitude)
Concevoir et intégrer des tests automatisés dans les pipelines ETL / ELT
Développer des pipelines data intégrant des mécanismes de validation et de contrôle qualité
Mettre en place des solutions de monitoring, alerting et observabilité des données
Participer à la détection d?anomalies et au traitement des incidents data en production
Vérifier la cohérence des transformations de données avec les besoins métiers
Collaborer avec les équipes Data Engineering, Data Analytics et Produit afin de définir les critères d?acceptation et standards qualité
Garantir la fiabilité et la maintenabilité des pipelines de données
Contribuer à l?amélioration continue des pratiques QA appliquées à la Data Platform
Participer à l?intégration des tests dans les pipelines CI/CD
Profil candidat:
Expérience significative en Data Engineering avec une forte sensibilité Data Quality / QA
Très bonne maîtrise de Python et SQL
Expérience des pipelines ETL / ELT et des tests de validation de données
Bonne connaissance de Databricks et Spark
Expérience des environnements cloud AWS
Compréhension des stratégies de tests automatisés et des pipelines CI/CD
Capacité à intervenir sur des problématiques de monitoring et d?observabilité data
Niveau d?anglais professionnel
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.