Nous poursuivons notre développement et recherchons actuellement un.e Data Engineer orienté QA / Data Quality pour intervenir chez l'un de nos clients dans le domaine bancaire. ☁️
Contexte de la mission
Dans le cadre du renforcement de sa Data Platform Cloud, notre client souhaite accélérer la mise en place de standards de qualité, de fiabilité et d'observabilité autour de ses traitements Data.
Vous intégrerez une feature team dédiée à la conception, au développement et à la fiabilisation des pipelines de données au sein d'un environnement moderne basé sur Databricks et AWS.
L'objectif : garantir des données fiables, cohérentes et exploitables pour les usages métiers, analytics et IA, tout en intégrant les bonnes pratiques QA directement dans les pipelines Data.
Vous évoluerez dans un environnement Agile, international et fortement orienté qualité et amélioration continue.
Vos missions :
✅ Data Quality & QA
Définir et mettre en œuvre des règles de qualité de données :
• complétude
• cohérence
• unicité
• exactitude
Mettre en place des frameworks de validation et de contrôle qualité des données
Concevoir et intégrer des tests automatisés dans les pipelines ETL / ELT :
• tests unitaires
• tests d'intégration
• tests de non-régression
Garantir la conformité des transformations de données avec les règles métiers et les besoins fonctionnels
Engineering & Data Pipeline
Concevoir et faire évoluer des pipelines Data intégrant des mécanismes de contrôle qualité
Participer au traitement et à la validation des données à grande échelle avec Spark et Databricks
Analyser et corriger les anomalies de qualité de données en production
Contribuer à la fiabilisation et à l'industrialisation des traitements Data
☁️ Observabilité & Cloud
Mettre en place des solutions d'observabilité et de monitoring :
• alerting
• détection d'anomalies
• détection de dérive des données
Participer à la supervision des pipelines et à la gestion des incidents
Contribuer à l'intégration des bonnes pratiques QA dans les pipelines CI/CD
Collaboration transverse
Travailler en étroite collaboration avec :
• les Data Engineers
• les Data Analysts
• les équipes métiers
• les Product Teams
Participer à la définition des data contracts et des critères d'acceptance
Accompagner les équipes dans l'adoption des bonnes pratiques Data Quality
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.