Définition du besoin
La Direction Technique du Numérique d'une grande organisation médias mène des projets transverses en étroite collaboration avec les autres directions, notamment la direction Data. La Direction Data, au sein de la Direction du Numérique, a été créée avec la volonté de faire de la Data un levier de croissance des offres numériques
Prestation de cette équipe
Déployer les datasets normés sur un ou plusieurs des data domain
Accompagner les utilisateurs des datasets normés dans leurs usages
Mettre en place le contrôle qualité sur ces datasets
Prestations attendues
Dans un premier temps, la prestation consiste à :
Concevoir et réaliser les contrôles qualité sur les données de la plateforme Data, en exploitant Dataplex Universal Catalog
Industrialiser ces contrôles grâce à Terraform et Terragrunt
Concevoir et réaliser les indicateurs nécessaires au pilotage de la qualité des données
Concevoir et réaliser la remontée de ces indicateurs dans notre data catalog Collibra
En marge de l'objectif de livraison précédent et en interaction avec les membres de l'équipe, la suite de la mission consiste à :
Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l'équipe
Participer aux initiatives de gouvernance des données en développant les contrôles de qualité des données
Construire et maintenir de pipelines data robustes et scalables
Accompagner les membres de l'équipe dans l'exploitation et le requêtage des données
Organiser et structurer le stockage des données
Mettre en place et maintenir des infrastructures scalables capable de répondre aux besoins et à l'accroissement rapide du volume de données
Construire et maintenir les workflows de la CI/CD
Partager avec les autres data ingénieurs pour appliquer les bonnes pratiques en vigueur
Assurer l'évolutivité, la sécurité, la stabilité des environnements
Participer aux différentes instances des data ingénieurs
Contribuer et veiller à la mise à jour de la documentation
Faire de la veille technologique active dans le domaine
Expertises demandées pour la réalisation de la prestation
Au moins 5 ans d'expérience en tant que Data Ingénieur dans un environnement data
Compétences solides en data : structures de données, code, architecture
Expériences dans la conception et la réalisation de pipelines data
Expériences dans un environnement du cloud Google (GCP)
Expériences intégrant BigQuery et Dataplex Universal Catalog
Expériences intégrant les langages Python et SQL
Expériences intégrant Spark
Expériences intégrant des flux avec l'API Collibra
Expériences intégrant Terraform et Terragrunt
Expériences intégrant Gitlab et Gitlab CI/CD
Expériences intégrant les méthodologies Agile : Scrum ou Kanban
Capacité à vulgariser et à communiquer sur des aspects purement techniques
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.