Dans le cadre d'un programme de transformation data, nous recherchons un(e) Data Engineer confirmé(e) pour intervenir sur la construction d'une plateforme data moderne, scalable et évolutive. Vous évoluerez dans un environnement technique hybride (cloud & on-premise), avec des enjeux forts autour de la fiabilité, de la qualité et de la valorisation des données. Objectif de la mission Renforcer l'équipe data en participant à : - la conception et le développement des pipelines data - la modélisation des données - la mise à disposition des données pour les équipes BI Vous interviendrez sur l'ensemble de la chaîne de valeur data, de l'ingestion à l'exploitation. Vos missions Transformation & modélisation (DBT) - Prioritaire - Concevoir et implémenter des modèles DBT (staging, intermédiaire, datamarts) - Appliquer les bonnes pratiques d'architecture et de nommage - Mettre en place des tests de qualité et tests fonctionnels - Maintenir la documentation (lineage, dictionnaire de données) - Gérer les évolutions de schéma et la compatibilité des modèles Ingestion & pipelines data (Python) - Développer et maintenir les pipelines d'ingestion - Connecter différentes sources : - APIs - bases de données (PostgreSQL, Oracle…) - fichiers - outils SaaS (type CRM, ITSM, RH…) - Mettre en place des chargements incrémentaux - Gérer les doublons et la qualité des données Orchestration (Dagster) - Concevoir et orchestrer les pipelines de bout en bout - Mettre en place le monitoring - Définir les dépendances et stratégies de planification - Gérer les retries et la fiabilité des traitements Environnement Cloud (Snowflake - secondaire) - Gestion des ressources (warehouses) - Optimisation des coûts et de la performance - Gestion des accès et rôles
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.