Dans un contexte Data & BI à forts enjeux, vous intervenez au sein d?une équipe Big Data & API, rattachée à une squad Financing & Risk, en charge du développement et de l?exploitation d?un datalake utilisé comme plateforme data centrale par les équipes IT et métiers.
En tant que Data Engineer, vous jouez un rôle clé dans la gestion, l?évolution et la fiabilité de cette plateforme.
Vos principales missions sont les suivantes :
Assurer la gestion de la production du datalake (suivi, incidents, stabilité des traitements)
Prendre en charge la dette technique et contribuer à l?amélioration continue de la plateforme
Analyser l?architecture existante et proposer des évolutions techniques pertinentes
Réaliser les développements Big Data liés aux projets en cours et à venir
Participer à l?industrialisation et aux déploiements via les chaînes CI/CD
Vous évoluez dans un environnement technique Big Data on-premise, au sein d?une équipe travaillant en interaction avec des équipes IT et métiers, sur des sujets à forte valeur ajoutée.
Profil candidat:
Compétences Expérience confirmée en Data Engineering / Big Data
Maîtrise de Spark et PySpark
Bon niveau en Scala
Solide expérience sur Hadoop on-premise
Utilisation de Hive et SQL / HQL
Pratique des environnements Unix/Linux et du Bash
Expérience des outils CI/CD (Jenkins, pipelines)
Connaissance de XLDeploy / XLRelease
Utilisation d?outils de suivi projet type Jira
Capacité à travailler sur de la production critique et à traiter de la dette technique
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.