Data engineer big data (it) / freelance

? ContexteAu sein de la direction IT Data Management & BI, vous intégrez l?équipe Big Data & API / Squad Financing & Risk.
L?équipe développe et maintient un datalake, utilisé comme plateforme de données par les équipes IT et métiers (finance, risque).

? MissionsEn tant que Data Engineer, vous intervenez sur le datalake FinLake avec les responsabilités suivantes :

Assurer la gestion de la production (suivi des flux, incidents, performance)


Réduire et maîtriser la dette technique


Analyser l?architecture existante et proposer des évolutions


Réaliser les développements Big Data liés aux projets métiers


Participer aux déploiements et à l?industrialisation des traitements



?? Environnement techniqueBig Data : Spark, PySpark, Scala, Hadoop (on-premise)


Data & requêtage : Hive, SQL/HQL, Starburst, Indexima


Scripting : Unix / Bash


DevOps & industrialisation : Jenkins, CI/CD, XLDeploy, XLRelease


Outils projet : Jira





Profil candidat:
? Profil recherchéExpérience confirmée en Data Engineering / Big Data


Bonne maîtrise des environnements Hadoop on-premise


Capacité à intervenir à la fois en RUN et en BUILD


Autonomie, rigueur et esprit d?analyse


Bon relationnel avec les équipes IT et métiers