Data engineer f/h

Dans ce cadre, les responsabilités principales seront les suivantes : Participer à la conception et à l’évolution de l’architecture technique de la plateforme de données en fonction des besoins fonctionnels et opérationnels Développer et maintenir des traitements distribués pour le traitement de grands volumes de données (ingestion, transformation, nettoyage, enrichissement et consolidation) Mettre à jour et structurer les jeux de données au sein d’un data lake et les préparer pour leur exploitation par des outils analytiques et des modèles d’intelligence artificielle Contribuer à la mise à disposition des données via des couches de restitution et des services exposés aux applications consommatrices Accompagner les développements depuis la phase de conception jusqu’au déploiement en environnement de production et assurer le support correctif des traitements existants Collaborer avec les équipes de data science afin de faciliter l’industrialisation et la fiabilisation des pipelines de modèles de machine learning Identifier et proposer des axes d’amélioration pour optimiser la performance, la robustesse et la maintenabilité de la plateforme Travailler en coordination avec l’ensemble des parties prenantes techniques et métiers dans un contexte collaboratif et transverse Profil recherché De formation supérieure en informatique ou équivalent, vous justifiez d’une expérience significative en ingénierie de données Big Data et en environnements distribués. Compétences techniques attendues Langages & développement Java / Maven (J2EE, JDK 17) Scala Big Data & Data Processing Apache Spark (SQL, DataFrame) Technologies de stockage et de requêtage : Iceberg, Trino, Kudu, SQL Streaming & Caching Kafka Redis Conteneurisation & orchestration Docker Kubernetes Helm Argo Services & APIs Conception et consommation de Web Services REST Qualité & tests Tests unitaires : JUnit, Mockito, PowerMock, ScalaMock CoperBee, Join the digital hive! Bienvenue dans notre univers IT où l'innovation est notre moteur quotidien, la convivialité est notre langage commun, et où ensemble, nous façonnons l'avenir technologique pour offrir une expérience exceptionnelle à nos clients. Rejoins une équipe où chaque idée compte et où l'humain est au cœur de notre succès. Envie de rejoindre une équipe soudée et bienveillante? Les interactions humaines et les nouvelles technologies sont au cœur de tes préoccupations? Tu souhaites évoluer et avancer dans les projets au rythme de tes envies? Nous renforçons notre équipe et recherchons un(e) Data Engineer confirmé (H/F)passionné(e) pour intégrer un projet stratégique. Si tu es un(e) expert(e) de Java/ Scala et Spark, Iceberg, Docker, Kubernetes, JUnit avec au moins 3 ans d'expériences et aime relever des défis technologiques, cette opportunité est pour toi ! Qui sommes nous? CoperBee, fondée en 2011, est une société de services innovante, basée sur un modèle collaboratif et horizontal qui regroupe des femmes et des hommes experts IT. On t'offre de nouvelles perspectives au sein d’une société responsable et délivrant une expérience vraiment nouvelle à ses collaborateurs. Nous sommes experts en transformation digitale. Nous accompagnons nos clients, quel que soit leur domaine métier, dans leurs projets d’innovation, de conception ou d’optimisation de leur Système d’Information. On pourrait te faire un blablabla interminable mais au final on t'invitera plus volontiers à partager un café. Si ça te parle, rejoins nous! Là où l'audace rencontre la réalité, dans une équipe qui adore transformer les rêves en code !