Nous recherchons un Data Engineer Spark/Scala confirmé (5-6 ans d?expérience).
vous rejoindrez le projet d?intégration en tant que Data Engineer.
Développements sur la plateforme Datalake Finance, basée sur une distribution Hadoop HortonWorks qui collecte les données des différents systèmes de synthèse afin de répondre aux nouveaux besoins des Utilisateurs.
Prendre part aux développements, au sein du datalake pour acquérir les nouvelles sources de données, les assemblées et les distribuées aux Utilisateurs
Vous serez le garant de la pérennité et de la non-régression de l?outillage déjà en place.
Conception et implémentation de ce projet en mode Agile avec de nombreux acteurs métiers
Compétences techniques attendues :
Expérience dans la mise en ?uvre de technologies et frameworks Big Data et NoSQL (Hadoop, Kafka, Spark, Scala, Hive, SolR, HBase, Kerberos)
Spark / Scala : confirmé
A l'aise avec le programmation fonctionnelle (connaissance des librairies ZIO, MONIX, CATS appréciée)
Bonne pratique d'Agile, avec outils et méthodologies associés (Confluence, Jira, Scrum, Kanban)
Apache Kafka confirmé
Apache Hadoop confirmé
Apache Hive
SCALA et spark confirmé
Profil candidat:
Nous recherchons un Data Engineer Spark/Scala confirmé (5-6 ans d?expérience).
vous rejoindrez le projet d?intégration en tant que Data Engineer.
Développements sur la plateforme Datalake Finance, basée sur une distribution Hadoop HortonWorks qui collecte les données des différents systèmes de synthèse afin de répondre aux nouveaux besoins des Utilisateurs.
Prendre part aux développements, au sein du datalake pour acquérir les nouvelles sources de données, les assemblées et les distribuées aux Utilisateurs
Vous serez le garant de la pérennité et de la non-régression de l?outillage déjà en place.
Conception et implémentation de ce projet en mode Agile avec de nombreux acteurs métiers
Compétences techniques attendues :
Expérience dans la mise en ?uvre de technologies et frameworks Big Data et NoSQL (Hadoop, Kafka, Spark, Scala, Hive, SolR, HBase, Kerberos)
Spark / Scala : confirmé
A l'aise avec le programmation fonctionnelle (connaissance des librairies ZIO, MONIX, CATS appréciée)
Bonne pratique d'Agile, avec outils et méthodologies associés (Confluence, Jira, Scrum, Kanban)
Apache Kafka confirmé
Apache Hadoop confirmé
Apache Hive
SCALA et spark confirmé
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.