Développeur java / spark confirmé - environnement big data

Dans le cadre d’une mission longue pour un acteur majeur du secteur des télécommunications, nous recherchons un développeur Java / Spark confirmé pour intervenir sur des plateformes Big Data à fort volume. Le contexte s’inscrit dans des enjeux de supervision de réseau et d’analyses à froid, avec des flux de données massifs et des exigences élevées en matière de scalabilité, de disponibilité et de robustesse des solutions.

Le consultant interviendra sur la mise en œuvre et la maintenance de flux de collecte, de structuration et de stockage de données. Il participera également au déclenchement de traitements via des règles ou des modèles analytiques, au sein d’un environnement Big Data distribué. Les volumes traités sont très importants, de l’ordre de plusieurs dizaines de téraoctets par jour, ce qui nécessite une forte maîtrise des problématiques de performance et de monitoring.


Missions principales

* Développer et maintenir des traitements Big Data en Java et Spark
* Concevoir et optimiser des pipelines de données volumineux
* Assurer la fiabilité, la supervision et la disponibilité des solutions mises en place
* Collaborer au sein d’une équipe agile sur des problématiques data à grande échelle


Compétences requises

* Excellente maîtrise de Java, idéalement avec Spring
* Expérience confirmée avec Spark
* Bonne connaissance de l’écosystème Big Data
* Familiarité avec Kafka et les solutions de stockage objet


Environnement technique

Java, Spark, Spring, Kubernetes, Object Storage (S3, MinIO), Kafka, Elasticsearch, bases de données, Python, Linux.


Qualités attendues

* Rigueur et sens de la qualité logicielle
* Capacité à travailler sur des systèmes critiques et fortement sollicités
* Esprit d’équipe et aisance dans un contexte agile

Mission longue en Île-de-France.
Cible : freelances et sociétés de services.