En tant que Data Engineer, vous serez chargé de concevoir, développer et maintenir des solutions d'ingénierie de données basées sur les technologies Spark, Scala et Hadoop. Vous jouerez un rôle essentiel dans la collecte, le traitement et l'analyse de données à grande échelle, en travaillant en étroite collaboration avec les équipes d'ingénierie logicielle et les analystes de données.
Responsabilités :
* Concevoir, développer et optimiser des pipelines de données à l'aide de Spark et Scala pour collecter, transformer et charger des données à grande échelle.
* Implémenter des solutions de stockage et de traitement distribuées avec Hadoop et d'autres technologies connexes.
* Collaborer avec les équipes fonctionnelles pour comprendre les exigences en matière de données et proposer des solutions adaptées.
* Assurer la qualité des données en mettant en œuvre des processus de nettoyage, de transformation et de validation.
* Surveiller les performances des systèmes de données et résoudre les problèmes de performance ou de fiabilité.
* Travailler sur des projets d'analyse de données avancés en utilisant des techniques telles que le machine learning et le traitement du langage naturel.
Compétences requises :
* Expérience pratique de min 2 ans dans le développement de pipelines de données avec Spark et Scala.
* Solide compréhension des concepts et des composants de l'écosystème Hadoop.
* Maîtrise des langages de programmation comme Python, Java et SQL.
* Connaissance des bases de données NoSQL telles que HBase, Cassandra, etc.
* Capacité à travailler dans un environnement distribué et à grande échelle.
* Excellentes compétences en résolution de problèmes et en débogage.
* Bon niveau d'anglais écrit et oral
Créée en décembre 2011, KLANIK a bâti son succès sur une approche « Consultant Centric » récompensée par de nombreux prix, se définissant ainsi comme une entreprise où il fait bon vivre et travailler. Ce modèle se matérialise par des programmes inédits de développement personnel et professionnel :
- Act In Klanik : catalogue de rôles et responsabilités au sein de la société
- KAMPUS : institut de formation technique certifié
Aujourd hui KLANIK renforce son positionnement technologique autour de 4 pôles d expertise :
* Software
* DevOps & Cloud
* Big Data & IA
* Cybersécurité
Ces pôles sont structurés en communautés de pratiques, au sein desquelles les collaborateurs bénéficient à la fois d un parcours professionnel renforcé et d une intelligence collective à laquelle ils participent activement.
En tant que société de conseil, avec un positionnement global et des expertises ciblées, Klanik intervient sur des projets de grande envergure soutenant la transformation digitale d acteurs majeurs nationaux et internationaux.
Rejoindre KLANIK c est participer à un projet commun avec plus de 400 personnalités atypiques autour des valeurs de Partage, de Bienveillance et d Exigence.
Présents en France à Marseille, Montpellier, Sophia-Antipolis, Paris, Lyon, Lille et Toulouse ; mais aussi à Bruxelles, Monaco, Montréal et Genève.
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.