Description du poste Contexte La mission consiste à concevoir et faire évoluer les solutions existantes ou prévisionnelles. Il s'agit de faire évoluer les solutions Big Data et d'assurer le maintien en conditions opérationnelles (MCO) des socles Hadoop Cloudera en environnements Hors-Prod et Prod, ainsi que de participer aux projets d’évolution technique de ces socles. Missions Participer aux projets d’évolution pour le socle Hadoop existant : Évolutions logicielles et matérielles, sécurité, amélioration de l’existant, évolution des fonctionnalités techniques ou fonctionnelles Participation au pilotage, définition d’architecture, rédaction des dossiers et mise en œuvre Participer au maintien en conditions opérationnelles (MCO) du socle Hadoop : Administration et exploitation : supervision, optimisation, gestion des incidents et des performances Support expertise aux équipes Études et exploitation Participer au projet de nouvelle solution de type Plate-forme DATA : Étude d'impact, préconisation des choix techniques, définition des standards et normes, rédaction du dossier d'architecture technique Mise en œuvre Mise en production : transfert de connaissances aux équipes exploitation, rédaction des procédures d'administration et dossiers d'exploitation Assurer une totale autonomie tout en étant capable de s'intégrer et travailler en équipe Réaliser des astreintes ou interventions ponctuelles en heures non ouvrées (HNO) si nécessaire Outils & Environnement Distribution Hadoop Cloudera CDP (versions 7.1.9, 7.3.x) : HDFS, YARN, Cloudera Manager, Hive, Hue, Impala, Spark, Zeppelin, Ranger, Knox, Zookeeper, Iceberg Langages de programmation : Shell, Python, Spark Moteurs de requêtage : Hive, Impala, SQL Système d'exploitation : Linux Redhat Outils décisionnels complémentaires : ETL Datastage, PowerBI, SAS Bases de données : Teradata, PostgreSQL Captation et intégration de données : Kafka Socle technique infrastructure : Kubernetes, Ansible Compétences demandées Spark : Expert SQL : Expert Python : Expert Linux Red Hat : Confirmé Hadoop : Expert Cloud (Azure, GCP) : Expert Profil recherché Expert en Spark Expert en SQL Expert en Python Confirmé en Linux Red Hat Expert en Hadoop Expert en Cloud (Azure, GCP) Maîtrise de la distribution Hadoop Cloudera CDP (version 7.1.9, 7.3.x) : HDFS, YARN, Cloudera Manager, Hive, Hue, Impala, Spark, Zeppelin, Ranger, Knox, Zookeeper, Iceberg Compétences en langages de programmation : Shell, Python, Spark Connaissance des moteurs de requêtage : Hive, Impala, SQL Capacité à travailler en autonomie et en équipe Compétences complémentaires appréciées : outils décisionnels ( ETL Datastage, PowerBI, SAS ), bases de données ( Teradata, PostgreSQL ), captation et intégration de données ( Kafka ), socle technique infrastructure ( Kubernetes, Ansible )
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.