Ingénieur big data (hadoop / cloudera) – freelance

Ingénieur Big Data (Hadoop / Cloudera) – Freelance/Entrepreneur

Localisation : Bordeaux

Mission : Longue durée

Dans le cadre du renforcement de ses équipes, la Direction des Systèmes d’Information recherche un Ingénieur Big Data spécialisé Hadoop / Cloudera pour intervenir au sein de l’équipe DBA & Socles, en charge des environnements techniques.

Une plateforme Big Data Hadoop (Cloudera) est en production depuis 2018 afin de centraliser et exploiter des données hétérogènes à grande échelle. Face à l’augmentation des usages et des exigences métiers, la mission vise à accompagner les évolutions techniques, la stabilisation et l’amélioration continue de la plateforme.

La mission s’inscrit dans un contexte mêlant RUN (exploitation) et CHANGE (projets et amélioration continue).

Vos missions

• Assurer le maintien en condition opérationnelle (MCO) des environnements Hadoop / Cloudera en production et hors production
• Gérer les incidents, analyser les causes racines et mettre en œuvre les actions correctives
• Améliorer la stabilité, la performance et la disponibilité de la plateforme Big Data
• Réaliser des travaux de fiabilisation et de stabilisation des socles Hadoop
• Rédiger et maintenir les procédures d’exploitation et d’administration
• Participer à l’intégration avec les outils du SI :
• Ordonnanceur IWS
• Sauvegarde HDPS
• Supervision Prometheus / Grafana
• Mettre en œuvre les principes de sécurité (outillage, gestion des accès, reporting)
• Apporter un support technique de niveau expert sur l’environnement Hadoop

Profil recherché

• Minimum 5 ans d’expérience en environnement Big Data, avec une forte expertise Hadoop / Cloudera en production
• Maîtrise de l’administration des composants :
• HDFS, YARN, Hive, Spark, Impala
• Solide expérience des environnements Linux
• Bonne maîtrise des langages Python, Shell et SQL
• Expérience indispensable en RUN et en gestion d’incidents
• Capacité à intervenir sur des sujets de CHANGE et d’amélioration continue
• Des compétences en supervision (Prometheus, Grafana), en sécurité Hadoop (Ranger, Knox) et en ordonnancement sont un plus apprécié

NOTE : Chez SCC, nous prenons très au sérieux la confidentialité et la sécurité de vos informations. Toutes les informations que nous détenons seront traitées conformément à la législation en vigueur en matière de protection des données.

En soumettant votre candidature, SCC traitera vos informations conformément à notre politique de confidentialité, disponible sur notre site web dans la section Mentions légales → Avis de confidentialité → Flexible Resourcing.