Expertise technique hadoop f/h

Mission principale

Assurer le maintien en conditions opérationnelles (MCO) des plateformes Hadoop Cloudera et participer aux projets d'évolution des infrastructures Data.

Responsabilités principales

1. Administration et exploitation Hadoop

• Administrer les clusters Hadoop Cloudera (Prod et Hors Prod).
• Superviser les infrastructures et assurer leur disponibilité.
• Gérer les incidents et les problèmes techniques.
• Optimiser les performances des plateformes.

2. Capacity Planning

• Suivre les capacités des infrastructures.
• Mettre en place des outils et procédures de suivi.
• Anticiper les besoins d'évolution.

3. Maintenance et évolution

• Appliquer les correctifs et mises à jour.
• Assurer une veille technologique.
• Participer aux montées de version et migrations.

4. Support et expertise

• Accompagner les équipes études et exploitation.
• Fournir une expertise technique sur les problématiques Big Data.
• Participer aux diagnostics complexes.

5. Projets techniques

• Concevoir des architectures techniques.
• Piloter ou contribuer aux projets d'évolution.
• Participer aux évolutions logicielles, matérielles et de sécurité.

6. Documentation et gouvernance

• Rédiger les procédures d'administration et d'exploitation.
• Produire les dossiers d'architecture.
• Assurer les transferts de connaissances.

7. Exploitation opérationnelle

• Gestion des incidents, demandes et changements.
• Reporting hebdomadaire et tableaux de bord mensuels.
• Participation aux astreintes et interventions HNO si nécessaire.

Expérience

• 5 à 10 ans minimum dans l'administration de plateformes Big Data.
• Solide expérience sur Hadoop Cloudera en environnement de production.

Compétences techniques requises

Big Data (Expert)

Cloudera CDP 7.1.9 / 7.3.x

• HDFS
• YARN
• Cloudera Manager
• Hive
• Hue
• Impala
• Spark
• Zeppelin
• Ranger
• Knox
• ZooKeeper
• Iceberg

Développement

• Shell scripting
• Python
• Spark

Requêtage

• SQL
• HiveQL
• Impala

Systèmes

• Linux RedHat

Environnement Data

• Teradata
• DataStage
• Power BI
• SAS

Bases de données

• PostgreSQL

Data Streaming

• Kafka
• IBM InfoSphere CDC

Infrastructure

• Kubernetes
• Ansible
• VMware
• Linux RedHat

Exploitation

• Ordonnanceur IWS
• Sauvegarde HDPS
• Prometheus
• Grafana

REDOPUS est une société de conseil créée en 2017. Nous offrons à nos clients des services et solutions afin de répondre à leur problématique d'infrastructures. L'expertise en sécurité et réseau informatique est le fondement même de REDOPUS.