Architecte technique data hadoop h/f

Dans le cadre du développement et de l'évolution de plateformes Data stratégiques, nous recherchons un Architecte Technique Data expérimenté pour intervenir sur des environnements Big Data à forte volumétrie.

Vous intégrerez une équipe en charge de la gestion, de l'évolution et du maintien en conditions opérationnelles des plateformes Data utilisées pour le pilotage décisionnel, l'analyse avancée des données, la Data Science et l'industrialisation des traitements.

Votre rôle consistera à concevoir, faire évoluer et administrer les architectures Hadoop Cloudera en environnement de production et hors production.

Missions

Architecture et évolution des plateformes Data

- Participer aux projets d'évolution des plateformes Big Data existantes.
- Concevoir les architectures techniques des solutions Data.
- Définir les standards, normes et bonnes pratiques d'architecture.
- Réaliser les études d'impacts techniques et préconiser les solutions adaptées.
- Rédiger les dossiers d'architecture et la documentation technique.
- Piloter ou contribuer à la mise en oeuvre des évolutions de la plateforme.

Administration et maintien en conditions opérationnelles

- Assurer l'administration et l'exploitation des environnements Hadoop Cloudera.
- Superviser les plateformes et optimiser leurs performances.
- Diagnostiquer et résoudre les incidents complexes.
- Garantir la disponibilité, la sécurité et la fiabilité des infrastructures Data.
- Accompagner les équipes Études et Exploitation sur les problématiques techniques.

Déploiement de nouvelles solutions Data

- Participer à la mise en place de nouvelles plateformes Big Data.
- Contribuer aux phases de conception, déploiement et mise en production.
- Assurer le transfert de compétences vers les équipes d'exploitation.
- Rédiger les procédures d'administration, d'exploitation et les modes opératoires.

Environnement technique

Big Data / Hadoop

- Cloudera CDP (7.1.9 / 7.3.x)
- HDFS
- YARN
- Cloudera Manager
- Hive
- Hue
- Impala
- Spark
- Zeppelin
- Ranger
- Knox
- ZooKeeper
- Apache Iceberg

Développement et traitement des données

- Python
- Shell scripting
- Spark

Bases de données et requêtage

- SQL
- Hive SQL
- Impala

Systèmes

- Linux Red Hat

Compétences appréciées

Décisionnel / BI

- DataStage
- Power BI
- SAS

Bases de données

- Teradata
- PostgreSQL

Data Streaming

- Kafka

Infrastructure & DevOps

- Kubernetes
- Ansible