Ingénieur big data h/f

Infotel accompagne les directions Informatiques et Métiers des grandes entreprises depuis plus de 40 ans (Airbus, Air France, PSA, BNP Paribas, Banque de France, BPCE, etc.). C'est aujourd'hui près de 3 000 personnes qui travaillent pour le Groupe en France et à Monaco. Nous avons réalisé en 2023 un chiffre d'affaires de 307,5 M€.
Notre filiale OAIO intervient sur des problématiques de transformation digitale : consulting, design et innovation. L'objectif est de pouvoir associer stratégie digitale, expertise technologique et développement dans une dynamique commune et agile, d'être présent dès la conception aux côtés des métiers.
Vous évoluerez sous la direction du directeur de projet et du directeur d'agence. Selon votre potentiel et vos souhaits de carrière, plusieurs possibilités s'offriront à vous : pilotage de projet, management d'équipe, ou encore expertise métier.
Lors du processus d'embauche, vous serez amené(e) à remplir un questionnaire visant à faciliter l'échange lors de vos rencontres avec les différents interlocuteurs (recruteurs, directeurs).
En devenant Infotélien(ne), vous rejoindrez une entreprise qui place la RSE au cœur de ses engagements à travers sa politique RH :

- Égalité entre les femmes et les hommes (existence d'une communauté interne « Infot'Elles »),
- Actions concrètes pour le bien-être et la qualité de vie au travail,
- Charte Handicap « Nous sommes tous différents »,
- Engagement pour le Numérique Responsable et l'environnement,
- Etc.
Nos offres d'emploi sont ouvertes à toutes et à tous, sans discrimination fondée sur des caractéristiques personnelles. Nos chargés de recrutement restent à disposition si vous souhaitez en savoir plus sur nos valeurs et nos engagements.
Si votre profil est retenu, un chargé de recrutement prendra contact avec vous afin de discuter de votre parcours et de vos souhaits pour rejoindre Infotel. Vous aurez ensuite l'occasion de rencontrer l'un de nos ingénieurs d'affaires et/ou directeur d'agence avec qui vous pourrez échanger de manière plus précise sur nos opportunités.




Nous recrutons pour notre client un ingénieur Big Data qui aura la responsabilité́ de concevoir, construire, tester et maintenir les chaines de traitement de données. Il travaillera sur l'automatisation de la livraison de ces technologies PaaS en « self-service », en minimisant l'effort de RUN associé.
L'ingénieur Big Data travaille en étroite collaboration avec :
- l'équipe infrastructure qui fournit les briques de bases pour supporter l'écosystème technologique Big Data
- les Data Scientists/Analystes qui consomment les données dans tous les sens, et en extraire de la valeur (facturation, détection de fraude, prévisions…).
Il assure la maintenance des pipelines/composants/services. Il automatise l'accès aux ressources tout en assurant de la cohérence, la qualité et la sécurité. Il veille au monitoring et à la supervision des data sets.
Concrètement, les mois à venir se focaliseront sur la création d'un data Lake pour 4 opérateurs télécom et la mise en œuvre de pipeline d'acquisition/normalisation et présentation de données respectives. Ce data lake deviendra rapidement une plateforme de compute IA/LLM à base de GPU.
Missions :

- Participe à la définition des solutions.
- Déploie, intègre et administre les chaines de traitement de données sous Linux.
- Automatise la livraison, la supervision et l'accès aux datasets sur notre infrastructure privée.
- Documentation et contribue à la rédaction du modèle de responsabilité partagée pour chaque technologie (« shared responsibility model »).
- Apporte son expertise technique pour la résolution des incidents N2 et N3.
- Automatise et documente l'exploitation des chaines de traitement de données.
- Propose les évolutions techniques des pipelines.
- Garantit au quotidien la livraison, la disponibilité et l'intégrité des données.
- Capacity planning
- Astreinte sur le périmètre de l'équipe (Big data, Kubernetes et bases de données)
Profil :

- Bac +4/+5
- Expériences et expertises opérationnelles recherchées :Run et build de pipelines de données de production
- Gestion des incidents de production (plateforme, sécurité, retard de livraison de données, corruption de données, etc.)

Qualités essentielles :
- Capacité à apprendre
- Appétence pour les aspects fonctionnels et métiers du secteur Télécom
- Capacité d'écoute et d'analyse du besoin des clients et des utilisateurs
- Sens de la priorité clients et des utilisateurs
- Autonomie
- Esprit d'analyse et sens de l'initiative
- Force de proposition
- Esprit d'équipe
- Niveau d'anglais technique
- Savoir prioriser son travail dans un environnement sous pression
- Toute expérience sur un poste similaire est un gros plus

Maitrise de
- CI/CD/CD (Gitlab)
- Pyspark / spark
- SQL
- Linux
- Bases de données (RDBMS & NoSQL)
- Kafka
- Hive/Impala/PrestoDB/Trino/Nessie(gestion des données)
- Spark (développement, optimisation et opérations)
- Principes architecture big data & Hadoop
- Réseaux (savoir débugger des flux)
Connaissances qui sont un gros plus :
- Kubernetes, pour le déploiement d'application Spark sur K8S
- Trino
- Infrastructure as code (Ansible, Terraform est un plus)
- Apache Icerberg ou autre framework de delta tables
- Hive Metastore
- S3
- MariaDB (Galera cluster) et PostGreSQL
- MongoDB
- OLLAMA
- MIG K0S