Description du poste
L’équipe DATA de la DNSCE est une équipe transverse qui comprend des compétences infrastructures et de développement. Elle regroupe des métiers variés (ingénieurs cloud, ingénieurs ETL, tech lead, data engineers ou développeurs fullstack).
Le/La Data Engineer (DE) intégrera l’équipe de trois DE sous le pilotage d’un(e) chef(fe) de projet local. Son périmètre d’intervention est axé sur les dispositifs de collecte de la donnée et de son traitement, sa mise en forme, sa transformation, et parfois sa restitution.
Il/Elle prend en charge le développement des nouvelles ingestions et l’entretien de celles qui sont opérationnelles.
Il/Elle prépare les données et contribue à leur mise en qualité afin d’en faciliter l’exploitation par les équipes utilisatrices.
La mise en œuvre de l’infrastructure de traitement de la donnée fait l’objet de nombreuses expérimentations (POC) pour sélectionner les outils et les processus les mieux adaptés aux cas d’usages, et les DE sont mobilisés dans le processus de sélection et d’implémentation des services ad-hoc.
Il/elle pourra être amené(e) ponctuellement à réaliser de la data visualisation.
Il/Elle est doté(e) d’une forte capacité d’adaptation et d’apprentissage, d’un esprit curieux et constructif, d’une approche pragmatique, et porte un intérêt réel à la matière et les objectifs finaux. Largement autonome et responsabilisé sur son domaine d’intervention, le/la Data Engineer participe à l’évolution de l’offre de services en matière de mise à disposition et mise en qualité des données, proposées par la DNSCE.
Responsabilités opérationnelles :
Sous le pilotage du responsable du pôle développement de la DNSCE, l’agent(e) aura tout particulièrement la charge de :
1. Participer à la mise en œuvre des workflows de traitement des données (Extract Transform Load, Master Data Management…)
2. Développer les solutions techniques de collecte des données (structurées et non structurées) produites par les différentes sources internes ou externes, ponctuellement ou de manière automatique
3. Assurer le maintien en condition opérationnelle des traitements de collecte existants
4. Superviser, contrôler le bon fonctionnement des échanges de données et fournir des indicateurs d’activité et de performance
5. Structurer la donnée
6. Mettre en œuvre les traitements de nettoyage de données (élimination des doublons, etc.)
7. Procéder aux contrôles qualité des données retraitées
8. Réaliser la préparation des données pour les besoins des cas d’usages
9. Réaliser le maintien en condition opérationnelle des traitements de data préparation des cas d’usages existants
10. Cartographier et documenter les flux de données
11. Participer à l’entretien du référentiel de données
12. Assurer une veille technologique
13. Participer à l’enrichissement et à la mise à jour de la documentation
Conditions d'exercice particulières
Possibilité de réaliser une partie des activités en télétravail
Déplacements ponctuels
Description du profil recherché
Rejoignez une équipe qui place la donnée au cœur de ses enjeux stratégiques et participez à la construction de solutions data au sein d'un environnement technologique riche et stimulant. En tant que Data Engineer, vous évoluerez sur une infrastructure composée de multiples briques techniques et contribuerez à concevoir, développer et industrialiser des pipelines de données robustes et performants.
Nous recherchons un profil curieux, rigoureux et passionné par les problématiques de gestion et de valorisation de la donnée. Une solide maîtrise de Python est indispensable, ainsi qu'une bonne connaissance des bases de données relationnelles et non relationnelles (SQL et NoSQL). Une maîtrise ou de bonnes notions en Java constitueront un véritable atout.
Une expérience des outils ETL et des plateformes low-code telles que Talend ou Informatica constituera un avantage apprécié. De même, une sensibilité à l'environnement Linux ainsi qu'une connaissance de l'écosystème Cloudera Data Platform (notamment Spark, Hive et Iceberg) seront de grands plus.
Toutefois, au-delà des compétences techniques déjà acquises, nous valorisons également votre capacité d'apprentissage, votre autonomie et votre envie de progresser sur des technologies variées.
Temps Plein
Oui
Compétences candidat
Compétences
14. SAVOIR-FAIRE - Analyser un projet, une démarche
15. SAVOIR-FAIRE - Communiquer
16. SAVOIR-FAIRE - Mener une veille
17. SAVOIR-FAIRE - Prendre en compte un contexte, une contrainte, une complexité
18. SAVOIR-FAIRE - Travailler en équipe
19. SAVOIR-ÊTRE - Aptitude à l'écoute
20. SAVOIR-ÊTRE - Avoir l'esprit d'équipe
21. SAVOIR-ÊTRE - Être autonome
22. SAVOIR-ÊTRE - Être rigoureux
23. SAVOIR-ÊTRE - Faculté d'adaptation
Niveau d'études min. souhaité
Niveau 6 Licence/diplômes équivalents
Niveau d'expérience min. requis
Confirmé
En cliquant sur "JE DÉPOSE MON CV", vous acceptez nos CGU et déclarez avoir pris connaissance de la politique de protection des données du site jobijoba.com.