Data engineer (f/h/nb )

Rejoignez Valeuriad, ESN Agile, engagée, 100% Nantaise, organisée sur un mode de management participatif.


Votre rôle : Data Engineer

Nous recherchons un Data Engineer pour intervenir sur des projets innovants. Vos responsabilités incluront :

1. Étude, conception et réalisation de traitements Big Data ;
2. Échange avec les architectes, PO, PPO, développeurs et la gouvernance de données ;
3. Exploration des données et des usages avec Impala ;
4. Import de données via SFTP, Kafka, RabbitMQ ;
5. Alimentation du cluster Hadoop avec des composants Java et Spark sur IntelliJ ;
6. Gestion et surveillance du cluster Hadoop avec Apache Ambari, visualisation des jobs via YarnApplication et flux Oozie ;
7. Collecte de données Teradata via Sqoop dans Hive ;
8. Transformation des données avec Spark (HDFS, Hive, Kafka, HBase, Phoenix) ;
9. Optimisation des requêtes avec Apache Kudu ;
10. Exposition de données sur Dataiku pour la création de modèles DataScience ;
11. Traitements complexes avec Java et Flink ;
12. Gestion de configuration avec Git/GitLab ;
13. Intégration continue avec Jenkins et Sonar ;
14. Lecture de fichiers Parquet depuis S3 sur AWS ;
15. Requêtage via AWS Athena ;
16. Transformation et calcul d’indicateurs sous Hive ;
17. Orchestration des flux avec Oozie ;
18. Visualisation et suivi de volumétrie avec Kibana.


Technologies utilisées :

Hadoop, Apache Ambari, RabbitMQ, Java, Scala, YarnApplication, Teradata, Sqoop, Kudu, Hue, Hive, Impala, Dataiku, Flink, Kafka, Spark, Kibana, Oozie, Git, GitLabCI, Jenkins, AWS.


Communauté Data Valeuriad

Vous ferez partie d’une communauté de +30 passionnés : Data ingénieurs, Data scientists, Data Analysts, MLOps...

Une communauté de mentors interne :

* Suivis techniques, entretiens, réponses à appels d’offres ;
* Apéro tech : mini-conf en format apéro ;
* Printemps de la tech : notre DevFest interne ;
* Veille collective sur Slack.


Qui sommes-nous ?

* Une équipe de 180 Valeurieux, où vous connaîtrez (presque) tout le monde ;
* 3 offres de service : DevOps, Data-IA, Conseil Agile ;
* Nos valeurs : Engagement, Collaboratif, Partage, Authenticité ;
* Environnement de travail : espace éco-rénové, bureaux ergonomiques, salle de détente, boissons et gourmandises ;
* Organisation collaborative : innovation, rôles, comités (RSE, technique, mécénat) ;
* Engagement RSE fort ;
* Suivi de carrière personnalisé, avec référents RH, Commerce, Technique ;
* Événements tout au long de l’année : séminaire, Noël, afterworks, etc.

Intéressé ? Nous serions ravis d’en discuter plus concrètement, y compris sur le plan technique.

#J-18808-Ljbffr