Un data engineer (spark - spark streaming et batch,git, jenkins, artifactory) sur vannes (it) / freelance

Smarteo recherche pour l'un de ses clients, Un Data Engineer (Spark - spark streaming et batch,GIT, Jenkins, Artifactory) sur Vannes



Description:



Tâches :

- Participer à la définition de l'architecture Data (en lien avec les architectes et la Squad)

- Concevoir, Affiner et Développer les solutions de collecte et de stockage des données (provenant de multiples sources) afin de le rendre disponibles pour les usages métiers

- Mettre en oeuvre les tests unitaires et automatisés

- Déployer le produit dans les différents environnements

- Garantir le bon fonctionnement du produit en production et assurer le suivi / l'assistance / la gestion des incidents

- Accompagner l'évolution des pratiques de l?équipe dans une logique d'amélioration continue de la qualité du code



Compétences techniques :

Spark - spark streaming et batch (requis),

- Kafka (apprécié)

- java (apprécié)

- shell (apprécié)

-Stack Hadoop Cloudera

- Base de données : (type Hdfs, Hive, Hbase, Phoenix, MongoDB)

- DEVOPS : GIT, Jenkins, Artifactory, XL Release, ELK, Grafana

Apprécié :

- BDD Teradata,

- xDI,

- SQL

- Data viz : Microstrategy



Modalités :

- 3 jours sur site de Vannes / 2 jours de TT



Si vous êtes disponible et intéressé, merci de me faire parvenir votre TJM ainsi que votre CV à jours en format word.



Profil candidat:
Compétences techniques :

Spark - spark streaming et batch (requis),

- Kafka (apprécié)

- java (apprécié)

- shell (apprécié)

-Stack Hadoop Cloudera

- Base de données : (type Hdfs, Hive, Hbase, Phoenix, MongoDB)

- DEVOPS : GIT, Jenkins, Artifactory, XL Release, ELK, Grafana

Apprécié :

- BDD Teradata,

- xDI,

- SQL

- Data viz : Microstrategy