Data engineer - freelance

Description du poste Taux journalier (TJM): 450-500 Important Pré-requis : Nationalité française Remote : 2 à 3 jour par semaine Localisation : Paris centre Bonus Expérience dans le secteur public Connaissance RGAA / DSFR Besoin Un Data engineer pour rejoindre une équipe sur un projet client Équipe 1 PO, 1 Data Archi, 1 TL, 1 Data Eng, 1 Dev Applications - 10 applications utilisateurs - 30 indicateurs - 15 flux de données - 31 pipelines de transformation de données Compétences - Hadoop Cloudera - Workflow / injection - Outils de visualisation - Pipeline Liste détaillée Les outils d'ingestion de données : NiFi Les outils de stockage de données : HDFS, CEPH Les outils d'ordonnancement des jobs : Airflow Les outils de gestion des ressources (CPU, RAM) : YARN Les moteurs et frameworks d'exécution : MapReduce, Spark, TEZ Les langages de développement : Python, Scala Les outils de prototypage/exploration : Jupyter, Dataiku Les outils orientés datamart : Hive, PostgreSQL Les outils de proxyfication (Access) : Knox, HAProxy Les outils d'affichage d'indicateurs et tableaux de bord : Grafana, Tableau, Superset, S7 Les outils de sécurité : Kerberos, LDAP, FreeIPA Les outils d'administration et de gouvernance : ClouderaManager, Ranger Les outils de supervision et d'exploitation (DevOps) : Prometheus, Puppet, Heat, Ansible Les dépôts de binaires : Mirroring des dépôts issus du web HTTP pour les applications tierces. Profil recherché Data Eng : Compétences : - Hadoop Cloudera - Workflow / injection - Outils de visualisation - Pipeline