Référent technique informatique dwh ci/cd, datalab (it) / freelance

Bonjour,

Je suis à la recherche pour un de nos clients d'un Référent technique DWH CI/CD, Datalab.

? Participer à la mise en ?uvre de nouvelles capacités techniques. ? Faire évoluer les capacités existantes. ? Créer des composants génériques facilitant le travail des développeurs data. Impliquant l?utilisation et l?évolution du socle CI/CD (Gitlab/Jenkins/Jfrog Artifactory). ? Assurer la définition des bonnes pratiques (ie règles d?industrialisation) et de leur formalisation. ? Accompagner les équipes des Business Units (IT local) lors des phases de cadrage et de Build. ? Assurer le support de niveau 3 sur les composants en responsabilité et sur le framework PaaS. ? Suivi et maintien du socle API (cluster Kubernetes) ? Anticiper les améliorations et migrations vers de nouveaux socles technologiques (Snowflake/AWS).

? Être le référent technique sur plusieurs applicatifs et composantes sur socles IT (DWH, CI/CD, Datalab, APIs?) en relation avec les streams Leaders et l?architecte Design Authority. ? Apporter le support nécessaire aux entités dans leur utilisation accompagnement sur Talend/Java et sur l'amélioration de la performance de leur JOB ainsi que sur les bases de données (Snowflake, Oracle, Vertica). Impliquant le suivi de migrations, l?amélioration des processus, l?administration de la TMC et l?entretien du lien avec l?éditeur et le support. ? Développer les nouveaux composants (Talend,DBT, Java, Shell, Oracle, Vertica, Snowflake, Jupyter, Python) afin d'alléger le travail des entités dans la Data Factory et permettre aux entités de se focaliser sur leur business. ? Assurer le RUN (niveau 3) de l'infrastructure en utilisant les composants CA-GIP pour debugger les applicatifs et pour apporter des solutions efficientes (ElasticSearch, Logstash, Kibana,Grafana). ? Evaluer et valider les estimations de l?infogérant et des sous-traitants. ? Accompagner et superviser les missions confiées aux sous-traitants. ? Analyse, conception et mise en place d?un monitoring centralisé des flux Datawarehouse

? Connaissances techniques : - Expérimenté(e) sur la mise en place des flux d?ingestion des données (ETL et ELT, Talend, DBT, Snowpipe) - Maitrise des outils de DevOps et des langages de programmation (Java, Spark, ELK, Kubernetes, Gitlab, Jenkins, Spring Framework, Unix, Shell, Python) - Connaissance bases de données relationnelles et non relationnelles (Snowflake, Oracle, Vertica) - Connaissance ou experimentation de Snowflake (Snowpipe, Virtual warehouse, Stage, Time-Travel, SnowPark). - Notions des outils d?explorations de données mis à disposition sur le Datalake/Datalab (SAS, Qliksense, Dataiku, Jupyter). - Technologies complémentaires : Active Directory, SSO, AWS s3, AWS Bedrock, wso2, Jfrog Artifactory, Docker, MLflow, Airflow, Terraform.



Profil candidat:
? Connaissances techniques : - Expérimenté(e) sur la mise en place des flux d?ingestion des données (ETL et ELT, Talend, DBT, Snowpipe) - Maitrise des outils de DevOps et des langages de programmation (Java, Spark, ELK, Kubernetes, Gitlab, Jenkins, Spring Framework, Unix, Shell, Python) - Connaissance bases de données relationnelles et non relationnelles (Snowflake, Oracle, Vertica) - Connaissance ou experimentation de Snowflake (Snowpipe, Virtual warehouse, Stage, Time-Travel, SnowPark). - Notions des outils d?explorations de données mis à disposition sur le Datalake/Datalab (SAS, Qliksense, Dataiku, Jupyter). - Technologies complémentaires : Active Directory, SSO, AWS s3, AWS Bedrock, wso2, Jfrog Artifactory, Docker, MLflow, Airflow, Terraform.