Développeur python et java sur aws (glue & lambda ) (h/f)

Espace-Freelance, réseau de consultants indépendants, recherche pour l’un de ses clients : un Développeur Python et Java sur AWS (Glue & Lambda) (H/F) dans le sud de l’Essonne (91).

Votre mission :


Missions Principales :

1. Conception et Développement d’ETL :
o Développer et optimiser des workflows ETL sur AWS Glue en Python.
o Implémenter des fonctions serverless sur AWS Lambda en Python ou Java pour traiter les données en temps réel.
o Gérer le stockage des données via S3, DynamoDB et Redshift.
2. Optimisation des Performances :
o Assurer la performance et la scalabilité des pipelines de données.
o Mettre en place des stratégies d’optimisation pour minimiser les coûts et améliorer la latence.
o Concevoir des modèles de données adaptés aux traitements analytiques et transactionnels.
3. Sécurité et Qualité des Données :
o Implémenter des contrôles de qualité et de validation des données.
o Mettre en place des stratégies de monitoring et logging (selon les directives des équipes Cloud et Sécurité du groupe).
4. Intégration et Automatisation :
o Intégrer les pipelines ETL aux différentes sources et destinations de données (API, bases de données, entrepôts de données).
o Automatiser les déploiements et tests via des pipelines Gitlab CI/CD sur AWS via Terraform.
o Collaborer avec les équipes DevOps et Data pour l’amélioration continue des processus.

Votre profil :

* Titulaire d’un Bac+5 en informatique, data engineering ou équivalent.
* Excellente maîtrise de Python et Java avec une expérience de 3 à 5 ans avec AWS Glue et AWS Lambda.
* Bonne connaissance des bases de données SQL et NoSQL (PostgreSQL, DynamoDB, Redshift).
* Connaissance de Magento (Adobe) et compréhension des architectures orientées événements (EventBridge, SQS, SNS, Kinesis).
* Expérience avec Terraform et CloudFormation pour l’infrastructure as code.
* Expérience en automatisation et CI/CD sur AWS avec GitLab CI/CD ou AWS CodePipeline.
* Compétences en Monitoring et Debugging sur AWS (CloudWatch, X-Ray, Step Functions).

Les certifications AWS (AWS Certified Developer, Data Analytics, Solutions Architect) et une connaissance en DevOps sont appréciées.

Localisation :

La mission se déroule à Longpont-sur-Orge (91), avec une présence obligatoire sur site d’au moins 3 jours par semaine. Le site n’est pas accessible en transports en commun.

#J-18808-Ljbffr