Développeur python et java sur aws (glue & lambda ) (h/f)

Espace-Freelance, réseau de consultants indépendants, recherche pour l’un de ses clients directs : Un Développeur Python et Java sur AWS (Glue & Lambda ) (H/F) dans le sud de l’essonne ().

Votre mission :
Missions Principales :
1. Conception et Développement d’ETL :
o Développer et optimiser des workflows ETL sur AWS Glue en Python.
o Implémenter des fonctions serverless sur AWS Lambda en Python ou Java pour traiter les données en temps réel.
o Gérer le stockage des données via S3, DynamoDB et Redshift.

2. Optimisation des Performances :
o Assurer la performance et la scalabilité des pipelines de données.
o Mettre en place des stratégies d’optimisation pour minimiser les coûts et améliorer la latence.
o Concevoir des modèles de données adaptés aux traitements analytiques et transactionnels.

3. Sécurité et Qualité des Données :
o Implémenter des contrôles de qualité et de validation des données.
o Mettre en place des stratégies de monitoring et logging (selon les directives des équipes Cloud et Sécurité du groupe).

4. Intégration et Automatisation :
o Intégrer les pipelines ETL aux différentes sources et destinations de données (API, bases de données, entrepôts de données).
o Automatiser les déploiements et tests via des pipelines Gitlab CI/CD sur AWS via Terraform
o Collaborer avec les équipes DevOps et Data pour l’amélioration continue des processus.

Votre profil:
Titulaire d’un Bac+5 en informatique, data engineering ou équivalent, vous avez une excellente maîtrise de Python et Java avec une expérience significative (de 3 à 5 ans) avec AWS Glue et AWS Lambda pour l’ETL et le traitement serverless.

Vous avez une bonne connaissance des bases de données SQL et NoSQL (PostgreSQL, DynamoDB, Redshift) et de Magento (Adobe) ainsi qu’une compréhension des architectures orientées événements (EventBridge, SQS, SNS, Kinesis).

Une expérience avec Terraform et CloudFormation pour l’infrastructure as code est nécessaire pour cette mission, avec de l’automatisation et CI/CD sur AWS avec GitLab CI/CD ou AWS CodePipeline, et du Monitoring et Debugging sur AWS (CloudWatch, X-Ray, Step Functions).

Des certifications AWS (AWS Certified Developer, Data Analytics, Solutions Architect) et une connaissance DevOps sont appréciées.

Localisation :
La mission se déroule sur Longpont sur orge (), avec une présence sur site obligatoire d’au moins 3 jours par semaine, le site n’est pas accessible en transports en commun.