Data engineer big data python / aws (it)

Bonjour,



Dans le cadre du renforcement d?une équipe data en charge du traitement de données à grande échelle, nous recherchons un Data Engineer Python / AWS / Docker.
Le consultant interviendra sur des projets de construction et de déploiement de pipelines data robustes, dans une architecture orientée microservices et cloud-native.

Concevoir, développer et maintenir des pipelines de données performants en Python


Gérer l?ingestion, le nettoyage, la transformation et l?exposition de données issues de sources multiples (API, fichiers, S3, RDS?)


Déployer et monitorer des applications conteneurisées avec Docker, en environnement cloud


Participer à l'automatisation et l'industrialisation des traitements (CI/CD, tests, monitoring)


Collaborer étroitement avec les équipes Data Science, DevOps et Produit


Contribuer à la documentation technique et à la définition des bonnes pratiques





Langage : Python (Pandas, Pytest, Pydantic, etc.)


Cloud : AWS (S3, Lambda, Glue, RDS, ECS, Step Functions, Athena?)


Conteneurisation : Docker (build, optimisation, orchestration via ECS ou Kubernetes)


Workflow orchestration : Airflow, Step Functions (atout)


CI/CD : GitLab CI, AWS CodePipeline, Terraform (atout)


Stockage : S3, PostgreSQL, DynamoDB


Monitoring / Logs : CloudWatch, Prometheus, Grafana









Profil candidat:
3 ans d?expérience minimum en Data Engineering avec Python


Maîtrise des services AWS orientés data


Très bonne connaissance de Docker et de l?écosystème DevOps


Capacité à structurer, documenter et optimiser les pipelines


Expérience dans un environnement agile et collaboratif


Force de proposition, autonome, rigoureux et orienté delivery