🎯 Vos missions
En tant que Data Engineer Senior, vous serez l’architecte des flux de données avancés, avec un focus sur les environnements Microsoft Azure, Dataiku, et les solutions LLM/RAG. Vos missions incluront :
Conception & Développement de Pipelines
- Développer et industrialiser des pipelines ETL/ELT complexes en Python et SQL, intégrant des technologies modernes comme LLM/RAG.
- Assurer la migration et l’intégration de données depuis des systèmes legacy vers des écosystèmes cloud, avec une expertise sur Microsoft Azure.
Infrastructure & Architecture Cloud
- Mettre en œuvre et optimiser des solutions sur Microsoft Azure, en collaboration avec des outils comme Dataiku pour l’industrialisation des flux.
- Automatiser le provisionnement des ressources (Infrastructure as Code) avec Terraform ou des outils équivalents.
Optimisation & Qualité
- Optimiser la performance des requêtes et les coûts de stockage/calcul sur le Cloud, en particulier sur Microsoft Azure.
- Mettre en place des tests automatisés et assurer le monitoring des flux de données, avec une attention particulière aux architectures LLM/RAG.
Collaboration Agile
- Travailler en étroite collaboration avec les Data Scientists, Data Analysts et Product Owners pour industrialiser des solutions data-driven.
- Participer activement à la culture DevOps et aux bonnes pratiques de software engineering.