Data Engineer Azure Data Factory - CosmosDB Vos missions
En tant que Data Engineer, vous serez amené(e) à :
Concevoir, développer et maintenir des pipelines d’intégration de données sous Azure Data Factory
Assurer la gestion complète des flux de données : ingestion, transformation, normalisation et mise à disposition pour les différents services du SI
Réaliser des transformations et agrégations complexes en SQL, dans une logique de qualité, de performance et d’industrialisation
Collaborer étroitement avec les équipes métiers afin de comprendre leurs besoins et proposer des solutions techniques adaptées intégrées au Datahub
Contribuer à l’amélioration continue des processus Data : automatisation, fiabilisation, optimisation et bonnes pratiques
Participer à la fiabilité et à la qualité du code et des déploiements dans un environnement industrialisé
Cloud : Azure (hébergement, stockage, orchestration)
Data : Azure Data Factory
Bases de données : Azure SQL, Cosmos DB
Langages : SQL (avancé), Python (Azure Functions)
Infrastructure : Terraform (Infrastructure as Code)
Qualité & sécurité : SonarCloud, Snyk
CI/CD & DevOps : Azure DevOps
Formation Bac+5 (école d’ingénieur, université ou équivalent) avec une spécialisation en informatique, data engineering ou technologies cloud
3 à 5 ans d’expérience minimum en tant que Data Engineer, idéalement dans un environnement Azure
Expérience confirmée dans :
La conception et l’industrialisation de pipelines de données
La manipulation et l’optimisation de données à grande échelle
Les environnements Cloud (Azure de préférence)
Excellente maîtrise de SQL (requêtes complexes, performances, agrégations)
Solide expérience sur Azure Data Factory
Bonne connaissance de l’écosystème Azure
Pratique de Python, notamment via des Azure Functions
Terraform est un plus pour la gestion d’infrastructures Cloud