Ingénieur de données GCP (H/F)Au sein de l'équipe Silver, la prestation se déroulera en collaboration avec les autres équipes de la Data, au cœur de la plateforme Data. Cette équipe est composée d'un productowner, d'un data steward et d'un data ingénieur. Notre technique de stack est principalement constituée de Python, Spark, SQL, dbt, BigQuery, Airflow pour l'orchestration des traitements et Terraform ainsi que Terragrunt pour l'industrialisation.
Le stack inclut également d'autres services de la Google Cloud Platform.
En interaction avec les membres de l'équipe, la prestation consiste à :
• Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l'équipe
• Construire et maintenir des pipelines de données robustes et évolutifs
• Accompagner les membres de l'équipe dans l'exploitation et le requêtage des données
• Organiser et structurer le stockage des données
• Mettre en place et maintenir des infrastructures évolutives capables de répondre aux besoins et à l'évolution rapide du volume de données
• Participer aux initiatives de gouvernance des données en assurant la qualité, la fiabilité et l'intégrité des données
• Construire et maintenir les workflows de la CI/CD
• Partager avec les autres data ingénieurs pour appliquer les bonnes pratiques en vigueur
• Assurer l'évolutivité, la fiabilité, la stabilité des environnements
• Participer aux différentes instances des data ingénieurs
• Contribuer et veiller à la mise à jour de la documentation
• Faire de la veille technologique active dans le domaine Livrables attendus :
1. Déployer les datasets normés sur un ou plusieurs des data domain suivants : Utilisateurs, Comportements et Référentiels
2. Accompagner les utilisateurs dans leurs usages
3. Mettre en place le contrôle qualité sur ces datasets Expertises demandées pour la réalisation de la prestation.
Au moins 3 ans d'expérience en tant que Data Ingénieur dans un environnement data
• Compétences solides en data : structures de données, code,architecture
• Expériences de réalisation dans la conception et la de pipelines data
• Expériences dans un environnement du cloud Google (GCP)
• Expériences intégrant BigQuery et Dataplex Universal Catalog
• Expériences intégrant les langages Python et SQL
• Expériences intégrant Spark
• Expériences intégrant dbt
• Expériences intégrant Terraform et Terragrunt
• Expériences intégrant Gitlab et Gitlab CI/CD
• Expériences intégrant les méthodologies Agile : Scrum ou Kanban
• Capacité à vulgariser et à communiquer sur des aspects purement techniques
NoneSmartpoint est une société de conseil et de services numériques, pure player Data depuis 2006. Nos compétences reconnues dans ce domaine nous permettent d’être « Preferred Vendor » auprès d’entreprises prestigieuses. Nous sommes en effet référencés parmi les plus grands comptes français dans les domaines de la banque, de l’énergie, des médias, des télécoms ou encore de la grande distribution. Nous rejoindre c'est intégrer une équipe de plus de 300 consultants et experts animée par une vision commune : Une utilisation éthique des données, moins énergivore et conforme dès la conception (RGPD) ; Une approche Smart Data pour lutter contre le Data Swamp, (ces entrepôts de données qui stockent des données inutiles) et permettre une exploitation des données plus durable ; Une méthode de développement agile et des pratiques XOps (DataOps, MLOps, PlatformOps) pour une stack technologique automatisée, qui réduit les process et les technologies utilisées et accélère le time-to-market.