Tech Lead Databricks

Description du poste

Contexte

Une équipe centralisée gère la plateforme mais de nombreuses équipes (Feature Team organisées par domaine de données) travaillent sur la Data Platform. Toutes les équipes fonctionnent en mode agile.

Un Tech Lead est recherché pour une Feature Team du client. La maîtrise de l'outil DATABRICKS est un prérequis.

• Conception, développement et maintenance des pipelines de données

• Cadrage technique

• Garant de la mise en production des traitements au sein de la plateforme

• Optimisation du code pour chaque traitement, maîtrise de l'usage Databricks au regard des coûts

• Maîtrise de l'architecture médaillon de Databricks, des problématiques de qualité de données, du DevOps

• Développement sous Databricks (Python / SQL / Spark)

• Force de propositions techniques

• Capacité à encadrer / coacher des data engineers juniors, challenger la solution et assurer un rôle de tech lead dans l'équipe

1. Maitrise de l'outil DATABRICKS

2. Maitrise de l'architecture médaillon de Databricks

3. Compétences en Python, SQL et Spark pour le développement sous Databricks

4. Expérience en conception, développement et maintenance des pipelines de données

5. Capacité à encadrer / coacher des data engineers juniors

6. Compétences en DevOps

7. Connaissance des problématiques de qualité de données

8. Force de proposition technique

9. Capacité à challenger la solution et assurer un rôle de tech lead dans l'équipe

anglais de bon niveau - Senior (8 ans < x <= 10 ans)

Connaissance Cloud AWS - Confirmé (3 ans < x <= 5 ans)

Experience Data Engineer sur pipeline données - Senior (8 ans < x <= 10 ans)

Experience Tech lead - Confirmé (3 ans < x <= 5 ans)

Maitrise Databricks - Confirmé (3 ans < x <= 5 ans)

Python + SQL + Spark - Senior (8 ans < x <= 10 ans)