Tech Lead Data Engineer - DatabricksLe data engineer/Tech Lead intègre une équipe en charge du lakehouse pour le client. De nombreuses challenges techniques sont attendus.
Focus sur ses activités :
-Contribue à la conception de outils de traitement BigData (Ingestion / Traitement / Analyse)
-Cadrage technique des besoins émis par les consommateurs de la plateforme Data
-Est garant de la mise en production des traitements au sein de la plateforme
-Optimisation du code et de la capacité des VMs mise en œuvre pour chaque traitement
-Garantit la disponibilité et l'outillage pour les équipes métier, ainsi qu'aux utilisateurs de la plateforme (data scientists / data analystes / data engineer)
connaissance cloud AWS
Avancé (5 ans < x <= 8 ans)
Databricks
Confirmé (3 ans < x <= 5 ans)
Développement sur techno big data
Avancé (5 ans < x <= 8 ans)
expérience projet mais aussi support et expertise
Avancé (5 ans < x <= 8 ans)
python + SQL + Spark
Avancé (5 ans < x <= 8 ans)
Python
Databricks
AWS
SQL
PYSPARK
Python Orienté Objet
-Est en relation avec les équipes infrastructure afin d'assurer le cadrage et le déploiement des solutions valides
-Support aux équipes consommatrices
-Analyse d'anomalie et proposition solution court / moyen terme
- Developpement de pipeline sous Databrick (Python / SQL / Spark)
-Est force de propositions techniques
VISIAN, filiale d'un grand groupe technologique de plus de 6500 personnes, est une société de conseil spécialisée dans l'innovation, la conception de produits et la data. Ses consultants technophiles allient compréhension des enjeux digitaux et vision produit. De la structuration des DSI à la conception de produits digitaux en passant par la valorisation de la data, VISIAN concrétise les objectifs de ses clients en faisant converger ambition et faisabilité. Fondée par des consultants, VISIAN connait une croissance rapide pour atteindre 14 millions de CA cette année et renforce ses partenariats avec de nombreux clients grands-comptes sur Paris et Marseille.