Administrateur Infrastructure / maintenance et évolution de la plateforme IA

Description du poste

Contexte

Dans le cadre de sa prestation, l'intervenant externe évoluera au sein de la direction de la Data d'une institution financière majeure, au sein d'une équipe AI Delivery. AI Delivery accompagne les métiers et les pays dans leurs projets de data science et analyse, depuis la génération de use case jusqu'à la mise en production.

Notre équipe, dynamique et internationale, au profil « start-up » intégrée à un grand groupe, rassemble des profils de data scientist (computer vision, NLP, scoring), un pôle ML engineering capable d'accompagner les DataScientists lors de l'industrialisation des modèles développés (jusqu'à la mise en production) ainsi qu'une équipe AI Projects.

AI Delivery met aussi à disposition des lignes de métiers la plateforme de Datascience « Sparrow », qui comporte :

• Une plateforme d'exploration et de développement Python, Sparrow Studio, développée in-house par une équipe dédiée.

• Un framework d'industrialisation des modèles de Datascience, Sparrow Flow, ainsi qu'une librairie InnerSource facilitant les développements des Data Scientist.

• Une plateforme d'exécution des modèles de Datascience, Sparrow Serving.

• Un outil de Community Management, Sparrow Academy.

L'équipe, composée de MLOps engineers, de back et front end engineers a pour principale mission d'être garante de la qualité des livrables de l'ensemble de la direction, de les déployer sur le cloud privé du Groupe et enfin d'assurer la haute disponibilité de l'ensemble de nos assets.

Cette équipe conçoit, développe et maintient des plateformes et des frameworks de data science. Nous faisons appel à une prestation en assistance technique pour assurer l'évolution et la haute disponibilité de l'ensemble de nos assets.

• Administration/Exploitation/Automatisation système d'exploitation de nos clusters

• Build et optimisation d'images Docker + RUN de nos 400 containers de production (>500 utilisateurs)

• Construire, porter la vision technique de la plateforme et piloter les choix technologiques et d'évolution de l'architecture

• Faire de la veille et se former aux technologies les plus pertinentes pour notre plateforme de data science afin de continuer à innover

• Rédaction de documents techniques (architecture, gestion des changes et incidents)

• Production de livrables de qualité et partage des connaissances à l'équipe

• Participer à la maintenance/l'évolution des frameworks de data science existants (Python)

• Participer à la maintenance/l'évolution des pipelines de CI/CD (Gitlab CI, GitOps)

• Participer à la maintenance/l'évolution de l'Observabilité des plateformes (logging, monitoring, traçabilité)

• Participer à la mise en production des outils et des solutions IA déployées sur la plateforme

• Être force de proposition et participer aux POCs

Infrastructure / DevOps :

• GitLabCI/CD

• GitOps (ArgoCD)

• Cloud privé

Containers :

• Docker

• Kubernetes

Langages :

• Python

• Golang

• Bash

Observabilité :

• Prometheus

• Thanos

• AlertManager

• Grafana

Sécurité :

• Vault

DevOps tooling :

• Docker

• Buildkit

• Gitlab

• GitlabCI

• Artifactory

• ArgoCD

• Helm

• Kustomize

• CUE/Timoni

Cloud services :

• Certmanager

• Redis

• Jaeger

• ELK

• MinIO

• PostgreSQL

• ClickHouse

• External-DNS

Système d'exploitation :

• GNU/Linux

Compétences requises :

• Compétences avancées sur Kubernetes (Architecture, Administration de Clusters)

• Bonnes compétences réseau : reverse proxy (Traefik), authentification (Keycloak, JWT, OIDC)

• Bonnes connaissances de GitLab et des processus de CI/CD

• Connaissances de l'approche GitOps (ArgoCD)

• Compétences sur l'observabilité dans un contexte Kubernetes (Prometheus, AlertManager, Grafana)

• Connaissances sur la gestion des secrets (Vault)

• Anglais correct à l'écrit et à l'oral

• Profil rigoureux

Compétences appréciées :

• Connaissances en bases de données relationnelles (PostgreSQL)

VISIAN est une société de conseil spécialisée autour de l'innovation, la conception produit, le développement et la data.

Dans le cadre de nos projets clients, nous recherchons un Administrateur Infrastructure / maintenance et évolution de la plateforme IA