Ingénieur Support / Exploitation (Spark, Airflow sur Kubernetes)Objectif :
Renforcer l’équipe en charge du maintien en condition opérationnelle du DATAHUB en assurant un support de niveau 2-3 et l’optimisation des environnements critiques.
Missions :
Assurer le support N2/N3 en production sur Spark, Airflow et Starburst (sur Kubernetes)
Participer à la gestion et résolution d’incidents, analyse des root causes.
Optimiser les traitements Spark sur Kubernetes (tuning, configuration, dimensionnement).
Améliorer l’orchestration Airflow et la gestion des catalogues Starburst.
Contribuer à la documentation et l’amélioration continue des procédures d’exploitation.
Accompagner les équipes métiers dans l’usage sécurisé et performant des plateformes.
Compétences prioritaires :
Support de production : expérience en environnements data distribués, gestion d’incidents, analyse de root causes...
Kubernetes (ou AKS, IKS...)
Spark et / ou Airflow sur Kubernetes (installation, tuning, dimensionnement, troubleshooting, gestion d’incidents N2/N3).
Compétences appréciées :
Starburst (Trino)
CI/CD : Git, Jenkins, GitLab CI
Scripting : Python, Bash, Ansible
HashiCorp Vault & PKI
LOMEGARD est une société de conseil spécialisée dans les métiers de l’IT qui propose trois offres transverses : PROJECT, SOFTWARE et INFRASTRUCTURE.
Nous accompagnons nos clients dans leurs projets de transformation digitale et d’innovations en créant un environnement de travail plus respectueux pour la planète.
Visitez notre site pour en savoir plus.
LOMEGARD est une société de conseil spécialisée dans les métiers de l’IT qui propose trois offres transverses : PROJECT, SOFTWARE et INFRASTRUCTURE. Nous accompagnons nos clients dans leurs projets de transformation digitale et d’innovations en créant un environnement de travail plus respectueux pour la planète. Visitez notre site pour en savoir plus.