Data Engineer Big Data – Datalake Hadoop / Spark (on-premise)Dans un contexte Data & BI à forts enjeux, vous intervenez au sein d’une équipe Big Data & API, rattachée à une squad Financing & Risk, en charge du développement et de l’exploitation d’un datalake utilisé comme plateforme data centrale par les équipes IT et métiers.
En tant que Data Engineer, vous jouez un rôle clé dans la gestion, l’évolution et la fiabilité de cette plateforme.
Vos principales missions sont les suivantes :
Assurer la gestion de la production du datalake (suivi, incidents, stabilité des traitements)
Prendre en charge la dette technique et contribuer à l’amélioration continue de la plateforme
Analyser l’architecture existante et proposer des évolutions techniques pertinentes
Réaliser les développements Big Data liés aux projets en cours et à venir
Participer à l’industrialisation et aux déploiements via les chaînes CI/CD
Vous évoluez dans un environnement technique Big Data on-premise, au sein d’une équipe travaillant en interaction avec des équipes IT et métiers, sur des sujets à forte valeur ajoutée.
CompétencesExpérience confirmée en Data Engineering / Big Data
Maîtrise de Spark et PySpark
Bon niveau en Scala
Solide expérience sur Hadoop on-premise
Utilisation de Hive et SQL / HQL
Pratique des environnements Unix/Linux et du Bash
Expérience des outils CI/CD (Jenkins, pipelines)
Connaissance de XLDeploy / XLRelease
Utilisation d’outils de suivi projet type Jira
Capacité à travailler sur de la production critique et à traiter de la dette technique
Créée en 1999, CAT-AMANIA fait partie des ESN dynamiques et innovantes qui s’appuie sur ses expertises métiers, techniques et méthodologiques pour accompagner ses clients dans leur transformation digitale. Aujourd’hui CAT-AMANIA c’est : 71 millions d’€ de chiffre d’affaires, 950 collaborateurs répartis sur 18 agences en France et à l’international. Construire ensemble pour mieux grandir Portée par ses valeurs de Joie, de Confiance, d’Audace, de Persévérance et de Respect, notre entreprise souhaite les partager avec vous dans la réussite de projets communs. Cat-Amania s'engage à assurer la diversité de ses équipes et à créer un environnement de travail inclusif. Nous accueillons toutes les candidatures sans distinction d'âge, de genre, d'origine, d'orientation sexuelle, de croyance religieuse ou de handicap.