Data Engineer Big Data🎯 Contexte
Au sein de la direction IT Data Management & BI, vous intégrez l’équipe Big Data & API / Squad Financing & Risk.
L’équipe développe et maintient un datalake, utilisé comme plateforme de données par les équipes IT et métiers (finance, risque).
En tant que Data Engineer, vous intervenez sur le datalake FinLake avec les responsabilités suivantes :
Assurer la gestion de la production (suivi des flux, incidents, performance)
Réduire et maîtriser la dette technique
Analyser l’architecture existante et proposer des évolutions
Réaliser les développements Big Data liés aux projets métiers
Participer aux déploiements et à l’industrialisation des traitements
Big Data : Spark, PySpark, Scala, Hadoop (on-premise)
Data & requêtage : Hive, SQL/HQL, Starburst, Indexima
Scripting : Unix / Bash
DevOps & industrialisation : Jenkins, CI/CD, XLDeploy, XLRelease
Outils projet : Jira
Expérience confirmée en Data Engineering / Big Data
Bonne maîtrise des environnements Hadoop on-premise
Capacité à intervenir à la fois en RUN et en BUILD
Autonomie, rigueur et esprit d’analyse
Bon relationnel avec les équipes IT et métiers
VISIAN est une société de conseil spécialisée autour de l'innovation, la conception de produits digitaux, le développement sur mesure et la valorisation de la data, accompagnant ses clients dans la transformation de leurs idées en solutions concrètes.
VISIAN, filiale d'un grand groupe technologique de plus de 6500 personnes, est une société de conseil spécialisée dans l'innovation, la conception de produits et la data. Ses consultants technophiles allient compréhension des enjeux digitaux et vision produit. De la structuration des DSI à la conception de produits digitaux en passant par la valorisation de la data, VISIAN concrétise les objectifs de ses clients en faisant converger ambition et faisabilité. Fondée par des consultants, VISIAN connait une croissance rapide pour atteindre 14 millions de CA cette année et renforce ses partenariats avec de nombreux clients grands-comptes sur Paris et Marseille.