Data Engineer Talend GCP (Python)Concevoir et développer des pipelines de données robustes et scalables en utilisant Talend et les services de Google Cloud Platform (BigQuery, DataForm, Dataflow, Pub/Sub, CloudComposer). Vous serez au cœur de la construction d’une infrastructure de données moderne et performante :
• Travaux sur le maintien des solutions au bon niveau technologique
• Travaux sur la compliance réglementaire des assets
• Améliorer la performance et la scalabilité des solutions existantes pour répondre aux besoins stratégiques de l’entreprise.
• Collaborer étroitement avec les architectes, PO et Data Analyst pour garantir la qualité et l’exploitation optimale des données.
• Maintenir une documentation technique précise et complète sur les processus et les solutions implémentés.
• Réaliser la recette technique et participe à animer la recette fonctionnelle avec les utilisateurs et le PO
• Mettre en place et gérer des systèmes de monitoring et d’alerting pour assurer une supervision proactive des pipelines et systèmes de données, garantissant leur fiabilité et leur disponibilité.
• Support au déploiement
• Assurer la maintenance corrective ou évolutive
• S’assurer de la cohérence des livrables avec les règles et bonnes pratiques définies au sein de l’équipe
• Langages : Maîtrise de SQL et connaissance de langages comme Python ou Java pour les traitements de données.
• GCP : Expérience sur les outils BigQuery, Dataflow, DataForm, Pub/Sub, CoudComposer et d’autres services GCP liés aux données.
• Talend : expérience de développement de job DI en version Enterprise
• Connaissances et pratiques dans la conception et la gestion des workflows
• Outils : Familiarité avec des outils de CI/CD comme Git, Jenkins, ou Terraform (serait un plus).
• Esprit analytique et rigueur.
• Capacité à gérer des priorités multiples dans un environnement dynamique.
• Capacité à travailler en équipe et à collaborer avec des parties prenantes variées.
• Autonomie et force de proposition sur les solutions techniques.
• Bonne communication et pédagogie pour expliquer les concepts techniques aux non-spécialistes.
• Capacité à comprendre les besoins pour proposer aux métiers les solutions leur permettant d’utiliser efficacement les données et de prendre les bonnes décisions.