Dans le cadre du développement de notre plateforme data Supply Chain, nous recherchons un(e) Data Engineer Junior pour participer à la conception, l’industrialisation et l’exploitation des flux de données sur Google Cloud Platform (GCP).
Vous serez amené(e) à :
Concevoir, développer et optimiser des pipelines ELT/ETL.
Construire et maintenir des traitements de données avec BigQuery, Dataflow, Cloud Composer (Airflow) et Cloud Storage.
Modéliser et maintenir les différentes couches de données destinées à l’analyse et au reporting.
Mettre en place des contrôles de qualité des données, des mécanismes de surveillance et des alertes.
Assurer l’orchestration, la planification et le suivi des pipelines en production.
Diagnostiquer et résoudre les incidents liés aux traitements de données.
Collaborer avec les équipes métiers et analytiques afin de traduire leurs besoins en jeux de données fiables et exploitables.
Participer à l’amélioration continue des pratiques de développement, de tests et de documentation.
Contribuer à la mise en œuvre des bonnes pratiques de sécurité, de gouvernance et de gestion des accès (IAM) dans l’environnement GCP.
ELT / ETL
Google BigQuery
Google Dataflow
Cloud Composer / Apache Airflow
Cloud Storage
Modélisation de données
Qualité des données (Data Quality)
Monitoring et alerting
Orchestration et planification des traitements
Gestion des incidents de production
CI/CD
Gestion de versions (Git)
Tests et documentation
Sécurité GCP
IAM (Identity & Access Management)
Gouvernance des données
Diplômé(e) d’une formation supérieure en informatique, data, ingénierie ou équivalent.
Première expérience en Data Engineering acquise lors d’un stage, d’une alternance ou d’un premier poste.
Connaissances des concepts ELT/ETL et intérêt pour la construction et l’optimisation de pipelines de données.
Familiarité avec l’écosystème Google Cloud Platform (GCP), notamment BigQuery, Dataflow, Cloud Composer/Airflow et Cloud Storage.
Notions de modélisation de données et de conception de jeux de données destinés à l’analyse et au reporting.
Sensibilité aux problématiques de qualité des données, de monitoring et d’alerting.
Compréhension des principes d’orchestration et de planification des traitements de données.
Capacité à analyser et résoudre des incidents simples en environnement de production avec l’accompagnement de l’équipe.
Aptitude à collaborer avec des équipes techniques, analytiques et métiers pour comprendre et traduire les besoins en données.
Connaissances des bonnes pratiques de développement : contrôle de version (Git), tests, documentation et principes CI/CD.
Notions de sécurité, de gouvernance des données et de gestion des accès (IAM) dans un environnement cloud.
Curiosité, rigueur, esprit d’équipe et volonté d’apprendre dans un environnement data moderne.
Comet, the agile talent ecosystem. We match our pool of over 50000 motivated and available, qualified and active tech freelancers, with company missions. Our goal is to satisfy both sides: relevant and prompt skills for companies, security and inspiring projects for freelancers. Comet’s freelance talent community comes highly motivated, because they choose the projects on which they work. We screen and evaluate the best tech and data talents to build an elite community. Powered by AI in order to intelligently detect, qualify and match a contingent workforce with corporate projects, to enhance and simplify user experience. With clients such as L’Oréal, Les Mousquetaires, Allianz, Pernod Ricard, Total -a client base that makes up 35% of the CAC40, we're the agile workforce for the digital age. To confront today's digitally-disrupted global marketplace and cater to the hyper-connected consumer of tomorrow, true agility is required. Technology alone is not enough, it is through the human that real transformation can be sustained. The technology is available and the consumer is ready. Comet provides the missing part: the people. We are 50+ in the team today, and are looking for amazing talents to join us! Our headquarters is in the hearts of Paris, Lyon, Lille and Nantes.