Data Engineer at consulting firm Ekkiden, embedded on Canal+'s content catalog: building reliable, scalable Spark pipelines and Apache Iceberg tables on Amazon S3, with data-quality controls, monitoring, and resilient replay/backfill handling, in an Agile team.
En tant que Data Engineer, vous intégrerez une équipe pluridisciplinaire composée de développeurs, de DevOps, de Scrum Masters et de Product Owners, travaillant en méthodologie Agile.
Responsabilités
Fiabiliser et industrialiser les flux de données du catalogue de contenus : métadonnées éditoriales, programmes, saisons, droits et disponibilités.
Construire des pipelines performants, rejouables et scalables pour fournir des données fraîches et cohérentes aux produits Canal+.
Concevoir, développer et maintenir des pipelines de traitement de données avec Apache Spark.
Modéliser et faire évoluer les tables Apache Iceberg sur Amazon S3, en veillant à la performance, à l’évolutivité et à la gouvernance des données.
Mettre en place des contrôles de qualité : complétude, unicité, fraîcheur, cohérence et traçabilité des données du catalogue.
Construire un système résilient : traitements idempotents, reprise sur erreur, retries maîtrisés, gestion des données en retard, rejouabilité et backfill.
Déployer un monitoring opérationnel avec métriques, logs structurés, dashboards et alertes utiles sur les erreurs, les volumes, la fraîcheur et les temps de traitement.
Participer aux phases de développement et de tests : unitaires, intégration, qualité des données, performance et montée en charge.
Documenter les pipelines, les modèles de données, les procédures d’exploitation et les décisions techniques.
Ce Que Nous Recherchons
De formation supérieure en informatique, en data ou en ingénierie, avec une première expérience en Data Engineering.
Bonne maîtrise de Spark et de SQL ; une expérience en Python ou Scala est appréciée.
Connaissance des architectures data sur AWS, du stockage objet S3 et des formats ou tables analytiques comme Iceberg.
Sensibilité forte à la qualité des données, à la résilience, à l’observabilité et à l’amélioration continue.
Esprit d’équipe, autonomie, curiosité et envie de contribuer à des produits utilisés par les abonnés Canal+.
Ce Que Nous Proposons
Nous rejoindre au bon moment pour faire ta place au sein d'une organisation en très forte croissance
Des missions variées dans un environnement challengeant qui te permettront d'avoir un réel impact sur la boite
La possibilité de travailler de façon autonome et d'être force de proposition pour grandir ensemble
Un parcours de carrière adapté à ta personnalité, aussi bien au niveau du rôle que de la localité
Une formation exigeante en continu pour libérer tout ton potentiel
Une culture de la performance avec de belles primes de résultats
Une mutuelle très complète (la GEREP) et des titres-restaurant (carte Swile)