Nous recherchons un(e) Senior Data Engineer pour rejoindre le département Data Solutions et BI, et intervenir sur une plateforme internationale principalement basée sur AWS, couvrant le stockage, le traitement, l’orchestration, la Business Intelligence et l’analytique.
Aumente sus posibilidades de llegar a la fase de entrevista leyendo la descripción completa del puesto y enviando su solicitud sin demora.
Localisation : Barcelone | Mode de travail : Hybride | Expérience : Plus de 5 ans | Langues : français courant ou bilingue et bon niveau d’anglais
À propos du poste:
Vous évoluerez dans un environnement technique complexe et en constante évolution, en collaboration avec des équipes pluridisciplinaires, des fournisseurs technologiques et les métiers dans un contexte international.
Vous participerez à l’analyse, à la mise en œuvre, à la maintenance et à l’amélioration continue des solutions liées aux données et à leur exploitation, en faisant le lien entre les besoins opérationnels et la réalité technique des systèmes et des intégrations.
Responsabilités:
Ce profil a pour but de venir en support de 2 équipes Datalake et BI sur l’exploitation et le RUN de la plateforme de données.
- Le suivi des différentes plateformes et serveurs
- Le suivi du plan de production et le redémarrage des traitements
- Les montées de version des différents outils
- Le monitoring de manière générale des dysfonctionnements des différents systèmes
- Participer à l’analyse, à la sélection, à la conception technique, au déploiement et à la maintenance de solutions de données.
- Intervenir sur les services de stockage, de traitement, de bases de données, d’orchestration, de Business Intelligence et d’analytique de la plateforme.
- Développer des scripts d’automatisation et d’intégration en Python.
- Lire et comprendre les développements existants en PySpark.
- Intégrer et orchestrer des flux de données et des outils au moyen d’API REST.
- Collaborer avec des équipes pluridisciplinaires, des fournisseurs technologiques et les métiers.
- Contribuer à l’amélioration continue de la disponibilité, de la qualité et de la traçabilité des données.
Environnement technologique:
- Cloud et stockage : AWS, S3.
- Traitement et intégration : EMR, Glue, Lambda, PySpark et Python.
- Data Warehouse et bases de données : Redshift, SQL Server et DynamoDB.
- Orchestration : AWS Step Functions et OPS (Axway Automator).
- ETL : Talend et SAP BODS.
- Analytique : Athena, EMR Studio, SageMaker Studio et SAS.
- DevOps et IaC : GitLab CI/CD et AWS CloudFormation.
Profil recherché:
Vous justifiez de plus de cinq ans d’expérience en Data Engineering et avez travaillé sur des plateformes de données dans des environnements internationaux.
- AWS : au moins trois ans d’expérience et maîtrise de plusieurs services data, tels qu’EMR, Glue, Athena, Redshift ou SageMaker.
- SQL : niveau avancé.
- PySpark : capacité à lire et comprendre les développements existants.
- Python : capacité à développer des scripts d’automatisation et d’intégration, ainsi que des pipelines DevOps pour la mise en production.
- API REST : expérience de l’intégration et de l’orchestration des flux de données et des outils.
- Infrastructure as Code : connaissances de base d’AWS CloudFormation et de GitLab CI/CD.
- ETL : une expérience d’au moins un outil ETL, tel que SAP BODS, sera appréciée.
- Méthodologies : expérience des approches Agile et Scrum.
Compétences personnelles:
Nous recherchons une personne proactive, collaborative, rigoureuse et pragmatique, attentive aux détails, attachée à une documentation structurée et au respect des processus.
Environnement de travail:
- Poste basé à Barcelone, en mode hybride.
- Intégration au sein d’une équipe internationale dont la langue de travail habituelle est l’anglais.
- Collaboration régulière avec les équipes basées en France. xhfqzwm
- Échanges avec des profils techniques, des fournisseurs technologiques et les métiers.