Hadoop & PySpark Data Engineer – Data Lake & Pipelines
Onyx-Conseil · Paris, France ·
- Category
- Data engineering
A data engineer in Paris who develops and maintains a data lake: building data ingestion and prep/transformation flows and keeping PySpark/shell pipelines running, working closely with the app production/devops team. Core stack: Hadoop, PySpark, shell scripting.
Onyx-Conseil recherche un profil Hadoop / PySpark chargé de mettre en œuvre les évolutions du datalake en lien avec l'équipe production applicative / devops. Passionné par le développement et le traitement des données, vous aurez une forte capacité d'analyse et serez autonome pour résoudre des problématiques complexes.
Vos missions incluent l'ingestion de données, le data prep/transformation, la maintenance des pipelines (Pyspark + shell scripting) et le traitement des demandes d'évolution de la