Data Engineer
Laborintos · Madrid, Spain ·
- Category
- Data engineering
Builds and maintains ETL pipelines using Spark, Hadoop, and cloud tools to process business data, ensuring performance and scalability.
Overview
Importante consultora en tecnología busca un Data Engineer con mínimo 3 años de experiencia como desarrollador y mínimo 1 año de experiencia trabajando en proyectos de Big Data.
Requisitos técnicos
- Experiencia con las tecnologías Spark, YARN, Hadoop, Hive.
- Experiencia con bases de datos relacionales (MySQL).
- Lenguajes de programación.
- Programaciónfuncional.
- Experiencia con Linux y shell scripting.
- Familiarizado con entornos cloud, particularmente Google Cloud Platform (se valorarán conocimientos de AWS o Azure).
- Familiarizado con Agile, GitHub, JIRA/Redmine, ContinuousIntegration).
Responsabilidades
- Participará en el desarrollo y mantenimiento de procesos de extracción, transformación y carga (ETL) sobre datos provenientes de las distintas áreas de negocio.
- Análisis y diseño de los procesos ETL en base a los requerimientos funcionales, teniendo en cuenta también los no funcionales como el rendimiento o la escalabilidad.
- Desarrollo y pruebas unitarias.
- Participación en revisiones de código.
- Automatización de procesos y soporte a IT en el despliegue y mantenimiento.
Contrato a termino indefinido. Modalidad Hibrida.