Senior data engineer joining a newly created Digital Transformation Office of a European industrial company in Barcelona. Day to day you design and operate scalable data pipelines ingesting industrial data (sensors, PLC, MES) from Kafka into Azure and Databricks, integrate plant and corporate data, and help productionize ML models. Core stack: Python, SQL, Spark, Azure, Databricks, Kafka.
Job-ID: bc98de16-39bc-4004-9f8b-757b7b496a94Reference: J-4353Location: Barcelona, SpainJob type: Full-time, HybridSalary: 60.000
¿Le interesa este puesto? Puede encontrar toda la información relevante en la descripción a continuación.
- 75.000 brutos anualesCategory: DataStack: Python, Azure, Databricks, Kafka, MLOpsContact: , , empresa líder en su sector industrial europeo busca un Data Engineer Senior para unirse a su nueva Oficina de Transformación Digital.Esta es una oportunidad única para tener un impacto significativo en la estrategia de datos e inteligencia artificial de una compañía con un sólido backlog de iniciativas estratégicas.
Te enfocarás en proyectos que buscan mejorar la producción, la eficiencia energética y la logística, generando un valor económico sustancial.No se trata de una posición de mantenimiento de ETLs rutinarios, sino de construir y evolucionar la plataforma de datos que conectará los sistemas industriales con un entorno cloud moderno.
Serás parte fundamental en el diseño y despliegue de soluciones innovadoras, estableciendo las bases para productos de datos avanzados y modelos de Machine Learning.Te incorporarás a un equipo interno de nueva creación, colaborando inicialmente con partners tecnológicos internacionales para una transferencia de conocimiento fluida, asumiendo progresivamente el liderazgo de las soluciones desarrolladas.
Tu misión será clave en la implementación de la ingeniería de datos en un contexto industrial.ResponsibilitiesDiseñar, construir y operar pipelines de datos fiables y escalables, integrando sistemas industriales con la plataforma corporativa de datos.Ingestar información industrial (sensores, PLC, MES) desde Kafka hacia Azure y Databricks.Integrar datos de planta con información corporativa, aplicando buenas prácticas de calidad, observabilidad y trazabilidad.Gestionar grandes volúmenes de datos, incluyendo retos como datos retrasados, duplicidades y reintentos.Colaborar en el gobierno del dato mediante herramientas específicas y participar en la automatización de infraestructura y despliegues.Construir productos de datos reutilizables, mantenibles y bien documentados.Trabajar estrechamente con Data Scientists para la puesta en producción y reentrenamiento de modelos de Machine Learning.RequirementsExperiencia sólida en el diseño, construcción y mantenimiento de pipelines de datos en producción.Dominio de Python y SQL para el desarrollo de soluciones de datos.Experiencia práctica con Spark, Databricks o plataformas Lakehouse equivalentes.Conocimiento avanzado de arquitecturas ETL/ELT y procesamiento de grandes volúmenes de datos.Experiencia con plataformas cloud, preferentemente Microsoft Azure.Habilidades de colaboración con equipos técnicos, stakeholders de negocio y expertos industriales.Nivel profesional alto de inglés, tanto hablado como escrito.Indispensable disponer de vehículo propio para desplazamientos regulares a las instalaciones, ubicadas en una zona industrial del Vallés Occidental.Se valorará muy positivamente:Experiencia específica con Azure Databricks, Spark Structured Streaming y Delta Lake.Conocimiento de Kafka y otras tecnologías de streaming o mensajería.Experiencia con arquitectura Medallion (Bronze, Silver, Gold).Manejo de Terraform, Azure DevOps y procesos de CI/CD.Familiaridad con herramientas de gobierno del dato como Unity Catalog o Microsoft Purview.Integraciones con sistemas empresariales como SAP.Experiencia con datos industriales (sensores, IoT, series temporales, MES, SCADA).Conocimiento de arquitecturas de edge computing y la integración OT/IT.La oportunidad de trabajar y evolucionar una plataforma de datos innovadora.Colaboración con grandes profesionales y partners tecnológicos internacionales.Autonomía y capacidad real para proponer soluciones y buenas prácticas.Modelo de trabajo híbrido flexible con un 50% de teletrabajo, autogestionado según las necesidades del proyecto.Horario de entrada flexible y jornada intensiva durante el verano.Acceso a formación continua y desarrollo profesional. xkdbapo Retribución fija competitiva de entre 60.000 y 75.000 brutos anuales, según experiencia.