Real-Time Big Data Engineer — Spark, Kafka, Python
HireHi · Barcelona, Spain ·
- Category
- Data engineering
Big data engineer on GiG's Data team in Barcelona, designing ETL processes and real-time data pipelines and building high-performance services for large-scale data processing and analytics. Core stack: Spark, Kafka, NiFi, ClickHouse, SQL, Python/Java, with cloud experience.
GiG’s Data department разрабатывает и поддерживает проекты в реальном времени с большими данными, используя информацию для стратегических решений и роста организации.
Вакансия предполагает проектирование ETL, создание и поддержку data-пайплайнов, а также разработку высокопроизводительных сервисов для обработки и анализа больших массивов данных; требуются знания Spark, Kafka, NiFi, ClickHouse и SQL, опыт работы в облаке и на языках Python/Java.