Data Engineer – Databricks/Azure
Square One Resources · Warszawa, Poland ·
- Category
- Data engineering
Data engineer on an international insurance-sector project building a Solvency II (Pillar 1 & 3) regulatory reporting solution. Day to day: standing up Databricks on Azure from scratch, designing data models and ingestion processes, and preparing large datasets for BI/MI-style reporting.
Data Engineer w międzynarodowym projekcie dla sektora ubezpieczeniowego, obejmującym budowę rozwiązania do raportowania regulacyjnego Solvency II (Pillar 1 i Pillar 3). Będziesz konfigurować i wdrażać Databricks w Azure, projektować modele danych i procesy data ingestion oraz przygotowywać dane na potrzeby raportowania. To oferta dla inżyniera danych z praktycznym doświadczeniem w Databricks i Azure, gotowego pracować w środowisku budowanym od podstaw. Uwaga: ogłoszenie wprost mówi o konfiguracji środowiska od zera — spora część pracy to setup i rozwiązywanie problemów platformowych, a zakres może wykraczać poza czysty data engineering w stronę raportów BI/MI.
- praktyczne, komercyjne doświadczenie z Databricks
- doświadczenie z Microsoft Azure, w szczególności przy konfiguracji środowiska i usług dla Databricks
- doświadczenie w data engineering, w tym data ingestion i data modeling
- doświadczenie w budowaniu i wdrażaniu rozwiązań data platform/data processing
- umiejętność pracy z dużymi zbiorami danych i przygotowywania ich na potrzeby raportowania
- gotowość do pracy w projekcie, gdzie Databricks jest wdrażany jako nowa platforma i środowisko wymaga konfiguracji od podstaw
- dobra znajomość angielskiego