Data Engineer (Databricks, Azure)
MW Consulting · Kraków, Poland ·
- Category
- Data engineering
Design, build, and maintain scalable data pipelines and end-to-end ETL/data architectures in Databricks and Azure, collaborating with data scientists, analysts, and engineers to optimize data flows and ensure system reliability. Core stack: Databricks, Azure services, Python/PySpark, SQL, and Terraform.
Będziesz projektować, budować i utrzymywać skalowalne pipeline'y danych oraz rozwijać architektury danych i procesy ETL end-to-end w środowisku Databricks i Azure. Współpracujesz z data scientistami, analitykami i zespołami inżynierskimi, optymalizujesz przepływy danych i dbasz o niezawodność systemów.
Uwaga: ogłoszenie wskazuje, że możesz być przenoszony między projektami dla różnych domen, a na poziomie seniorskim możesz być obciążony dodatkowymi obowiązkami Team Leadera — warto to uwzględnić przy ocenie stabilności i zakresu roli.
- komercyjne doświadczenie z Databricks
- komercyjne doświadczenie z Azure cloud i usługami (np. Azure Data Factory, Data Lake, SQL Database, Azure Databricks)
- komercyjne doświadczenie z Python i PySpark
- komercyjne doświadczenie z SQL
- znajomość koncepcji Data Engineering: ETL, modelowanie danych, medallion architecture, hurtownie danych, data governance
- komercyjne doświadczenie z Terraform
- angielski na poziomie min. B2