Senior Cloud Data Engineer (Azure)

Szukamy Ciebie, jeśli:

• masz min. 6 lat doświadczenia w pracy z danymi w chmurze Azure(potwierdzone projektami komercyjnymi wdrożonymi na produkcje),
• masz doświadczenie w pracy z narzędziem Terraform,
• masz doświadczenie w pracy ze Databricks,
• masz komercyjne doświadczenie w przetwarzaniu sporych danych przy użyciu JSON,
• posiadasz komercyjne doświadczenie z PySpark,
• korzystasz z SQL na poziomie zaawansowanym i wykorzystujesz go na rozwiązaniach technologicznych MS i nie tylko,
• znasz metodyki i stosujesz biegle Git oraz CI/CD,
• tworzysz i optymalizujesz rozwiązania przetwarzające dane (ETL, ELT, itp.) poprzedzone projektem technicznym oraz alternatywami rozwiązań (np. Apache Airflow)
• potrafisz programować w Python i korzystasz z bibliotek Pandas i/lub NumPy,
• jesteś zaznajomiony z narzędziami: Azure Data Explorer, Azure Data Factory, Azure Data Lake, Azure Databricks, Azure DevOps, Azure Sysnapse Analytics,
• masz doświadczenie z praktykami zwinnymi oraz znasz narzędzia wykorzystywane w procesie wytwarzania oprogramowania, w tym np. Azure DevOps,
• masz wiedzę na temat stosowania mechanizmów związanych z bezpiecznym przechowywaniem i przetwarzaniem danych w chmurze,
• świadomie wykorzystujesz Generative AI w procesie wytwarzania oprogramowania oraz w decyzjach architektonicznych i technologicznych,
• posługujesz się j. angielskim na poziomie średniozaawansowanym (min. B2) oraz swobodnie komunikujesz się w języku polskim.

Praca na tym stanowisku w naszej firmie oznacza:

• Implementowanie i optymalizacja procesów ETL/ELT służących do pozyskiwania, transformacji i udostępniania danych z wielu obszarów biznesowych, w tym systemów operacyjnych, finansowych i raportowych,
• tworzenie oraz utrzymywanie rozwiązań do przetwarzania danych z wykorzystaniem Python, SQL oraz Apache Spark,
• wsparcie inicjatyw związanych z migracją i modernizacją środowisk danych, w tym wdrażaniem Unity Catalog, aktualizacjami platform oraz transformacjami platform danych,
• budowanie i utrzymywanie workflowów w Databricks, rozwiązań opartych o Delta Live Tables (DLT), frameworków sterowanych metadanymi oraz procesów orkiestracji,
• współpraca z architektami, analitykami i interesariuszami biznesowymi w celu przekładania wymagań biznesowych na solidne rozwiązania techniczne,
• współtworzenie i rozwijanie procesów CI/CD, automatyzacji infrastruktury, monitoringu, logowania oraz najlepszych praktyk operacyjnych.

Doświadczenie

• 5 lat

Wynagrodzenie_senior

• 133 – 196 zł/h netto + VAT (B2B)

Typ oferty

• Data Solutions

Technologie

• Azure
• Python
• SQL
• Databrics

Co oferujemy, by pracowało Ci się dobrze:

Język

• angielski B2