Data Engineer

• Projektowanie, implementacja irozwój platform orazprocesów doprzetwarzania danychwczasie rzeczywistym (real-time)i wsadowo
• Budowa irozwój architektury opartej oevent streamingoraz integrację systemów wymieniających dane wczasie rzeczywistym
• Tworzenie ioptymalizacjapipeline’ówdanych orazmodeli danych dla systemów analitycznych ioperacyjnych
• Projektowanie niezawodnych, skalowalnych rozwiązań wewspółpracy zzespołemDevOps
• Wsparcie klientów zobszaru Energy, Utilities iManufacturing wbudowie nowoczesnych platform danych

Kogo poszukujemy?

• Masz minimum3 lata doświadczenia jako DataEngineer
• Cechuje Cię bardzo dobra znajomośćPythoni SQL
• Posiadasz doświadczenie wprojektowaniu ibudowiepipeline’ówdanych, wszczególnościprzetwarzania danych strumieniowych ieventowych
• Znaszarchitekturę event-drivenoraz narzędziado przetwarzania danych wczasie rzeczywistym (np.Apache Kafka, Kafka Connect, Apache Flink, Spark Structured Streaming, Apache Pulsar, Azure Event Hubs, Google Pub/Sub)
• Możesz pochwalić się znajomościąrelacyjnych baz danych oraztechnologii wykorzystywanych dobudowy nowoczesnych platform danych
• Pracaz Git orazCI/CDnie jest Ciobca
• Masz doświadczenie zwybranymi technologiami zobszarów:

1. Open SourceData: Apache Kafka, Spark, Flink, Trino, Hive
2. Chmurypubliczne: Azure, AWS, Google Cloud
3. Orkiestracja iintegracja:Airflow,NiFi
4. Storage: S3-compatible Object Storage, Azure Storage, GCS
5. Formaty danych:Iceberg, Delta Lake
6. Bazydanych: PostgreSQL,TimescaleDB, SQL Server

• Umieszmonitorowaćjakości danych orazdiagnozowaćproblemywydajnościowe
• Nieboisz sięwspółpracy zklientem irozumieszpotrzebybiznesowe
• Cechuje Cię komunikatywnośća Twójjęzyk angielski umożliwiacodzienną pracę